Na CI&T, você poderá atuar como Engenheiro(a) de Dados em um time dedicado à transformação de cadastro de clientes, em um contexto financeiro. A empresa trabalha com soluções de tecnologia e inteligência artificial para apoiar a transformação de negócios. Se você reside na Região Metropolitana de Campinas, será necessária a presença nos escritórios da cidade, conforme a política de frequência vigente.

Responsabilidades

• Desenvolver e manter pipelines de dados ETL/ELT em Azure, utilizando Databricks para processamento e integração
• Entender os impactos das soluções considerando o projeto como um todo
• Automatizar implantações e versionamento de código com CI/CD e GitHub
• Modelar e evoluir tabelas no Unity Catalog, seguindo boas práticas de nomenclatura e versionamento de esquemas
• Projetar e otimizar modelos de dados com foco em escalabilidade, desempenho e governança
• Apoiar migrações para a nuvem, preservando a segurança, a qualidade e a integridade dos dados
• Colaborar com equipes de negócio e ciência de dados na implantação de modelos de inteligência artificial em ambientes de nuvem
• Aplicar técnicas de perfilamento e monitoramento para garantir a qualidade e a consistência dos dados
• Documentar processos, arquiteturas e boas práticas de engenharia de dados

Requisitos obrigatórios

• Experiência sólida com Azure Data Services e Databricks, incluindo PySpark
• Conhecimento de arquitetura medalhão
• Domínio de Python e SQL para manipulação e transformação de dados
• Conhecimento de CI/CD e controle de versão com GitHub
• Conhecimento de modelagem de dados analíticos, abrangendo camadas de ingestão, preparação e consumo
• Vivência em projetos de migração para a nuvem
• Experiência com ETL/ELT e integração de grandes volumes de dados
• Experiência com implantação de modelos de inteligência artificial e ferramentas como Azure ML
• Experiência em projetos de inteligência artificial e automação de pipelines

Diferenciais

• Conhecimento de arquiteturas orientadas a dados e boas práticas de governança
• Vivência em projetos do contexto financeiro
• Participação em iniciativas de gestão de dados mestres (MDM)
• Familiaridade com Databricks MLflow para gestão de modelos
• Atuação em ambientes de lago de dados e armazém de dados

O que esperamos
Esperamos que você una conhecimento técnico e visão abrangente para desenvolver soluções de dados confiáveis, escaláveis e bem governadas. Sua colaboração com equipes multidisciplinares contribuirá para conectar as necessidades do negócio à implementação de soluções em nuvem e inteligência artificial.