Você vai ajudar a projetar, desenvolver e otimizar soluções de dados escaláveis, transformando grandes volumes de informação em resultados confiáveis e eficientes. Na CI&T, trabalhará com tecnologias modernas e colaborará com equipes técnicas e stakeholders do negócio para atender às necessidades de dados.
Responsabilidades
- Projetar, desenvolver e manter pipelines de dados escaláveis usando Databricks, Apache Spark, SQL e Python ou Scala
- Processar e transformar grandes conjuntos de dados com eficiência
- Monitorar e otimizar pipelines e fluxos de trabalho, aprimorando desempenho, escalabilidade, capacidade de processamento e confiabilidade
- Colaborar com cientistas de dados, analistas, engenheiros e stakeholders para traduzir necessidades em soluções técnicas
- Implementar verificações de qualidade e práticas de governança de dados
- Investigar problemas complexos em dados e pipelines, identificar causas e propor soluções sustentáveis
- Manter documentação técnica e contribuir para padrões e boas práticas de engenharia
Requisitos obrigatórios
- Experiência profissional sólida em engenharia de dados, especialmente no desenvolvimento e desenho de pipelines
- Experiência prática com Databricks e Apache Spark
- Conhecimento sólido de SQL e experiência com grandes conjuntos de dados
- Domínio de Python ou Scala aplicado à engenharia de dados
- Experiência com Microsoft Azure e soluções de dados em nuvem
- Capacidade analítica e de resolução de problemas complexos relacionados a dados
- Boa comunicação em inglês e português e habilidade para colaborar com equipes, clientes e stakeholders
- Bacharelado em Ciência da Computação, Tecnologia da Informação, Engenharia ou área relacionada
Diferenciais
- Facilidade para colaborar com equipes multidisciplinares e transformar necessidades de dados em soluções práticas
- Interesse em aprimorar a confiabilidade, o desempenho e a qualidade de soluções de dados
O que esperamos
Você contribuirá com sua experiência técnica para criar soluções de dados robustas e confiáveis, trabalhando em parceria com diferentes áreas. Esperamos que compartilhe boas práticas, investigue desafios com atenção e ajude a transformar necessidades de negócio em soluções eficientes.