BossaBoxVerificada
Engenheiro(a) de Dados
Sobre a empresa
A BossaBox gente conecta profissionais sênior a projetos de tecnologia de clientes que escolhemos a dedo. Você atua como PJ, de forma remota, alocado em um time do cliente, mas com a Bossa junto durante toda a jornada cuidando da relação, do seu desenvolvimento e do match certo. Não é body shop: a gente só coloca alguém num projeto quando faz sentido pros dois lados. Mais detalhes sobre a Bossa aqui: https://bossabox.com/prolancers
Sobre a vaga
Se você é apaixonado por construir soluções de Engenharia de Dados desde a arquitetura até a execução e busca atuar em uma operação de dados de alto volume no setor financeiro, esta é a oportunidade para você. Buscamos alguém que não apenas opere processos existentes, mas que lidere a evolução de nossa plataforma de dados na AWS. O desafio já está lançado: conduzir a transição arquitetural de Data Lake para um modelo Lakehouse, com autonomia real, trabalhando em ambiente dinâmico e com demandas pouco estruturadas.
Responsabilidades
- Evoluir e sustentar a plataforma de Engenharia de Dados em AWS
- Construir e orquestrar pipelines utilizando Airflow
- Atuar em processamento distribuído (Spark/EMR) em consonância com a evolução da plataforma
- Liderar a evolução para o modelo Lakehouse (Iceberg) e contribuir na camada de transformação (dbt)
- Realizar consultas analíticas (Trino/Athena) e desenvolver APIs internas (FastAPI)
- Garantir a observabilidade dos pipelines e a governança financeira de custos da plataforma
Requisitos obrigatórios
- Experiência profissional consolidada em Python
- Domínio prático recente de AWS como stack nativa (S3, Glue, EMR, Athena)
- Vivência com Airflow para orquestração de pipelines em produção
- Perfil construtor, com histórico de decisões e ownership sobre arquitetura de plataformas de dados
Diferenciais
- Experiência com Spark e processamento distribuído em escala
- Conhecimentos sobre Iceberg ou arquitetura Lakehouse (Delta é considerado transferível)
- Atuação com dbt e modelagem de transformação de dados
- Desenvolvimento com FastAPI ou construção de serviços internos
- Conhecimento em streaming e CDC (Kafka, Flink, Debezium, DMS)
- Familiaridade com o mercado financeiro
O que esperamos
Você terá autonomia para influenciar e conduzir decisões arquiteturais, entregando soluções inovadoras e robustas para desafios complexos do ambiente financeiro. Esperamos sua proatividade, pensamento crítico e capacidade de estruturar caminhos de evolução tecnológica, mesmo em cenários de demanda pouco estruturada. Aqui você será agente de transformação, construindo a próxima geração de plataformas de dados.