← voltar para vagas
engenheiro de dados pleno
Sobre a vaga
Buscamos um(a) Engenheiro(a) de Dados Pleno para integrar o time de dados. O trabalho será no modelo híbrido em São Paulo, com foco em pipelines de dados escaláveis e eficientes.
Responsabilidades
- Projetar e implementar pipelines de dados usando Apache Spark e Spark Structured Streaming
- Trabalhar com Databricks, Autoloader e Delta Lake para ingestão e transformação de dados
- Escrever consultas Spark SQL e otimizar performance
- Colaborar com times de engenharia e análise para garantir qualidade dos dados
- Manter versionamento com Git e boas práticas de desenvolvimento
Requisitos
- Experiência com Apache Spark, Python e Databricks
- Conhecimento em Spark Structured Streaming e Spark SQL
- Familiaridade com Delta Lake e Autoloader
- Noções de Git e versionamento de código
- Inglês técnico para leitura de documentação
Benefícios
- Vale-refeição ou alimentação
- Plano de saúde e odontológico
- Modelo híbrido com flexibilidade
- Oportunidade de crescimento em uma empresa líder