← voltar para vagas

engenheiro de dados pleno

@ EXPERIAN · ·HÍBRIDO · SÃO PAULO, SÃO PAULO, BRASIL

Sobre a vaga

Buscamos um(a) Engenheiro(a) de Dados Pleno para integrar o time de dados. O trabalho será no modelo híbrido em São Paulo, com foco em pipelines de dados escaláveis e eficientes.

Responsabilidades

  • Projetar e implementar pipelines de dados usando Apache Spark e Spark Structured Streaming
  • Trabalhar com Databricks, Autoloader e Delta Lake para ingestão e transformação de dados
  • Escrever consultas Spark SQL e otimizar performance
  • Colaborar com times de engenharia e análise para garantir qualidade dos dados
  • Manter versionamento com Git e boas práticas de desenvolvimento

Requisitos

  • Experiência com Apache Spark, Python e Databricks
  • Conhecimento em Spark Structured Streaming e Spark SQL
  • Familiaridade com Delta Lake e Autoloader
  • Noções de Git e versionamento de código
  • Inglês técnico para leitura de documentação

Benefícios

  • Vale-refeição ou alimentação
  • Plano de saúde e odontológico
  • Modelo híbrido com flexibilidade
  • Oportunidade de crescimento em uma empresa líder
§

>> antes de aplicar