lead em engenharia de dados - plataforma aftermarket ia-nativa

Sobre a vaga

A Truelogic busca uma pessoa Lead em Engenharia de Dados para atuar remotamente na Colômbia em uma plataforma aftermarket com foco em IA.

O trabalho envolve pipelines de dados, modelagem, automação e boas práticas de engenharia usando Python, SQL, Databricks, Spark e dbt.

Responsabilidades

• Desenvolver e manter pipelines de dados escaláveis em Databricks, Spark e PySpark.
• Trabalhar com modelos, transformações e qualidade de dados usando dbt e SQL.
• Organizar fluxos com Databricks Asset Bundles, Delta Lake e Unity Catalog.
• Apoiar práticas de versionamento, revisão de código e automação com Git, GitHub e GitHub Actions.
• Criar e manter testes e validações com pytest, ruff e ferramentas de observabilidade de dados.
• Colaborar com times de produto e engenharia para entregar dados confiáveis para a plataforma.

Requisitos

• Experiência sênior em Engenharia de Dados.
• Boa prática com Python, SQL, Spark, PySpark e Databricks.
• Experiência com dbt e construção de pipelines de dados em produção.
• Conhecimento de Delta Lake, Unity Catalog e Spark UI.
• Vivência com Git, GitHub, CI/CD e testes automatizados.
• Experiência com serviços Azure, como Azure Data Factory, Azure Data Lake e Azure Key Vault.
• Capacidade de liderar decisões técnicas e orientar outras pessoas do time.

Diferenciais

• Experiência com Elementary para observabilidade de dados.
• Conhecimento de Databricks Asset Bundles.
• Uso de ferramentas assistidas por IA, como Claude Code, no fluxo de desenvolvimento.

Formato de trabalho

Vaga remota para profissionais em Bogotá ou em outras regiões da Colômbia.