pleno em engenharia de dados - azure

Sobre a vaga

A IBM busca uma pessoa de Engenharia de Dados Pleno para atuar com soluções de dados em Azure, em modelo híbrido no Brasil.

O trabalho envolve construção e manutenção de pipelines, integração de dados e apoio a ambientes analíticos usando ferramentas modernas de dados.

Responsabilidades

• Desenvolver e manter pipelines de dados em ambientes Azure.
• Trabalhar com dados em Azure Data Lake, Azure Synapse e Databricks.
• Criar transformações, consultas e modelos usando SQL, Spark, Python e/ou Scala.
• Apoiar rotinas de orquestração com Apache Airflow e dbt.
• Atuar com cenários de streaming e integração usando Azure Event Hub, Streaming Analytics e Kafka.
• Colaborar com times de dados, analytics e negócio para entregar bases confiáveis para análise e tomada de decisão.

Requisitos

• Experiência em Engenharia de Dados.
• Conhecimento em Azure Data Lake, Azure Synapse e Azure Databricks com Spark.
• Boa prática com SQL.
• Experiência com Python e/ou Scala.
• Vivência com pipelines, ingestão, transformação e qualidade de dados.

Diferenciais

• Experiência com Microsoft Power BI.
• Conhecimento em Salesforce Data Cloud.
• Experiência com Apache Airflow, dbt, Azure Event Hub, Streaming Analytics ou Managed Streaming for Apache Kafka.

Local de trabalho

Modelo híbrido, com possibilidades de atuação em Hortolândia, Fortaleza, São Paulo, Brasília, Rio de Janeiro e outros estados do Brasil.