engenheiro(a) de dados sênior - azure databricks

Sobre a vaga

Procuramos um(a) Engenheiro(a) de Dados Sênior para liderar projetos de engenharia de dados usando Azure Databricks. Você trabalhará com arquitetura de dados em nuvem, pipelines de processamento e soluções MLOps de alto impacto.

Responsabilidades

• Projetar e implementar pipelines de dados escaláveis usando Apache Spark e Databricks
• Arquitetar soluções de dados em Azure com Delta Lake e Unity Catalog
• Liderar implementação de práticas MLOps com MLflow
• Desenvolver e otimizar processamento de dados com Structured Streaming
• Colaborar com times de dados e engenharia para definir padrões de qualidade
• Mentorizar engenheiros(as) junior na plataforma

Requisitos

• 5+ anos de experiência em engenharia de dados
• Expertise em Azure Databricks, Apache Spark e Delta Lake
• Proficiência em Python e SQL
• Experiência com pipelines de dados e CI/CD
• Conhecimento de MLOps e MLflow
• Familiaridade com DBT e Delta Live Tables
• Git e versionamento de código

Diferenciais

• Experiência com Cloudera e Hadoop
• Conhecimento de arquitetura de dados complexas em larga escala
• Certificações Azure Data Engineer