Data Engineer (Databricks / Azure)

Required skills

Formação superior em Ciência da Computação, Engenharia, Sistemas de Informação ou áreas correlatas. Experiência anterior como Data Engineer. Experiência em migração de dados (ambientes legados para cloud ou entre plataformas). Experiência prática com Databricks. Conhecimento em Microsoft Azure, incluindo: Azure Data Factory, Azure Data Lake Storage, Azure Synapse Analytics e Azure SQL. Domínio de SQL e modelagem de dados. Experiência com Python ou Scala. Conhecimento em Delta Lake e arquitetura Lakehouse.

Preferred skills

Certificação em Databricks. Experiência com CI/CD para pipelines de dados. Conhecimento em Infraestrutura como Código (Terraform, ARM). Experiência com otimização de performance em Spark. Conhecimento em governança de dados.

Technologies

Databricks, Microsoft Azure, Azure Data Factory, Azure Data Lake Storage, Azure Synapse Analytics, Azure SQL, SQL, Python, Scala, Delta Lake, Lakehouse.

Responsibilities

Projetar, desenvolver e manter pipelines de dados escaláveis (batch e streaming). Atuar em projetos de migração de dados (on-premises para cloud, modernização de plataformas, etc.). Desenvolver e otimizar soluções utilizando Databricks. Construir processos de ETL/ELT seguindo boas práticas de engenharia de dados. Trabalhar em conjunto com times técnicos e de negócio para levantamento de requisitos. Garantir qualidade, governança e segurança dos dados. Monitorar, otimizar performance e custo das soluções em nuvem. Investigar e resolver problemas em pipelines de dados em produção. Documentar arquiteturas, processos técnicos e estratégias de migração.

Seniority

Domain

Cloud, Data & Analytics, Digital Transformation