Estamos em busca de um(a) Azure Data Engineer para atuar em projetos desafiadores com foco em pipelines
What you'll do:
- Projetar e implementar arquiteturas de dados escaláveis e resilientes em ambientes Databricks e Azure.
- Otimizar pipelines de dados em Apache Spark, garantindo performance e eficiência de recursos.
- Automatizar processos de engenharia de dados utilizando CLI e SDKs em ambientes DevOps.
- Atuar na sustentação e evolução de ambientes de produção com alta disponibilidade e criticidade.
- Integrar e orquestrar dados provenientes de sistemas SAP e outras fontes corporativas.
- Garantir governança, qualidade e rastreabilidade dos dados em todo o ciclo de vida.
- Colaborar com times multidisciplinares para entregar soluções de dados alinhadas às necessidades de negócio.
- Contribuir com boas práticas de engenharia, revisão de código e cultura DevOps.
Skills and Experiences
- Certificação Databricks.
- Sólida experiência com Apache Spark e otimização de jobs em larga escala.
- Domínio de Databricks (Delta Lake, Workflows, Unity Catalog) e Azure Data Services.
- Experiência com automação de pipelines e infraestrutura via CLI e SDKs (Databricks CLI, Terraform, Azure CLI).
- Vivência em ambientes de produção com requisitos de alta disponibilidade e tolerância a falhas.
- Conhecimento em integração de dados com sistemas SAP (SAP BW, SAP HANA, SAP Data Services).
- Experiência com versionamento de código (Git), CI/CD e containers (Docker).
- Capacidade de atuar com autonomia, liderar iniciativas técnicas e colaborar em times ágeis.