Skills
Azure Databricks
Azure Data Factory
Otimização de pipelines
Sobre a Vaga
Atuará em demandas de negócio, analisando, desenhando e implementando soluções de dados. O foco da posição é otimizar, corrigir e evoluir pipelines em um ambiente Azure, com trabalho em grandes volumes de dados em processos predominantemente batch.
Responsabilidades
- Mapear necessidades do negócio e propor abordagens de dados alinhadas aos objetivos
- Desenhar e implementar soluções utilizando serviços do ecossistema Azure
- Otimizar e corrigir pipelines existentes, garantindo qualidade e confiabilidade
- Desenvolver e manter processos de ingestão e transformação de dados
- Assegurar performance, estabilidade e escalabilidade das rotinas de processamento
- Contribuir para a evolução da arquitetura e das soluções de dados da organização
Requisitos
- Experiência sólida como Engenheiro de Dados Sênior, com capacidade de análise de problemas de negócio
- Experiência prática com Azure Databricks
- Experiência prática com Azure Data Factory
- Conhecimento avançado em otimização e performance de pipelines no Databricks
- Vivência no desenvolvimento e manutenção de pipelines para ambientes com grande volume de dados
- Background em desenvolvimento de software, programação ou engenharia de software
- Conhecimento em modelagem de dados
- Inglês técnico para leitura de documentação e execução das atividades
Beneficios
- Atuação em ambiente híbrido em São Paulo
- Oportunidade de trabalhar com grandes volumes de dados e arquitetura em Azure
- Ambiente voltado à evolução contínua de pipelines e soluções