Skills
Microsoft Azure
Apache Spark
Apache Airflow
Python
CI/CD
dbt
Docker
YAML
Observabilidade e Governança de Dados
Inglês avançado
Sobre a Vaga
Estamos buscando um(a) Engenheiro(a) de Dados Pleno/Sênior para atuar em projetos de Data & AI. O foco da posição é construir, sustentar e evoluir pipelines de dados em ambiente cloud, entregando soluções escaláveis, eficientes e alinhadas às necessidades do negócio.
Responsabilidades
- Desenvolver, manter e otimizar pipelines de dados escaláveis
- Aplicar processamento distribuído com Apache Spark
- Orquestrar rotinas e workflows com Apache Airflow
- Construir soluções em Python com boas práticas de engenharia
- Atuar em cloud, com ênfase em Microsoft Azure
- Implementar pipelines de deploy com práticas de CI/CD
- Utilizar e gerenciar automações e configurações em YAML/YML
- Empregar Docker para conteinerização de aplicações e serviços
- Desenvolver, testar e documentar transformações de dados com dbt
- Garantir qualidade, confiabilidade e performance junto a times de engenharia, analytics e negócio
- Apoiar decisões técnicas sobre arquitetura, performance, observabilidade e governança de dados
Requisitos
- Inglês avançado (requisito eliminatório) para reuniões, documentação técnica e comunicação com stakeholders
- Experiência com Azure e serviços relacionados a dados
- Conhecimento sólido em Python
- Experiência com Apache Spark
- Experiência com Apache Airflow
- Vivência com práticas de CI/CD
- Experiência com desenvolvimento e configuração usando YAML/YML
- Conhecimento em Docker
- Experiência com dbt para transformação e modelagem de dados
- Familiaridade com versionamento de código, testes, documentação e boas práticas
Beneficios
- Modelo de trabalho remoto
- Vaga também para PcD
- Atuação em projetos de Data & AI com oportunidades de evolução técnica
Esta vaga foi curada e enriquecida pelo 123Vagas para facilitar sua busca. A candidatura é feita no site original: fcamara.gupy.io.
Saiba como funciona.