Skills
Python
Apache Airflow
Data Mesh
Governance as Code
PostgreSQL
Parquet
pytest
Contratos YAML
Sobre a Vaga
Atuará na liderança técnica da especificação, evolução e qualidade dos produtos de dados, garantindo alinhamento entre pipelines, contratos, modelos, indicadores e integrações com a arquitetura, padrões de engenharia e governança. Você também será responsável por traduzir necessidades das áreas consumidoras em especificações técnicas.
Responsabilidades
- Especificar e evoluir produtos de dados seguindo arquitetura e critérios de governança
- Definir arquiteturas para ingestão, transformação, consolidação e persistência
- Garantir padrões de qualidade, testabilidade, escalabilidade e manutenibilidade
- Priorizar e acompanhar backlog técnico e funcional
- Revisar contratos, DAGs, código, testes e documentação técnica
- Estabelecer critérios de processamento, reprocessamento, historização e qualidade dos dados
- Identificar riscos arquiteturais e oportunidades de padronização e melhoria contínua
- Apoiar implantações, troubleshooting e rotinas de operação em produção
- Orientar tecnicamente o time com boas práticas de engenharia de dados
Requisitos
- Formação em Computação ou áreas relacionadas
- Conhecimento em arquitetura de software aplicada a plataformas de dados
- Experiência avançada em Python (orientação a objetos, typing, modularização e Design Patterns)
- Conhecimentos em Data Mesh, Governance as Code e Arquitetura Medalhão
- Experiência com modelagem de produtos de dados
- Vivência com contratos YAML como interface técnica e operacional
- Conhecimento em Apache Airflow (DAGs, dependências, parametrizações e execução)
- Experiência com Parquet e PostgreSQL (particionamento, snapshots, idempotência, qualidade e historização)
- Design de APIs e integração com fontes externas (autenticação, paginação, resiliência e tratamento de falhas)
- Testes automatizados com pytest (mocks, testes de contrato e testes de plugins)
- Experiência com code review, gestão de branches, versionamento, releases e critérios de rollback
Beneficios
- Atuação híbrida em São Paulo/SP
- Ambiente com foco em governança, qualidade e evolução contínua dos produtos de dados
- Oportunidade de liderança técnica em engenharia de dados