Skills
Databricks
PySpark
SQL
Data Quality
DataOps
CI/CD
Great Expectations
Soda
Airflow
Azure Data Factory
Git
Data Modeling
Data Observability
Sobre a Vaga
Atuará no time de Data Quality, garantindo confiabilidade, observabilidade e escalabilidade da nossa plataforma de dados. Você será responsável por evoluir pipelines e criar mecanismos de validação e monitoramento para manter a qualidade e a governança dos dados.
Responsabilidades
- Projetar, construir e evoluir pipelines de dados escaláveis e resilientes
- Definir e implementar frameworks de qualidade de dados, incluindo validação, monitoramento e alertas
- Conduzir análises de causa raiz e apoiar a resolução de incidentes relacionados a dados
- Trabalhar junto às equipes de BI, Analytics e Engenharia para assegurar dados confiáveis e bem governados
- Promover boas práticas de DataOps, incluindo CI/CD, versionamento e testes
- Contribuir com a arquitetura e evolução da plataforma de dados
- Atuar como referência técnica, mentorando colegas e influenciando práticas entre times
Requisitos
- Experiência sólida com Databricks, PySpark e SQL
- Atuação prática no desenvolvimento de pipelines de dados em escala
- Conhecimento avançado em modelagem de dados
- Experiência com plataformas de dados em nuvem (Azure, AWS ou GCP)
- Experiência com ferramentas de orquestração (ex.: Azure Data Factory, Airflow)
- Vivência com frameworks/ferramentas de Data Quality (ex.: Great Expectations, Soda ou similares)
- Compreensão de padrões de arquitetura de dados (Data Lake, Lakehouse etc.)
- Aplicação de práticas de DataOps, incluindo CI/CD e controle de versão (Git)
Beneficios
- Trabalho 100% remoto
- Ambiente de melhoria contínua e foco em confiabilidade dos dados
- Atuação com tecnologias modernas de dados e colaboração entre áreas