O que esta vaga pede
Databricks
Apache Spark (PySpark ou Scala)
SQL e Modelagem Dimensional (Fact/Dimension, SCD)
Ver se você combina
Sobre a Vaga
Atuará em uma plataforma digital de serviços financeiros, ajudando a construir uma base de dados confiável para analytics e métricas de negócio. A posição é focada em pipelines escaláveis, modelagem dimensional e operação de dados em ambiente lakehouse.
Responsabilidades
- Projetar, desenvolver e manter pipelines de transformação de dados em escala, integrando APIs, SaaS e fontes corporativas
- Processar, padronizar e otimizar datasets estruturados e semiestruturados (JSON) vindos de sistemas heterogêneos
- Modelar dados dimensionais (Fact, Dimension e Event) seguindo boas práticas de Data Warehouse
- Construir datasets analíticos e métricas para apoiar o modelo de Single Source of Truth
- Desenvolver pipelines incrementais, idempotentes e escaláveis com Databricks e Apache Spark
- Otimizar workloads do Spark para processamento distribuído em larga escala
- Implementar validações automáticas de qualidade, monitoramento, alertas e rotinas de suporte operacional
- Realizar reconciliação de dados entre plataformas legadas e cloud durante iniciativas de migração
- Produzir documentação técnica e apoiar transferência de conhecimento para times internos
- Colaborar com stakeholders para entregar soluções de dados com qualidade e escalabilidade
Requisitos
- Experiência avançada em Engenharia de Dados ou Analytics Engineering
- Experiência prática com Databricks, incluindo Workflows, Jobs e Unity Catalog
- Experiência avançada com Apache Spark (PySpark ou Scala)
- Processamento de grandes volumes de dados (centenas de milhões de registros)
- Conhecimento de Delta Lake e/ou Apache Iceberg
- SQL avançado, com foco em consultas otimizadas
- Domínio de modelagem dimensional: grain definition, Fact/Dimension e SCD (Slowly Changing Dimensions)
- Construção de pipelines incrementais e idempotentes
- Práticas modernas de engenharia: Git, CI/CD, testes automatizados e code quality
- Boa capacidade analítica e de resolução de problemas
Beneficios
- Assistência médica e programas de bem-estar
- Apoio a aprendizado contínuo e reembolso
- Programas de reconhecimento e eventos do time
- Compensação por esporte e bônus de indicação
- Equipamentos de alto nível e flexibilidade de trabalho híbrida
Organizada e reescrita por nós. A candidatura é no site da empresa (job-boards.greenhouse.io) — daqui você sai preparado.
Saiba como funciona.