Skills
Pipelines de dados (batch e streaming)
Kafka/Kinesis
Azure e Databricks
PySpark/Apache Spark
SQL e BI (Power BI/Tableau)
Sobre a Vaga
A 3A RIVA, escritório credenciado à XP Investimentos, está em expansão e busca um(a) Data Engineer Pleno para atuar no time de Dados. O objetivo é viabilizar escala, eficiência e qualidade nas etapas de busca, processamento e uso de dados, apoiando o negócio e o cliente com soluções inteligentes e contínuas.
Responsabilidades
- Projetar, implementar e operar pipelines de dados em tempo real com streaming (Kafka, Kinesis ou similares)
- Construir soluções de ingestão, transformação e enriquecimento para consumo em análises e dashboards
- Assegurar observabilidade, tolerância a falhas e monitoramento de latência dos pipelines
- Atuar em conjunto com times de dados e produto para definir requisitos e APIs de dados
- Documentar arquitetura, padrões de dados e políticas de governança para fluxos em tempo real
- Otimizar custos e performance em nuvem e em clusters distribuídos
- Realizar análise de inconsistências e apoiar a melhoria da qualidade dos dados
- Desenvolver dashboards e relatórios em ferramentas de BI (Power BI, Tableau ou equivalente)
- Modelar, validar e integrar dados de múltiplas fontes, garantindo consistência
- Desenvolver e otimizar consultas SQL e automatizar rotinas de extração e tratamento
- Acompanhar KPIs e propor automações e otimizações para processos analíticos
Requisitos
- Graduação em áreas como Ciência de Dados, Computação, Sistemas de Informação, Matemática, Estatística, Engenharia, Economia, Administração ou correlatas
- Experiência com ferramentas de BI (Power BI, Tableau, QlikView ou Looker)
- Conhecimento em linguagens para engenharia de dados, como Python, PySpark, Apache Spark e/ou SQL
- Experiência com ETL e pipelines de dados (batch e streaming)
- Familiaridade com bancos relacionais e não relacionais e com soluções de armazenamento (como Data Lakes)
- Conhecimento em Azure para gerenciamento de dados e análises
- Experiência com Databricks para processamento e análise de grandes volumes de dados
- Compreensão de práticas de CI/CD
Beneficios
- Ambiente dinâmico e colaborativo, com cultura empreendedora
- Oportunidade de crescimento junto a uma marca em expansão
- Wellhub | Gympass com opções de academias
- TotalPass com opções de academias