Skills
Python
PySpark
Apache Spark
Hadoop
HiveQL
SQL
Power BI
ElasticSearch
GitHub
ETL
Data Visualization
Business Intelligence
Sobre a Vaga
Na EY, você vai atuar em projetos de Financial Services (FSO), apoiando clientes do setor financeiro com soluções e tecnologia para enfrentar desafios do mercado de forma integrada.
Como Engenheiro(a) de Dados Pleno, você terá papel central no desenvolvimento de pipelines e na evolução da plataforma de dados, apoiando a transformação digital e a inovação nos projetos.
Responsabilidades
- Desenvolver e manter pipelines de ETL usando Python e PySpark
- Processar dados em larga escala com Apache Spark
- Gerenciar e apoiar rotinas de dados em Hadoop
- Escrever consultas em Hive (HiveQL) para extração e processamento
- Implementar e integrar buscas com ElasticSearch
- Colaborar com a equipe utilizando GitHub e boas práticas de versionamento
- Monitorar desempenho de jobs e tratar problemas de execução
- Documentar processos, padrões e melhores práticas do time
- Atuar com Power BI e/ou ferramentas de visualização para apoiar análises e indicadores
Requisitos
- Ensino superior completo ou em andamento em áreas como Informática, Matemática, Estatística, Economia, Administração, Engenharias ou correlatas
- Experiência comprovada como Engenheiro(a) de Dados
- Proficiência em Python para scripts, manipulação de dados e desenvolvimento de ETL
- Conhecimento em SQL para consultas e manipulação de dados
- Experiência com PySpark para processamento e transformação de dados
- Vivência com Apache Spark para processamento em larga escala
- Conhecimento de Hadoop para armazenamento e processamento
- Capacidade de escrever consultas HiveQL
- Uso de GitHub para colaboração em projetos
- Experiência com Power BI ou outras ferramentas de Data Visualization e Business Intelligence
- Inglês básico (técnico)
Beneficios
- Ambiente de trabalho global, diverso e inclusivo
- Programas internos e iniciativas voltadas à equidade
- Conjunto de benefícios conforme políticas da EY (consulte o site de benefícios)
- Oportunidades de desenvolvimento e capacitação para o futuro