O que esta vaga pede
AWS Lake Formation
Amazon EMR
Amazon Redshift
AWS Glue
Data Lakehouse
Apache Spark
SQL
Python
Ver se você combina
Sobre a Vaga
Engenheiro de Dados Sênior na Leega Consultoria 100% remoto, para conceber e implementar arquiteturas de dados complexas e de alta escala no ecossistema AWS.
Responsabilidades
- Conceber e implementar arquiteturas de dados de alta escala no ecossistema AWS, aplicando o paradigma de Data Lakehouse
- Atuar como referência técnica do time, orientando decisões de arquitetura e disseminando boas práticas de engenharia de dados
- Desenhar e evoluir soluções resilientes e seguras, considerando alta disponibilidade, recuperação de falhas e crescimento de volume
- Construir e otimizar processamento distribuído de grandes volumes em EMR e Glue
- Estruturar camadas de armazenamento e de consumo analítico, incluindo Redshift e o data lake corporativo
- Implementar controles de governança e de segurança de dados com Lake Formation, incluindo catalogação e controle de acesso
- Conduzir a otimização de custos das soluções de dados, avaliando trade-offs de arquitetura, armazenamento e processamento
- Definir e sustentar padrões técnicos, de qualidade e de documentação das soluções entregues
- Traduzir objetivos de negócio em arquiteturas de dados, atuando junto a áreas técnicas e de negócio
Requisitos
- Experiência consolidada como Engenheiro de Dados em arquiteturas complexas e de alta escala
- Experiência prática com Lake Formation, EMR, Redshift e Glue
- Domínio do paradigma de Data Lakehouse
- Domínio de SQL para consultas analíticas, transformação de dados e otimização de performance
- Experiência com Python aplicado à engenharia de dados e processamento distribuído
- Vivência com Apache Spark e processamento distribuído de grandes volumes
- Conhecimento avançado de governança corporativa de dados (catalogação, linhagem, qualidade e controle de acesso)
- Experiência em desenho de soluções seguras e resilientes (disponibilidade e recuperação de falhas)
- Vivência em otimização de custos em ambientes de dados em nuvem
- Atuação como referência técnica, conduzindo decisões de arquitetura e orientando outros engenheiros
Beneficios
- Atuação 100% Remoto
Organizada e reescrita por nós. A candidatura é no site da empresa (leega.gupy.io) — daqui você sai preparado.
Saiba como funciona.