Skills
Sobre a Vaga
Estamos buscando um(a) Engenheiro(a) de Dados AWS para atuar em projetos de dados com foco em ingestão, processamento, armazenamento e consumo analítico e de IA. Você vai participar da evolução da plataforma, garantindo governança, qualidade e segurança dos dados.
Responsabilidades
- Organizar, coletar e processar grandes volumes de dados usando ferramentas de ETL
- Manter e evoluir pipelines de dados, assegurando acesso seguro e conformidade
- Criar métricas e painéis para apoiar decisões com base em dados confiáveis
- Modernizar a arquitetura de dados com foco em Lakehouse, governança e preparação para consumo analítico e IA
- Estruturar modelagem dimensional para consumo por times de negócio (dashboards e relatórios)
- Aplicar governança no ciclo de vida do dado: ingestão, processamento, armazenamento, transformação, consumo e controle
Requisitos
- Experiência com coleta, transformação e carga de dados (ETL)
- Python e/ou PySpark
- Cloud AWS com atuação em serviços como Glue, EMR, Athena, Lambda, Step Functions, S3, Lake Formation, IAM e CloudWatch
- Conhecimento em bancos e modelagem NoSQL, incluindo MongoDB, DynamoDB e Hadoop
- Experiência com Lakehouse usando Apache Iceberg (versionamento, evolução de schema, particionamento e otimização)
- Domínio de query engines para grandes volumes: Athena, Trino, Presto ou Spark SQL, com uso de formatos colunares como Parquet e ORC
- Modelagem dimensional (fato e dimensão, granularidade, chaves, hierarquias, métricas e indicadores)
- Experiência com dados estruturados, semiestruturados e não estruturados
- Execução de testes unitários e testes de performance
- Boas práticas de segurança, controle de acesso e monitoramento em nuvem
Beneficios
- Atuação em regime remoto
- Ambiente voltado à modernização e melhores práticas em dados e governança
- Oportunidade de contribuir com iniciativas de qualidade, observabilidade e prontidão para IA