Skills
Sobre a Vaga
Na Leega, você vai atuar em um projeto temporário de até 4 meses, com possibilidade de continuidade, apoiando a modernização e a evolução de pipelines e bases analíticas na Google Cloud. A vaga é para Pessoa Jurídica (PJ) e modelo remoto.
Responsabilidades
- Realizar engenharia reversa de lógicas complexas desenvolvidas em PySpark, convertendo para SQL otimizado no BigQuery
- Utilizar ferramentas de IA para acelerar a conversão de pipelines e automatizar a validação por testes
- Modernizar e construir fluxos de ingestão substituindo ferramentas legadas por serviços nativos do GCP, como Datastream, Dataflow e Cloud Run, orquestrados pelo Cloud Composer
- Gerenciar e otimizar dados em Apache Iceberg integrados via BigLake, garantindo performance e controle de custos
- Desenvolver e executar frameworks de testes automatizados para validar equivalência entre ambientes (volumetria, chaves de negócio e agregações)
- Conduzir contagens por tabela e partição, reconciliação por chaves de negócio e verificação de integridade com checksum/hash
- Validar agregações de indicadores, conferindo somas, contagens distintas, mínimos e máximos
Requisitos
- Experiência sólida com Google Cloud Platform, com foco em BigQuery, GCS e Cloud Composer (Airflow)
- Atuação profissional mínima de 6 anos em SQL avançado e Python/PySpark
- Experiência prática com Open Table Formats, incluindo conversão e manipulação de Apache Iceberg (e contexto com Delta)
- Conhecimento em orquestração de transformações com Dataform ou dbt
- Habilidade para resolver desafios complexos de performance e schema evolution em cenários de alta volumetria (escala de terabytes)
Beneficios
- Trabalho remoto
- Projeto temporário com duração de até 4 meses e possibilidade de continuidade
- Ambiente com capacitação constante e cultura orientada a ética, transparência e trabalho em equipe