Skills
Sobre a Vaga
Estamos em busca de um(a) Lead (Senior) Data | Software Engineer para liderar a evolução de uma plataforma de dados em escala de petabytes na AWS. Nesta função, você irá projetar e construir pipelines e serviços de dados altamente escaláveis, resilientes e com alto desempenho, aplicando práticas avançadas de software e engenharia de dados. Você colaborará com times de produto, engenharia e operações para viabilizar soluções de marketing orientadas por dados, acelerar a inovação e garantir escalabilidade e confiabilidade de longo prazo da plataforma.
Responsabilidades
- Projetar, implementar e evoluir uma plataforma de dados AWS em escala de petabytes, aplicando princípios avançados de engenharia, sistemas distribuídos e práticas cloud-native para garantir performance, confiabilidade e escalabilidade.
- Construir e otimizar pipelines de dados altamente escaláveis usando linguagens JVM (Java, Scala, Kotlin, etc.), Spark, Python e serviços cloud-native, assegurando processamento eficiente, resiliente e pronto para produção para suportar análises e produtos downstream.
- Atuar como líder técnico em nível principal, mentorando engenheiros, conduzindo revisões de código de alta qualidade e promovendo boas práticas para elevar a maturidade de engenharia na organização.
- Contribuir para decisões arquiteturais e de design, trabalhando com arquitetos, product owners e liderança de engenharia para orientar a evolução da plataforma alinhada à estratégia do negócio.
- Planejar e entregar iniciativas técnicas complexas, garantindo resultados de alta qualidade, execução previsível e colaboração efetiva em times ágeis de value-stream.
- Garantir prontidão operacional seguindo padrões de codificação, práticas de testes, estratégias de monitoramento e procedimentos de release, apoiando deploys em produção para manter a estabilidade da plataforma.
- Explorar e adotar tecnologias modernas, como integrações GraphQL, bancos de dados vetoriais e técnicas baseadas em IA/LLM, para aprimorar acesso a dados, usabilidade da plataforma e eficiência de desenvolvimento.
Requisitos
- Experiência especialista em software e engenharia de dados em plataformas de dados em larga escala.
- Experiência profunda construindo sistemas em escala de petabytes usando linguagens baseadas em Java, como Scala e Apache Spark.
- Forte expertise no ecossistema de dados da AWS (Glue, S3, Athena, Managed Airflow, Iceberg).
- Compreensão avançada de sistemas distribuídos e workloads altamente paralelizados.
- Boas habilidades em otimização de consultas, particionamento de dados e padrões eficientes de armazenamento.
- Domínio do ecossistema cloud (AWS é obrigatório; Azure/GCP são diferenciais).
- Experiência influenciando arquitetura e design de plataforma de longo prazo.
- Capacidade de liderança técnica, com boas revisões de código e mentoria.
- Experiência prática em ambientes ágeis e colaboração com múltiplos times de engenharia.
- Experiência forte com versionamento e colaboração em múltiplos repositórios (Git, GitHub, Bitbucket).
- Graduação em Ciência da Computação, Engenharia ou área relacionada, ou experiência equivalente.
- Inglês avançado e disponibilidade para viajar para São Carlos/SP quando necessário.
Beneficios
- Iniciativas de diversidade e inclusão, com grupos de afinidade (ExperianPride, Ubuntu, Women in Experian, Aspire e Connecting Generations).
- Programas de desenvolvimento profissional.