- Buscamos uma
- Pessoa Engenheira de Dados Sênior para desenvolver soluções de integração e
- processamento de dados, com foco em qualidade, desempenho e confiabilidade.
Seu desafio será transformar dados de diferentes origens em informações
consistentes, rastreáveis e prontas para consumo por aplicações e áreas de
negócio. A atuação envolve a construção de pipelines, a organização de camadas
de dados e a implementação de regras de transformação e validação.
Você trabalhará em parceria com arquitetura, desenvolvimento, qualidade e áreas
de negócio, com participação direta na implementação, nas revisões técnicas e
na evolução da solução.
Responsabilidades e atribuições
- Desenvolver e
evoluir pipelines de ingestão, transformação e disponibilização de dados,
seguindo boas práticas de engenharia.
- Implementar modelos e transformações com SQL e Python, além de fluxos de
- orquestração com controle de dependências e tratamento de falhas.
- Preservar os dados recebidos e sua origem, garantindo rastreabilidade,
- controle de versões e possibilidade de reprocessamento.
- Implementar validações estruturais e de negócio, deduplicação e
reconciliação, registrando inconsistências de forma compreensível para as áreas
responsáveis.
- Traduzir regras de negócio em transformações e cálculos reproduzíveis, com
- atenção à precisão e à documentação dos resultados.
- Disponibilizar dados e arquivos para sistemas consumidores, respeitando
- contratos versionados, integridade e compatibilidade entre aplicações.
- Construir rotinas idempotentes e mecanismos de recuperação, evitando
- duplicidade ou perda de dados em reexecuções e falhas de publicação.
- Otimizar consultas, particionamento e processamento distribuído, acompanhando
- desempenho, consumo de recursos e custo das execuções.
- Criar testes automatizados de dados e de contrato, monitorar pipelines e
- investigar falhas junto aos times envolvidos.
- Documentar regras e contratos, participar de revisões de código e apoiar o
- desenvolvimento técnico do time.
Requisitos e qualificações
Formação
Superior completo: todos os cursos são bem vindos! Conhecimento necessários: - Experiência
sólida em engenharia de dados, com atuação prática na construção e sustentação
de pipelines em produção no databricks
- Domínio de SQL e experiência com Python para tratamento e integração de
dados.
- Experiência com processamento distribuído, organização de camadas de dados e
- armazenamento de grandes volumes de informação.
- Experiência com ferramentas de transformação e orquestração de dados,
- incluindo testes, documentação, dependências e tratamento de falhas.
- Vivência com armazenamento em nuvem e boas práticas de organização, acesso e
- publicação de dados.
- Conhecimento de modelagem de dados, cargas incrementais, evolução de schemas,
- qualidade e reconciliação de dados.
- Capacidade de projetar processamentos rastreáveis e reexecutáveis, com
- controle de identidade, versão e integridade do conteúdo.
- Prática com Git, revisão de código, testes automatizados e integração e
- entrega contínuas.
- Autonomia para investigar problemas e propor melhorias, com comunicação clara
- para discutir regras e resultados com pessoas de tecnologia e negócio.
Informações adicionais
CONHEÇA NOSSOS BENEFÍCIOS
Alguns dos nossos benefícios são flexíveis para que você possa distribuí-los de acordo com suas necessidades, interesses e momento de vida.
São eles
- All Points (Programa de pontos para passagens áreas e hospedagens)
- Assistência Médica
- Assistência Odontológica
- Seguro de vida
- Convênio para Pet
- Mobilidade (incluindo opção de combustível e Uber, 99)
- Reembolso Flex (óculos, vacinas, educação, shows e outros)
- Vale Refeição e/ou Vale Alimentação.
Outros benefícios
- Birthday off
- Wellhub (Gympass)
- Clube Alelo com diversos descontos em lojas e farmácias
- Licença Maternidade de 180 dias
- Licença Paternidade de 30 dias
- Auxílio creche no primeiro ano do bebê
- Vale Transporte conforme a demanda do projeto ou área
- Programa de bônus anual
- Comissionamento por indicação de novos clientes.
PROGRAMAS DE DESENVOLVIMENTO
Um dos pontos fortes de ser Biper é que ousamos em pensar como empreendedores e moldamos nosso futuro com nossa capacidade de pensar minuciosamente e agir com três passos à frente, pavimentando o caminho para o futuro que nossos clientes querem viver. E para isso, precisamos estar constantemente aprendendo e reaprendendo, somos #LifeLongLearning. Na BIP temos programas consolidados a nível Global e nacional para que você tenha uma jornada de desenvolvimento, crescimento e liberdade para você conquistar o que sonha. Aqui você é o protagonista da sua carreira! Vamos juntos nessa? Confere os principais programas que a BIP pode te oferecer para você chegar aonde deseja: Um centro de CAPACITAÇÃO e FORMAÇÃO Global com os conteúdos e cursos mais atualizados do mercado
- Flex Time - um momento da sua semana dedicado para o seu desenvolvimento
- Programas de mentoria com Líderes referências em sua atuação
- Avaliação de Desempenho semestral
- Cultura de Feedback e 1:1 recorrentes com sua liderança e time
- Acompanhamento de um Plano de Desenvolvimento personalizado pra você e com seus objetivos
- Darwin - Programa global de formação de jovens talentos, para desenvolver soft e hard skills
- Grounding – Um programa Global de formação para os profissionais recém contratados em todo o mundo que estão no começo da carreira de consultoria
- Induction - Onboarding Internacional conduzido por Heads de RH e negócio para os novos entrantes da Bip de todos os países para promover nossa cultura, valores, proposito e apresentar nossos programas de iniciativa Global. Spinnaker: Treinamento focado em aprimorar habilidades estratégicas de Gerentes e Gerentes Seniores, apoiando e facilitando o desenvolvimento de negócios dentro de um ecossistema complexo.
