Skills
Snowflake
Databricks
Apache Spark
SQL
Python
dbt
Airflow
ETL/ELT
Migração Snowflake para Databricks
Sobre a Vaga
Estamos buscando um Engenheiro de Dados Sênior para atuar em um projeto de migração Snowflake para Databricks. Você irá apoiar as atividades de migração e garantir a confiabilidade do processamento de dados entre as plataformas.
Responsabilidades
- Dar suporte às frentes de migração de dados entre Snowflake e Databricks
- Projetar e implementar pipelines escaláveis em Snowflake e Databricks
- Construir e otimizar ingestão e transformações a partir de diferentes fontes
- Migrar e melhorar fluxos existentes de ETL/ELT e regras de transformação
- Desenvolver transformações com SQL, Python e dbt (ou ferramentas equivalentes)
- Aplicar processamento baseado em Apache Spark no ecossistema Databricks
- Otimizar desempenho, escalabilidade, custos e manutenibilidade dos pipelines
- Automatizar orquestração e rotinas com ferramentas como Airflow (ou similares)
- Garantir qualidade e confiabilidade dos dados durante migração e desenvolvimento
- Atuar com stakeholders técnicos e de negócio para entender requisitos e entregar soluções
Requisitos
- Experiência sênior em Engenharia de Dados
- Forte vivência prática com Snowflake
- Forte vivência prática com Databricks (DBX) e processamento baseado em Spark
- Experiência em projetos de migração Snowflake-to-Databricks (preferencial)
- Excelentes habilidades em SQL e transformações complexas
- Experiência com Python e ferramentas modernas de engenharia de dados
- Conhecimento de processos ETL/ELT e desenvolvimento de pipelines
- Experiência com orquestração (ex.: Airflow ou similar)
- Comunicação em espanhol (obrigatório) e inglês técnico para leitura/escrita e conversação
- Disponibilidade para alinhar horários com fusos do LATAM
Beneficios
- Atuação em projeto desafiador de migração e modernização de plataforma de dados
- Ambiente com autonomia e colaboração entre times técnicos e de negócio
- Possibilidade de trabalho remoto com alinhamento por fuso do LATAM
- Mentoria e oportunidades de aprendizado e desenvolvimento contínuo
Esta vaga foi curada e enriquecida pelo 123Vagas para facilitar sua busca. A candidatura é feita no site original: jobs.smartrecruiters.com.
Saiba como funciona.