Engenheiro de Dados | DataHub | Presencial

Sobre a Vaga

No Close-up nós trabalhamos com dados, informações e tecnologia para ajudar a transformar a área da saúde. Somos uma empresa de conteúdo e serviços para a indústria farmacêutica e contribuímos para o conhecimento das tendências do mercado, ajudando com eficiência e transparência a estreitar as relações entre laboratórios e profissionais médicos.

Estamos em busca de um Engenheiro de Dados - DataHub para nos apoiar.

Responsabilidades

• Construir, manter e evoluir pipelines de ingestão e transformação de dados no Snowflake
• Integrar dados provenientes de múltiplas fontes, como sistemas de CRM e ERP, APIs, planilhas e arquivos, serviços de armazenamento, bancos de dados e sistemas locais, e processos de web scraping
• Estruturar, manter e evoluir as camadas de dados: RAW (dados brutos), TRUSTED (dados tratados, padronizados, validados e submetidos a regras de qualidade) e CURATED (dados organizados, enriquecidos e disponibilizados para consumo analítico, integrações e aplicações)
• Implementar mecanismos de governança, qualidade, segurança e rastreabilidade dos dados
• Monitorar os processos de carga, identificando falhas, gargalos e oportunidades de otimização
• Atuar na padronização e integração de dados entre os diferentes países da América Latina
• Documentar pipelines, regras de transformação, integrações e modelos de dados
• Apoiar a evolução da arquitetura de dados e das iniciativas de inteligência artificial do DataHub

Requisitos

• Experiência com Snowflake, incluindo modelagem de dados, ingestão e transformação de dados, otimização de consultas e monitoramento e otimização de custos
• Experiência com Azure Data Factory
• Conhecimento avançado em SQL
• Experiência com processos de ETL e ELT
• Experiência com integração de múltiplas fontes e formatos de dados
• Experiência com desenvolvimento em Python
• Conhecimento de práticas de DevOps e implementação de pipelines de CI/CD
• Experiência com monitoramento, tratamento de erros e observabilidade de pipelines de dados
• Conhecimentos desejáveis: conhecimento do Snowflake Cortex e da preparação de agentes de inteligência artificial no ambiente Snowflake
• Conhecimentos desejáveis: conhecimento de modelos de inteligência artificial, Machine Learning e Large Language Models
• Conhecimentos desejáveis: experiência com soluções de web scraping e tratamento de alterações nas estruturas das fontes de dados
• Conhecimentos desejáveis: conhecimento de segurança, controle de acesso e governança de dados no Snowflake

Beneficios

• Assistência Médica com coparticipação e parceria Welhub
• Assistência Odontológica sem coparticipação para o colaborador
• Cartão Benefícios Flex (vale-alimentação ou vale-refeição)
• Desconto Farmácia
• Seguro de Vida
• Day Off de Aniversário
• Parcerias Educacionais (faculdades, idiomas, TI e Dados)
• Auxílio Creche para filhos até 1 ano a contar da licença maternidade