Skills
Python
dbt
BigQuery
APIs REST
Data Lake Medallion
MCP Server
Sobre a Vaga
Buscamos uma pessoa Data Engineer Pleno (PL) para construir uma infraestrutura moderna de dados, conectando arquitetura, engenharia de software e inteligência artificial. Você vai desenvolver pipelines e uma base robusta para consumo por agentes de IA em produção.
Responsabilidades
- Projetar a arquitetura do Data Lake Medallion (Bronze/Silver/Gold) com nekt.ai e, quando aplicável, em GCP, AWS ou Azure
- Construir pipelines de ingestão via APIs REST, lidando com paginação, rate limits e OAuth
- Ingerir dados por webhooks e fontes não estruturadas (ex.: transcrições de WhatsApp)
- Modelar métricas de receita no dbt (MRR, NRR, GRR, LTV, CAC e demais indicadores)
- Aplicar MDM (Master Data Management) para unificar entidades entre fontes com identificadores inconsistentes
- Garantir data quality com validações, testes, alertas de freshness e tratamento de nulls e duplicados
- Definir e monitorar SLAs de atualização por fonte
- Expor a camada Gold via MCP Server para consumo pelos agentes do produto
- Documentar decisões arquiteturais, trade-offs e manter dicionário de dados
- Entregar incrementos por sprint (P0, P1 e P2) com valor mensurável
Requisitos
- 2 a 4 anos de experiência com Engenharia de Dados em produção
- Python sólido para ingestão, transformação e orquestração, com código modular, testável e mantível
- Experiência prática com APIs REST (paginação, rate limits, OAuth, tratamento de falhas e reprocessamento)
- Conhecimento de CRMs como HubSpot ou Salesforce (uso ou coleta de dados)
- Arquitetura Medallion (Bronze/Silver/Gold) ou equivalente
- dbt para modelagem SQL com testes e documentação
- Experiência com lakehouse (BigQuery preferencial, Snowflake ou Redshift)
- Conhecimento em cloud storage (GCS, S3 ou Azure)
- Capacidade de documentar decisões e comunicar trade-offs
Beneficios
- Atuação em projetos com impacto real no negócio e conectados ao futuro da IA
- Ambiente que valoriza engenharia de software: código limpo, versionamento com Git, code review e testes automatizados
- Processo com foco em idempotência, robustez (retries) e possibilidade de refatoração sem quebrar o que já está em produção
Esta vaga foi curada e enriquecida pelo 123Vagas para facilitar sua busca. A candidatura é feita no site original: kstack.inhire.app.
Saiba como funciona.