Engenheiro de Dados GCP Sênior

A Leega Consultoria busca um Engenheiro de Dados Sênior para atuar na construção de um hub de dados centralizado no Google Cloud. O profissional integrará uma squad multidisciplinar, sendo responsável por transformar dados de sistemas corporativos e planilhas em camadas confiáveis para análises, modelos de IA e painéis, em um projeto para uma grande indústria do setor de materiais de construção.

Responsabilidades

• Construir e manter pipelines de ingestão de dados a partir de ERPs, sistemas de qualidade e produção, portais, planilhas e fontes externas.
• Orquestrar extração, agendamento e tratamento de falhas dos pipelines com Apache Airflow, seguindo um padrão único entre as frentes.
• Implementar a arquitetura em camadas Medalhão (Bronze, Silver e Gold), com dado bruto no Cloud Storage e modelagem no BigQuery.
• Modelar entidades de negócio e cadastros compartilhados (como cliente, produto e terceiros) e apoiar a camada semântica que alimenta os painéis.
• Reconciliar os dados do hub com os sistemas de origem, garantindo qualidade e consistência.
• Preparar e disponibilizar entidades Gold para os modelos de IA e machine learning desenvolvidos pelo time.
• Versionar código e conduzir deploys entre os ambientes de desenvolvimento, homologação e produção.
• Monitorar a execução dos pipelines e corrigir falhas, buscando uma operação sem intervenção manual.
• Documentar pipelines, modelos de dados e decisões técnicas, e apoiar a capacitação do time do cliente na entrega final.
• Participar das revisões semanais e validar entregas com as áreas de negócio.