Data Engineering Lead | CatExpert.ai

Data Engineering Lead | CatExpert.ai

Presencial em Campinas/SP, Brasil

Área: Global Analytics & Technology | S&D Analytics

Escopo: Global

Sobre a oportunidade

A equipe de S&D Analytics busca um(a) Data Engineering Lead para liderar a infraestrutura de dados do CatExpert.ai, plataforma global de Category Management da AB InBev, atualmente presente em mais de 15 mercados e em expansão contínua.

Esta posição terá papel fundamental na definição da estratégia e arquitetura de dados da plataforma, garantindo a entrega de soluções robustas, escaláveis e de alta qualidade que apoiam decisões de sortimento, espaço e planogramas para equipes de Category Management em todo o mundo.

O(a) profissional será responsável pela liderança de uma equipe global de Data Engineers, atuando em parceria com Product Managers, Data Scientists, especialistas em metodologia e stakeholders internacionais.

Principais responsabilidades

Arquitetura e Gestão da Plataforma de Dados

• Liderar a arquitetura de dados de ponta a ponta do CatExpert.ai, desde a ingestão até a disponibilização de dados para consumo analítico.
• Definir direcionamentos técnicos para soluções de engenharia de dados, automação e uso de ferramentas de Inteligência Artificial aplicadas ao desenvolvimento, como Databricks Genie, AgentBricks e GitHub Copilot Agentic Solutions.
• Projetar, desenvolver e manter pipelines escaláveis utilizando Azure Data Factory, Azure Databricks e Azure Synapse Analytics.
• Garantir desempenho, confiabilidade e eficiência operacional dos pipelines, monitorando indicadores como tempo de execução, taxa de falhas e consumo computacional.
• Desenvolver soluções capazes de suportar processamento em lote e em tempo real para grandes volumes de dados estruturados e não estruturados provenientes de diversos mercados.
• Assegurar que a arquitetura sustente o crescimento global da plataforma e o aumento da demanda de usuários e processamento.

Qualidade, Governança e Segurança de Dados

• Ser responsável pela qualidade, integridade e segurança dos dados utilizados pelo CatExpert.ai.
• Implementar processos de validação, correção e gerenciamento de dados mestres (Master Data Management).
• Definir e garantir a aplicação de políticas de governança, controle de acesso e conformidade com os padrões globais da companhia.
• Monitorar continuamente a saúde dos pipelines e atuar de forma proativa na prevenção e resolução de incidentes.

Liderança e Desenvolvimento de Equipe

• Liderar, desenvolver e orientar uma equipe composta por 4 Data Engineers, distribuídos entre Campinas e Bangalore.
• Promover excelência técnica por meio de revisões de código, boas práticas de engenharia de dados, versionamento, testes e automação.
• Fomentar uma cultura de protagonismo, colaboração, melhoria contínua e inovação.
• Garantir distribuição equilibrada das demandas e desenvolvimento constante dos membros da equipe.

Parceria com Negócio e Stakeholders

• Atuar como principal referência de Data Engineering para o CatExpert.ai.
• Trabalhar em parceria com Product Managers, Data Scientists e equipes de mercado para traduzir necessidades de negócio em soluções escaláveis.
• Apoiar a implementação da plataforma em novos mercados, assegurando que integrações, pipelines e padrões de qualidade estejam preparados antes do lançamento.
• Comunicar de forma clara e proativa o status dos projetos, riscos, dependências e oportunidades de melhoria.

Requisitos

Formação

• Graduação em Ciência da Computação, Engenharia, Tecnologia da Informação ou áreas correlatas.
• Pós-graduação ou mestrado serão considerados diferenciais.

Experiência Obrigatória

• Entre 7 e 10 anos de experiência em Engenharia de Dados.
• Experiência prévia em posições de liderança técnica ou gestão de equipes.
• Vivência sólida com os serviços Microsoft Azure:
• Azure Data Factory
• Azure Databricks
• Azure SQL Database
• Azure Data Lake Storage Gen2
• Azure Synapse Analytics
• Conhecimento avançado em SQL, PySpark e Python.
• Histórico comprovado na construção e sustentação de plataformas de dados e pipelines de alta escala em ambientes produtivos.
• Experiência com governança, qualidade e gestão de dados.
• Vivência na liderança de equipes distribuídas globalmente.

Diferenciais

• Experiência em empresas de bens de consumo, varejo ou FMCG.
• Conhecimento de dados de varejo, POS, Category Management, Space Planning ou Planogramas.
• Experiência com ferramentas de Inteligência Artificial aplicadas à Engenharia de Dados.
• Conhecimento em Apache Airflow ou ferramentas similares de orquestração.
• Experiência com Docker, Azure Kubernetes Service (AKS) e MLflow.
• Vivência na integração de pipelines de dados com APIs e soluções de Machine Learning.

Competências Técnicas

Essenciais

• Arquitetura e Engenharia de Dados em Azure.
• Desenvolvimento avançado em Python, PySpark e SQL.
• Modelagem de dados, Data Warehousing e processos ETL/ELT.
• Processamento de dados em lote e tempo real.
• Governança, qualidade e segurança de dados.
• Git, CI/CD, testes automatizados e boas práticas de desenvolvimento.
• Capacidade de resolver problemas complexos e construir soluções escaláveis.

Desejáveis

• Databricks Genie, AgentBricks e GitHub Copilot Agentic Solutions.
• Apache Airflow.
• Docker e AKS.
• MLflow e integração com modelos de Machine Learning.

Idiomas

• Inglês avançado ou fluente.
• Português ou Espanhol em nível intermediário.

Por que essa posição?

Esta é uma oportunidade para liderar um produto global estratégico da AB InBev, influenciando a evolução de uma plataforma utilizada por diversos mercados ao redor do mundo. O papel combina liderança de pessoas, definição de arquitetura de dados, inovação tecnológica e colaboração internacional, oferecendo alto nível de exposição e impacto nos resultados do negócio.

INFORMAÇÕES BENEFICIOS:

• 40 dias de home office;
• Vale refeição ou alimentação ifood;
• Vale transporte;
• Bônus;
• Plano de saúde e Telemedicina;
• Convênio odontológico;
• Convênio Farmácia;
• Seguro de vida;
• Instituto Ambev de Previdência Privada;
• Auxílio Material Escolar;
• Cesta de Natal e Kit Congelado;
• Brinquedos de Natal;
• Empresa cidadã (licença maternidade e paternidade) e presente do bebê;
• Desconto mensal em produtos AMBEV;
• Wellhub (Gympass);
• Fretado;
• Abono anual referente a um salário.

Show more Show less