ANL ENGENHARIA DE DADOS SR - CUSTODIA DE ATIVOS - 834267

# Sobre a vaga

Somos a Comunidade de Custódia de Ativos e buscamos uma pessoa Engenheira de Dados Sênior para contribuir com a evolução da nossa plataforma, em um ambiente dinâmico, colaborativo e alinhado à cultura Ituber.

Nosso desafio é construir e evoluir soluções de dados escaláveis, seguras e resilientes, garantindo informações confiáveis e de qualidade para apoiar os processos e as jornadas de negócio. Buscamos uma pessoa que conecte conhecimento técnico e entendimento do negócio para propor soluções sustentáveis, considerando as necessidades dos nossos clientes e os impactos na operação.

Você atuará na construção, sustentação e evolução de pipelines e produtos de dados, desde a integração de diferentes fontes até a transformação e disponibilização das informações. Terá responsabilidade pelas entregas de ponta a ponta, com atenção à qualidade, governança, observabilidade, desempenho e eficiência de custos.

Como pessoa sênior, esperamos que tenha autonomia para conduzir desafios técnicos, investigar problemas complexos e contribuir para decisões de arquitetura e implementação. Sua atuação também envolverá colaboração com profissionais de engenharia, arquitetura, produtos e negócio, além do compartilhamento de conhecimento e da disseminação de boas práticas de engenharia.

Valorizamos atitude de dono, colaboração, foco no cliente e motivação para aprender coisas novas. Procuramos alguém que questione de forma construtiva, identifique oportunidades de melhoria e contribua para a evolução das soluções e do time.

# Principais responsabilidades
- Construir e evoluir pipelines de dados, contemplando ingestão, transformação, integração e disponibilização de informações provenientes de diferentes fontes, com foco em confiabilidade, escalabilidade e desempenho.
- Traduzir necessidades e regras de negócio em soluções de dados, definindo modelos, transformações e validações que atendam às necessidades das áreas e dos sistemas consumidores.
- Sustentar as soluções em produção, acompanhando execuções, investigando falhas e inconsistências, atuando na causa raiz dos problemas e implementando mecanismos seguros de recuperação e reprocessamento.
- Garantir qualidade, segurança e observabilidade, incorporando testes automatizados, controles de acesso, validações de dados, monitoramento e alertas ao ciclo de desenvolvimento e operação.
- Melhorar continuamente a arquitetura e a eficiência das soluções, avaliando desempenho, consumo de recursos, custos, oportunidades de reutilização, automação e redução de débitos técnicos.
- Contribuir como referência técnica para o time, participando de desenhos de solução e revisões de código, documentando fluxos e decisões e compartilhando conhecimento com os demais profissionais.

# Conhecimentos técnicos essenciais (Hard Skills)

## SQL avançado
Domínio na construção e otimização de consultas complexas, incluindo junções, CTEs, funções de janela e agregações. Capacidade de investigar inconsistências, validar regras de negócio e analisar o desempenho de consultas sobre grandes volumes de dados.

## Python para Engenharia de Dados
Experiência sólida no desenvolvimento de pipelines, transformações, integrações e automações. Conhecimento de organização e modularização de cdigo, tratamento de exceções, registro de logs e testes automatizados.

## Apache Spark / PySpark
Experiência prática com processamento distribuído e transformação de grandes volumes de dados, incluindo particionamento, estratégias de leitura e escrita e otimização de jobs.

## AWS aplicada a dados
Experiência na construção e operação de soluções de dados em AWS, com foco em S3, Glue e Athena. Vivência com orquestração de fluxos, utilizando serviços como Step Functions, e com automações e integrações por meio de Lambda.

## Pipelines, arquitetura e modelagem de dados
Experiência com processos ETL/ELT, integração de múltiplas fontes e modelagem de dados para diferentes necessidades de consumo. Conhecimento de organização de camadas de dados, data lakes e princípios de Data Mesh, incluindo responsabilidade por domínio e disponibilização de dados como produto.

## Qualidade, governança e segurança de dados
Experiência na implementação de controles de completude, unicidade, consistência e integridade. Conhecimento de catálogo, metadados, rastreabilidade e controle de acesso, incluindo aplicação de permissões em AWS com IAM e familiaridade com Lake Formation.

## Boas práticas de engenharia e testes
Experiência com Git, revisão de código, testes unitários e de integração, utilizando ferramentas como Pytest. Capacidade de estruturar soluções testáveis, documentadas e de fácil manutenção.

## CI/CD e infraestrutura como código
Vivência com pipelines de integração e entrega contínuas aplicados a soluções de dados, incluindo validação automatizada e implantação entre ambientes. Experiência com infraestrutura como código, preferencialmente utilizando Terraform.

## Observabilidade e confiabilidade operacional
Experiência com monitoramento de pipelines e dados, incluindo logs, métricas, alertas e investigação de falhas, utilizando ferramentas como CloudWatch. Conhecimento de estratégias de recuperação e reprocessamento, controle de duplicidades e acompanhamento dos prazos de disponibilização dos dados.

## Performance e eficiência de custos
Capacidade de identificar gargalos e otimizar consultas, processamento e armazenamento, considerando volume, frequência de execução, particionamento e consumo de recursos. Aplicação de práticas de FinOps na evolução das soluções.

# Diferenciais
- Utilização de IA para aceleração de refinamento, desenvolvimento e implementação de projetos (utilização de SDD e frameworks relacionados é um diferencial ainda maior).
- Experiência com modernização de soluções de dados e integração com ambientes legados, incluindo mainframe e fontes externas à AWS.
- Vivência com processamento em streaming e integração orientada a eventos, utilizando tecnologias como Kafka.
- Experiência com implementação de Data Mesh em ambiente corporativo, camadas SOR, SOT e SPEC e ferramentas internas de entrega, como IU Pipes.
- Conhecimento de processos e dados do setor financeiro, especialmente relacionados a empréstimos, custódia e finanças.

# Competências comportamentais
- Atitude de dono e autonomia: assumir responsabilidade pelas entregas, antecipar riscos e acompanhar os resultados das soluções em produção.
- Colaboração e comunicação: construir soluções em conjunto, compartilhar conhecimento e comunicar problemas, alternativas e impactos com clareza para públicos técnicos e de negócio.
- Foco no cliente e no negócio: compreender as necessidades atendidas pelos dados e considerar seus impactos na definição e priorização das soluções.
- Capacidade analítica e senso crítico: investigar problemas, avaliar alternativas e propor melhorias que equilibrem qualidade, simplicidade e sustentabilidade.
- Aprendizado contínuo: demonstrar curiosidade e disposição para aprender, aplicar novos conhecimentos e contribuir para o desenvolvimento técnico do time.

Competências: Atitude de dono , Capacidade analítica , Colaboração , Foco em resultados , Organização , Paixão por desafios , Resiliência e flexibilidade , Senso Crítico
Formação: Superior Completo - Ciência Da Computação , Superior Completo - Análise De Sistemas , Superior Completo - Tecnologia Da Informação , Superior Completo - Engenharia
Certificação:
Competências Técnicas:

O Itaú irá utilizar os dados fornecidos para fins de processos seletivos, inclusive em bancos de vagas alocados em plataformas terceiras. Caso deseje solicitar oposição a este uso, ou exercer quaisquer um dos seus direitos, entre em contato através de nossos canais, disponíveis na Política de Privacidade de candidatos do Itaú Unibanco (https://www.itau.com.br/privacidade/candidatos/). Não há necessidade de aceitar, trata-se apenas de uma ciência.