LikeRemote[Job-29751] Engenheiro de Dados Sênior| IA Generativa, Dados e MDM , Brazil
🇧🇷 Brazil
Python
Azure
GitHub
Machine Learning
Devops
SQL
Analyst
[Job-29751] Engenheiro de Dados Sênior| IA Generativa, Dados e MDM , Brazil
from 🇧🇷 Brazil
Na CI&T , ajudamos grandes empresas a transformar o potencial da AI em impacto real nos negócios com AI Deployment, execução AI-native e tech-integrated business solutions.
Com 30 anos de experiência em transformação tecnológica, aceleramos inovação com expertise em agentic SDLC, application modernization, Data & AI, martech e business strategy.
Somos 8.000 CI&Ters em mais de 25 países, colaborando para construir soluções com impacto real. AI já faz parte da forma como trabalhamos, evoluímos e inovamos todos os dias.
- Desenvolver, otimizar e manter pipelines de dados escaláveis utilizando Databricks, Spark e PySpark.
- Atuar na integração, transformação, tratamento e disponibilização de dados cadastrais em larga escala.
- Construir e manter produtos de dados em ambiente Big Data na nuvem, assegurando escalabilidade, performance, confiabilidade e qualidade.
-Trabalhar com dados do domínio de Cadastro de Clientes, apoiando iniciativas relacionadas a Golden Record, qualidade de dados, governança e MDM.
- Projetar e implementar soluções de dados que apoiem sistemas inteligentes baseados em IA Generativa, agentes e multiagentes.
- Preparar, estruturar e disponibilizar dados para consumo por modelos de Machine Learning, LLMs, agentes autônomos e workflows inteligentes.
- Apoiar a construção de agentes e multiagentes capazes de analisar dados cadastrais em larga escala.
- Apoiar a identificação de padrões, inconsistências, gaps, duplicidades, anomalias e oportunidades de melhoria em dados cadastrais.
- Desenvolver mecanismos de dados para geração de alertas, recomendações explicáveis e suporte à tomada de decisão.
- Aplicar técnicas de Analytics e Machine Learning para detecção de anomalias, classificação, clusterização e scoring de dados cadastrais.
- Apoiar estratégias de qualificação, enriquecimento, priorização e governança de dados.
- Utilizar IA Generativa para apoiar a geração, evolução, validação e explicação de regras de negócio.
- Explorar e apoiar a implementação de arquiteturas como RAG, agentes autônomos, multiagentes e workflows inteligentes.
- Atuar com processamento de dados em tempo quase real utilizando Kafka.
- Apoiar a produtização de modelos de Machine Learning no Databricks, aplicando conceitos de MLOps.
- Criar, manter e evoluir esteiras de CI/CD utilizando GitHub e GitHub Actions.
- Garantir boas práticas de desenvolvimento, assegurando que as soluções sigam padrões de qualidade, eficiência, manutenibilidade e governança.
- Otimizar o uso dos dados disponíveis para maximizar seu valor para as áreas de negócio e tecnologia.
- Colaborar com equipes de MDM, Dados, Tecnologia e Negócio, garantindo que as soluções desenvolvidas sejam mensuráveis, governáveis e aplicáveis.
- Apoiar refinamentos técnicos e funcionais, garantindo clareza, viabilidade e aderência das histórias às necessidades do projeto.
- Participar do desenho AS-IS e TO-BE, documentando processos atuais e futuros, identificando débitos técnicos, riscos e oportunidades de melhoria.
- Atuar na identificação de débitos técnicos e propor melhorias contínuas em arquitetura, processos, dados e soluções.
- Forte conhecimento em Python para engenharia de dados, automação, análise de dados e apoio a soluções de IA.
- Sólido conhecimento em SQL e exploração de dados estruturados.
- Experiência com Databricks, PySpark e Spark.
- Experiência na construção, otimização e sustentação de pipelines de dados escaláveis.
- Experiência em ambientes cloud, preferencialmente Azure Databricks.
- Conhecimento ou experiência com Gemini para apoio a soluções GenAI.
- Conhecimento em IA Generativa, LLMs e aplicações inteligentes baseadas em dados.
- Vivência com RAG, workflows inteligentes, recomendação baseada em dados e automação cognitiva.
- Experiência com técnicas de Machine Learning aplicado, incluindo anomalias, classificação, clustering e scoring.
- Experiência com processamento de dados em tempo quase real, preferencialmente com Kafka.
- Experiência com produtização de modelos de Machine Learning no Databricks e práticas de MLOps.
- Experiência com esteiras de CI/CD, especialmente GitHub e GitHub Actions.
- Domínio de boas práticas de engenharia de dados, versionamento, testes, revisão de código e qualidade de dados.
- Conhecimento em qualidade de dados, governança, MDM e Golden Record.
- Experiência prática com multiagentes, automação cognitiva ou sistemas baseados em decisões autônomas.
- Vivência em ambientes regulados.
- Conhecimento em estratégias de enriquecimento, deduplicação, matching e consolidação de dados cadastrais.
- Experiência com uso de IA no desenvolvimento, como GitHub Copilot, prompt engineering e code review automatizado.
