
Senior Data Engineer (GCP)
- 🇧🇷 Brazil
- On-site
- Senior
- 6 hours ago
- GCP
- Airflow
- PySpark
- BigQuery
- Defender
- Java
- Python
- SQL
- Scala
- MySQL
- PostgreSQL
- Apache Kafka
- Pub/Sub
- Devops
- Terraform
- Docker
- Git
- GitHub
- GitHub Actions
- Jira
Olá, nós somos o CESAR!
Somos um centro de inovação e de educação que há quase 30 anos forma pessoas e impulsiona organizações, potencializando suas estratégias digitais. Resolvemos problemas complexos e desafiadores em um ambiente de trabalho descontraído, descentralizado e repleto de benefícios para nossos colaboradores, que atuam como protagonistas, interagindo diretamente com clientes de escala global.
Sobre a Vaga
ComoSenior Data Engineer (GCP), sua missão será liderar a estratégia de arquitetura de dados e construir soluções escaláveis para uma novaPlataforma de Telemetria e Observabilidade. Você será responsável por transformar dados complexos de manufatura, reparo e atualização de software em produtos confiáveis e úteis.
Buscamos um profissional com forte visão arquitetural para estabelecer princípios, padrões e melhores práticas (catálogo, linhagem, segurança e interoperabilidade) para a plataforma. Você atuará de pontaa ponta, desde a concepção até a operação, garantindoo suporte a análises, IA e aprendizado de máquina. Topa? Vamos nessa!
Como será o seu dia a dia (Responsabilidades)
- Estratégia e Arquitetura: Liderar a estratégia de arquitetura de dados da nova plataforma, estabelecendo diretrizes de catálogo, linhagem e observabilidade. Projetar, desenvolver e gerenciar modelos de dados (conceituais, lógicos e físicos) para a Fábrica de Software.
- Desenvolvimento de Produtos de Dados: Desenvolver produtos analíticos e pipelines escaláveis utilizando Airflow, DataProc, PySpark e BigQuery no GCP, aplicando padrões de ingestão emstreaming ebatch.
- Qualidade e Governança: Realizar oprofiling de dados, definir métricas de qualidade, documentar fluxos (mapeamento e linhagem) e manter dicionários de dados. Viabilizar a descoberta e integração (onboarding) de fontes diversas.
- Suporte a IA e Monitoramento: Construir pipelines para monitorar a qualidade dos dados e o desempenho de modelos analíticos, soluções de IA/ML e soluções baseadas em agentes (agentic solutions).
- Operação e Otimização: Monitorar pipelines em produção garantindo os SLAs estabelecidos. Otimizar continuamente a infraestrutura e os produtos para obter o máximo desempenho, segurança, confiabilidade e redução de custos.
- Consultoria e Liderança Técnica: Realizar Provas de Conceito (PoCs), traduzir casos de uso em requisitos técnicos, defender soluções bem projetadas e guiar as equipes de produto no uso de ferramentas do GCP.
O que precisamos que você tenha (Requisitos Obrigatórios)
- Experiência Consolidada: 4 anos ou mais de atuação comprovada no mercado em Engenharia de Dados, desenvolvimento de produtos de dados e lançamento de softwares, com vivência de ponta a ponta (do conceito à operação).
- Linguagens de Programação: Proficiência em pelo menos três das seguintes linguagens:Java, Python, Spark, SQL ou Scala.
- Ecossistema Cloud (GCP) e Dados: Forte experiência com Google BigQuery, orquestração deworkflows (Airflow/Astronomer) e bancos de dados relacionais (MySQL, PostgreSQL, SQL Server).
- Streaming e Arquitetura Distribuída: Domínio em plataformas de mensageria/streaming em tempo real (Apache Kafka, GCP Pub/Sub), arquitetura de microsserviços para processamento de dados em larga escala e consumo de APIs REST.
- Cultura DevOps: Experiência prática na construção de pipelines e infraestrutura como código utilizando Terraform, Docker, Git/GitHub, GitHub Actions e Tekton.
- Ferramentas Ágeis: Vivência com ferramentas de gestão como Jira.
- Idioma:Inglês Avançado para comunicação diária.
Será um diferencial se você tiver
- Certificações Profissionais ativas do Google Cloud Platform (GCP).
- Mestrado ou pós-graduação equivalente em Ciência da Computação, Engenharia de Software, Sistemas de Informação, Ciência/Engenharia de Dados ou áreas correlatas.
Aqui no CESAR, nós temos algumas práticas que proporcionam uma rotina mais positiva para a pessoa colaboradora:
- Horário flexível e estrutura horizontal;
- Programas de treinamento e desenvolvimento;
- Cultura voltada para a Diversidade & Inclusão, onde você pode ser livre pra ser quem é!
Gostou? Espera só para conferir nosso pacote variado de benefícios:
- Plano de saúde e odontológico;
- Vale Refeição / Alimentação;
- Auxílios diversos (Idiomas, Creche, Lentes de Contato);
- Seguro de Vida;
- Descontos em cursos da CESAR School;
- DayOff no mês do aniversário;
- Gympass, Moodar e Cíngulo (Foco em saúde física e mental).
Quer conhecer melhor o CESAR? Clica aqui e vem com a gente!
#inovacaocesar #vemprocesar #soucesar
Senior Data Engineer (GCP) · CESAR