AI summary
The role involves developing and optimizing data pipelines using Databricks, Spark, and PySpark, as well as managing a data migration project from on-premise to cloud. Responsibilities include data modeling, quality assurance, and technical project management.
Job Description
Olá, aqui é a Wal da CI&T!
Sou do time de Talent Attraction e estou em busca de profissionais localizados no Brasil para atuar como Mid Level Data Developer (Databricks - Spark, PySpark)
Buscamos uma pessoa Data Developer para ser a força motriz de um projeto de alta visibilidade: a migração de nossos dados do on-premise para a nuvem (Databricks).
Seu papel será fundamental desde o início, participando de um assessment técnico para mapear o cenário atual e definir o roadmap da migração. Você será a ponte entre a engenharia de dados robusta e a criação de valor analítico para o negócio, garantindo que nossos dados sejam não apenas bem estruturados, mas também prontos para gerar insights.
Responsabilidades:
- Modelagem para Análise: Criar e manter modelos de dados otimizados para consumo analítico, aplicando as melhores práticas de mercado como domínio de padrões de modelagem de dados (Star Schema e Snowflake Schema) e a estruturação em camadas (Bronze, Silver, Gold) para construir tabelas analíticas (OBTs) de alto desempenho.
- Garantia de Qualidade e Governança: Implementar e liderar rotinas de testes, validações e governança para garantir a integridade, consistência e confiabilidade dos dados em todas as etapas do pipeline.
- Resolução de Problemas e Comunicação: Atuar como referência técnica, mobilizando as equipes necessárias, comunicando-se de forma eficaz para resolver impedimentos e traduzindo requisitos de negócio em soluções de dados.
- Gestão do Roadmap Técnico: Criar e gerenciar o roadmap do projeto, identificando dependências técnicas, planejando entregas e gerenciando mudanças de forma proativa.
Requisitos
- Experiência Prática com a Stack: Vivência sólida com bancos de dados relacionais (SQL, Oracle) e, principalmente, com o ecossistema Databricks (Spark, PySpark) e orquestradores como Azure Data Factory (ADF).
- Modelagem de Dados Aplicada: Profunda compreensão e experiência na implementação das camadas de dados Bronze, Silver e Gold, além de modelos como Star Schema e Tabelas Analíticas (OBT).
- Conhecimentos Fundamentais: Compreensão sólida de qualidade de dados, governança e operações essenciais como MERGE em ambientes de Data Lakehouse e conhecimento de padrões de engenharia de dados como por exemplo CDC (Change Data Capture) e o CDF (Change Data Feed)
-Utilização de IA no dia a dia para desenvolvimento acelerado com agentes
Liderança e Comunicação:
- Capacidade de lidar com tarefas pouco descritas, usando a comunicação e a investigação para refinar o entendimento.
- Experiência na criação e gestão de roadmaps técnicos.
- Proficiência em Código: Domínio de SQL para consultas complexas e - Python/PySpark para transformação e manipulação de dados.
Diferenciais
- Experiência com ferramentas de orquestração de workflows (ex: Airflow).
- Familiaridade com plataformas de Business Intelligence (ex: Power BI, Tableau) e como os dados são consumidos.
- Vivência em metodologias ágeis.
#LI-WC2
About the job
- Posted on
- Sep 1, 2026
- Job type
- Full-time
- Location
- BrazilRemote
Keep looking
Related roles you might like
[Job-31453]Senior ML Engineer (B2B Personalization), Brasil
Ci&T
Explore more
Browse more jobs like this
Disclaimer: Real Jobs From Anywhere is an independent platform dedicated to providing information about job openings. We are not affiliated with, nor do we represent, any company, agency, or agent mentioned in the job listings. Please refer to our Terms of Services for further details.