[Job - 31856] Mid Data Developer ( Azure + Databricks ), Brasil

Responsabilidade:

 - Pipelines & ETL/ELT: Construir, dar manutenção e otimizar pipelines de dados robustos, focando em baixa latência, resiliência e boas práticas de Data Quality e observabilidade.
 - Big Data & Processamento Distribuído: Desenvolver rotas de dados escaláveis utilizando Apache Spark / PySpark e Databricks, garantindo estratégias eficientes de particionamento e otimização de custos.
 - Modelagem & Armazenamento: Trabalhar na estruturação e gestão de dados utilizando SQL Server e Delta Lake.
 - Cultura DevOps: Aplicar versionamento com Git, criar rotinas de CI/CD para automação de implantações e realizar o monitoramento contínuo das rotinas em produção.
 - Resolução de Incidentes: Investigar falhas, realizar análise de causa raiz e atuar na melhoria contínua das rotinas produtivas.

Requisitos Técnicos:

 - Eexperiência com engenharia de dados.
 - Experiência em ambientes produtivos.
 - Atuação com grandes volumes de dados.
 - Participação em projetos de migração, modernização ou construção de data lakes.
 - Capacidade de investigar incidentes e realizar análise de causa raiz.

-Experiência com projetos de IA e automação de pipelines.
-Conhecimento em arquiteturas orientadas a dados e boas práticas de governança.
-Familiaridade com Databricks MLflow para gestão de modelos.
-Atuação em ambientes Data Lake e Data Warehouse.