Job Description
Estamos em busca de uma pessoa para atuar como Engenheiro(a) de Dados, você será responsável por garantir a integridade, consistência e eficiência dos modelos de dados em todo o ecossistema, realizando revisões estruturais, definindo padrões e assegurando governança.
Responsabilidades:
-Desenvolver e manter pipelines de dados (ETL/ELT) em ambiente Azure, utilizando Databricks para processamento e integração.-
-Visão 360º (ex: Entender o projeto como um todo, entendendo os impactos que uma solução pontual posso acarretar o projeto).
-Implementar práticas de CI/CD para automação de deploys e versionamento de código em GitHub.
-Projetar e otimizar modelos de dados para garantir escalabilidade, performance e governança.-
-Apoiar projetos de migração para cloud, garantindo segurança, qualidade e integridade dos dados.
-Colaborar com times de negócio e ciência de dados para deploy de modelos de IA em ambiente cloud.
-Garantir qualidade e consistência dos dados, aplicando técnicas de data profiling e monitoramento.
-Documentar processos, arquiteturas e boas práticas de engenharia de dados.
Requisitos Técnicos:
-Experiência sólida em Azure Data Services e Databricks.
-Experiência com Databricks com PySpark
-Produtização de modelos de Machine Learning no Databricks (MlOps)
-Domínio de Python e SQL para manipulação e transformação de dados.
-Conhecimento em CI/CD e versionamento com GitHub.
-Experiência em modelagem de dados (conceitual, lógica e física).
-Vivência em projetos de migração para cloud.
-Experiência em ETL/ELT e integração de grandes volumes de dados.
-Experiência com deploy de modelos de IA e uso de ferramentas como Azure ML.
-Experiência com projetos de IA e automação de pipelines.
Diferenciais:
-Vivência com definição de estratégias, padrões e boas práticas para conversão de códigos SAS para Python/PySpark.
-Vivência com apoio técnico para migração de processos, rotinas e soluções analíticas de SAS para Databricks.
-Conhecimento ou experiência relevante com SAS.
-Conhecimento em arquiteturas orientadas a dados e boas práticas de governança.
-Participação em iniciativas de MDM (Master Data Management).
-Familiaridade com Databricks MLflow para gestão de modelos.
-Atuação em ambientes Data Lake e Data Warehouse.
#LI-PA1
Keep looking
Related roles you might like
[Job 30458] AI Engineer (Dev Master) iOS /Android
Ci&T
On-siteFull-time1 day ago
[Job-30817] Senior AI Engineer, Brazil
Ci&T
On-siteFull-time1 day ago
[Job-30814] Mid Level Angular Developer , Brazil
Ci&T
On-siteFull-time2 days ago
[Job-30829] Mid Level Communication Designer,Brazil
Ci&T
On-siteFull-time2 days ago
[Job-30806] Analista de Departamento Pessoal Júnior
Ci&T
On-siteFull-time2 days ago
[Job-30884] Senior Manager - Flow Platform, Brazil
Ci&T
On-siteFull-time2 days ago
[Job-30874] Senior AI Engineer, Colombia
Ci&T
On-siteFull-time2 days ago
[Job-30874] Senior AI Engineer, Brazil
Ci&T
On-siteFull-time2 days ago
[Job- 30880] QA Automation Engineer Mid-Level, Brazil
Ci&T
On-siteFull-time2 days ago
[Job-30834] Senior, AWS Data Engineer (PowerBI),Brazil
Ci&T
On-siteFull-time2 days ago
[Job-30735] Data Architect (Databricks), Brazil
Ci&T
On-siteFull-time2 days ago
[Job-30845] Senior Fullstack Developer(React / Node), Brazil
Ci&T
On-siteFull-time5 days ago
[Job-30554] Senior Java Developer, Brasil
Ci&T
On-siteFull-time5 days ago
[Job-30511] Mid-Level Java Developer, Brazil
Ci&T
On-siteFull-time5 days ago
[Job-30070] Principal DevOps Specialist
Ci&T
On-siteFull-time5 days ago
Explore more
Browse more jobs like this
Disclaimer: Real Jobs From Anywhere is an independent platform dedicated to providing information about job openings. We are not affiliated with, nor do we represent, any company, agency, or agent mentioned in the job listings. Please refer to our Terms of Services for further details.