Job Description
Buscamos pessoas localizadas no Brasil para trabalhar como Data Developer em um dos nossos clientes do ramo financeiro. Irá atuar em iniciativas de modernização da plataforma de dados, com foco em arquitetura Lakehouse, governança, qualidade e preparação de dados para consumo analítico e de IA.
Responsabilidades:
- Atuar em iniciativas de modernização da plataforma de dados, com foco em arquitetura Lakehouse, governança, qualidade e preparação de dados para consumo analítico e de IA.
Requisitos para este desafio:
- Domínio do ciclo de vida do dado: ingestão, processamento, armazenamento, transformação, consumo e governança;
- Experiência com dados estruturados, semiestruturados e não estruturados;
- Boas práticas de tratamento, versionamento, rastreabilidade e disponibilização de dados;
- Experiência em arquitetura Lakehouse (Data Lake + Data Warehouse);
- Uso de Apache Iceberg para: gerenciamento de tabelas analíticas, controle de versões, evolução de schema, particionamento eficiente e otimização de performance em ambientes distribuídos;
- Experiência com pelo menos um dos seguintes: Athena, Trino, Presto ou Spark SQL;
- Capacidade de otimizar consultas, interpretar planos de execução, trabalhar com particionamento e formatos colunares (Parquet, ORC);
- Visão de custo x performance em consultas analíticas;
- Experiência sólida em modelagem para análise e BI: tabelas fato e dimensão, granularidade, chaves, hierarquias, métricas e indicadores;
- Capacidade de estruturar modelos otimizados para dashboards, relatórios e consumo por times de negócio;
- Experiência prática com: S3, Glue, Athena, EMR, Lambda, Step Functions, Lake Formation, IAM e CloudWatch;
- Conhecimento de boas práticas de segurança, controle de acesso, monitoramento, automação e gestão de custos em nuvem.
Diferencial:
- Conhecimento dos princípios: dados como produto, ownership por domínio, governança federada e infraestrutura self-service;
- Experiência em definição de contratos de dados, catálogo, padrões de qualidade e organização por domínios de negócio;
- Experiência em implementar controles de qualidade em pipelines: validações, regras de negócio, completude, consistência, unicidade, integridade e acurácia;
- Capacidade de monitoramento contínuo, detecção de anomalias e geração de alertas;
- Conhecimento em preparação e organização de dados para iniciativas de Machine Learning e Analytics avançado;
- Familiaridade com feature stores, integração de pipelines de dados com modelos de IA e serviços de IA em nuvem;
- Compreensão da importância de dados limpos, governados e rastreáveis para alimentar modelos.
#LI-JP3
Keep looking
Related roles you might like
[Job 30458] AI Engineer (Dev Master) iOS /Android
Ci&T
[Job-30817] Senior AI Engineer, Brazil
Ci&T
[Job-30814] Mid Level Angular Developer , Brazil
Ci&T
[Job-30829] Mid Level Communication Designer,Brazil
Ci&T
[Job-30806] Analista de Departamento Pessoal Júnior
Ci&T
[Job-30884] Senior Manager - Flow Platform, Brazil
Ci&T
[Job-30874] Senior AI Engineer, Colombia
Ci&T
[Job-30874] Senior AI Engineer, Brazil
Ci&T
[Job- 30880] QA Automation Engineer Mid-Level, Brazil
Ci&T
[Job-30834] Senior, AWS Data Engineer (PowerBI),Brazil
Ci&T
[Job-30735] Data Architect (Databricks), Brazil
Ci&T
[Job-30845] Senior Fullstack Developer(React / Node), Brazil
Ci&T
[Job-30554] Senior Java Developer, Brasil
Ci&T
[Job-30511] Mid-Level Java Developer, Brazil
Ci&T
[Job-30070] Principal DevOps Specialist
Ci&T
Explore more
Browse more jobs like this
Disclaimer: Real Jobs From Anywhere is an independent platform dedicated to providing information about job openings. We are not affiliated with, nor do we represent, any company, agency, or agent mentioned in the job listings. Please refer to our Terms of Services for further details.
