Data Engineer

Sobre a vaga: Buscamos Engenheiro de Dados Pleno para estruturar e evoluir a Fundação de Dados que suportará as soluções de IA da VP de Assuntos Jurídicos, Licenciamento e Regulatório. O profissional atuará na construção e manutenção de pipelines, integração e disponibilização de dados estruturados e não estruturados, garantindo qualidade, segurança e escalabilidade para aplicações analíticas, modelos de Machine Learning e Agentes de IA. Hard Skills • SQL intermediário/avançado; • Python aplicado à engenharia e processamento de dados; • Construção e manutenção de pipelines ETL/ELT; • Experiência prática com Databricks e Apache Spark/PySpark; • Arquiteturas de Data Lake, Lakehouse e Data Hub; • Experiência com serviços de dados do Microsoft Azure; • Azure Data Lake Storage e integração com componentes da plataforma Azure; • Modelagem, transformação e tratamento de dados estruturados e semiestruturados; • Integração de dados via APIs, arquivos, bancos relacionais e outras fontes corporativas; • Delta Lake e conceitos de arquitetura Lakehouse; • Data Quality, catalogação, lineage e governança de dados; • Git, CI/CD e práticas de DataOps. Soft Skills • Raciocínio analítico e atenção à qualidade dos dados; • Organização e disciplina de engenharia; • Capacidade de diagnosticar problemas de integração e performance; • Comunicação e colaboração com Data Scientists, Developers e áreas de negócio; • Proatividade e capacidade de trabalhar com autonomia; • Orientação à reutilização, padronização e escalabilidade; • Adaptabilidade a ambientes corporativos complexos. Tempo de experiência: 2-3 anos de experiência em Engenharia de Dados, incluindo participação em projetos de construção de pipelines e plataformas de dados em cloud. Habilidades desejadas: Experiência com Azure Data Factory, Azure Databricks, ADLS Gen2, Microsoft Purview, Unity Catalog, Delta Lake, APIs REST, streaming e processamento de documentos. Conhecimentos sobre preparação de dados para RAG, embeddings, …

Código interno da vaga: 13163239454

Candidate-se

Você também pode gostar: