Engenheiro de Dados

Descrição

Resumo: A Excelia procura um Engenheiro de Dados experiente para projetar, implementar e manter pipelines e transformações de dados, garantindo qualidade e conformidade dos dados. Pontos principais: 1. Projetar, implementar e manter pipelines e transformações de dados 2. Desenvolver e gerenciar produtos de dados reutilizáveis e de alto desempenho 3. Colaborar com Arquitetos de Dados, Analistas de Negócios e partes interessadas A Excelia é uma empresa multinacional de Consultoria, Tecnologia e Serviços Profissionais com mais de 25 anos de experiência. Prestamos serviços em mais de 50 países da Europa, América Latina e Estados Unidos, a partir de nossos 10 escritórios próprios. Você tem experiência como Engenheiro de Dados e está à procura de um novo desafio? Então esta oportunidade é para você! Cargo: Engenheiro de Dados Localização: Porto, Portugal \| Híbrido – 2 a 3 vezes por mês no escritório Principais responsabilidades: * Projetar, implementar e manter pipelines e transformações de dados no Databricks e no Synapse * Desenvolver e gerenciar produtos de dados reutilizáveis e de alto desempenho nas camadas bronze, prata e ouro * Integrar dados estruturados e não estruturados de diversas fontes (SAP, Salesforce, sistemas externos) * Garantir qualidade, rastreabilidade e conformidade dos dados com os padrões de governança e segurança * Otimizar o processamento de dados para escalabilidade, desempenho e eficiência de custos * Colaborar com Arquitetos de Dados, Analistas de Negócios e partes interessadas para traduzir requisitos em soluções técnicas * Automatizar fluxos de trabalho, testes e implantação por meio de pipelines CI/CD Requisitos: * 5\+ anos de experiência como Engenheiro de Dados * Domínio de Python, PySpark e SQL * Experiência com Azure Databricks, Synapse, Azure Data Lake Storage e Azure Data Factory * Conhecimento de modelagem Data Vault, Dimensional e Entidade-Relacionamento * Familiaridade com ferramentas CI/CD, Azure DevOps, Git e Terraform * Conhecimento de ferramentas de governança de dados, como Microsoft Purview ou Databricks Unity Catalog * Fluência em inglês (obrigatório) * Certificações Databricks (valorizadas) Se acredita que é um bom candidato, não hesite em se candidatar a esta oportunidade.