Engenheiro de Dados

Descrição

Resumo: A Excelia procura um Engenheiro de Dados experiente para projetar, implementar e manter pipelines e transformações de dados, garantindo a qualidade dos dados e colaborando com as partes interessadas. Pontos principais: 1. Projetar, implementar e manter pipelines de dados no Databricks e no Synapse 2. Desenvolver e gerenciar produtos de dados de alto desempenho 3. Colaborar com Arquitetos de Dados e Analistas de Negócios A Excelia é uma empresa multinacional de Consultoria, Tecnologia e Serviços Profissionais com mais de 25 anos de experiência. Oferecemos serviços em mais de 50 países da Europa, América Latina e Estados Unidos, a partir de nossos 10 escritórios próprios. Você tem experiência como Engenheiro de Dados e está à procura de um novo desafio? Então esta oportunidade é para você! Cargo: Engenheiro de Dados Localização: Porto, Portugal \| Híbrido – 2 a 3 vezes por mês no escritório Principais responsabilidades: * Projetar, implementar e manter pipelines e transformações de dados no Databricks e no Synapse * Desenvolver e gerenciar produtos de dados reutilizáveis e de alto desempenho nas camadas bronze, silver e gold * Integrar dados estruturados e não estruturados de diversas fontes (SAP, Salesforce, sistemas externos) * Garantir a qualidade, a rastreabilidade e a conformidade dos dados com os padrões de governança e segurança * Otimizar o processamento de dados quanto à escalabilidade, desempenho e eficiência de custos * Colaborar com Arquitetos de Dados, Analistas de Negócios e demais partes interessadas para traduzir requisitos em soluções técnicas * Automatizar fluxos de trabalho, testes e implantação por meio de pipelines CI/CD Requisitos: * 5\+ anos de experiência como Engenheiro de Dados * Domínio de Python, PySpark e SQL * Experiência com Azure Databricks, Synapse, Azure Data Lake Storage e Azure Data Factory * Conhecimento de modelagem Data Vault, dimensional e de entidade-relacionamento * Familiaridade com ferramentas CI/CD, Azure DevOps, Git e Terraform * Conhecimento de ferramentas de governança de dados, como Microsoft Purview ou Databricks Unity Catalog * Fluência em inglês (obrigatório) * Certificações Databricks (valorizadas) Se acredita que é um bom candidato, não hesite em se candidatar a esta oportunidade.