Data Engineer - Databricks

Descrição

Resumo da Vaga: IRISTECH seeks a Databricks Data Engineer for a confidential financial institution, focusing on migrating data architecture from Azure Synapse to Databricks and optimizing data transformation pipelines. Principais Destaques: 1. Experiência hands-on em Databricks e engenharia de dados 2. Forte background em Data Engineering e arquiteturas em camadas 3. Experiência em Data Governance, incluindo data catalog e lineage Localização: Lisboa, Portugal (híbrido — mínimo 2 dias/semana no escritório) Sobre a oportunidade A IRISTECH está a recrutar um Databricks Data Engineer para integrar a equipa de Data \& Analytics de uma instituição financeira sediada em Lisboa (projeto confidencial), no âmbito de um projeto de migração da arquitetura de engenharia de dados de Azure Synapse para Databricks. É um papel puramente técnico e de execução hands\-on, não uma função de arquitetura ou liderança. O objetivo principal é acelerar a adoção do Databricks pela equipa interna e reforçar a capacidade de engenharia durante a migração, dentro do modelo Data Vault adotado pelo grupo (camadas bronze, silver e gold). O que vais fazer * Construir e otimizar pipelines de transformação nas três camadas do modelo Data Vault: bronze (dados brutos da fonte), silver (dados estruturados e processados, camada de data lake) e gold (camada pronta para consumo pelo negócio) * Apoiar capacidades de data governance como parte do trabalho de engenharia, especificamente data catalog e data lineage * Garantir que a governança fica integrada na nova arquitetura desde o início * Contribuir diretamente para a migração de workloads de Azure Synapse para Databricks O que procuramos * Experiência hands\-on específica em Databricks (não apenas Spark ou cloud data engineering genérico) * Forte background em Data Engineering, com experiência comprovada a construir e otimizar pipelines em arquiteturas em camadas / data lake * Experiência em Data Governance — implementação e gestão de data catalog e data lineage * Cerca de 4 a 5 anos de experiência * Inglês fluente Será valorizado * Familiaridade com modelação Data Vault * Português (mais\-valia, não obrigatório) * Experiência com capacidades de AI/ML do Databricks Condições * Regime híbrido, mínimo 2 dias/semana presenciais em Lisboa (execução com remoto ocasional) Se tens experiência real e prática em Databricks, gostas de trabalhar em projetos de migração de dados e queres contribuir diretamente para a construção de uma nova arquitetura de dados, envia\-nos a tua candidatura. Contacto: hr@iristech.pt Pagamento: 1 800,00€ \- 3 690,00€ por mês Localização do trabalho: Trabalho remoto híbrido em Lisboa