Engenheiro de Dados **ID da vaga:** 20996 **Família de cargos:** Gestão de Dados **Localização:** Porto, PT, 4100\-136 **Descrição:** Finalidade * Como Engenheiro de Dados, você projeta, desenvolve e mantém pipelines e sistemas de dados. Garante o processamento, armazenamento e integração eficientes de dados alinhados aos objetivos empresariais. Colabora com equipes multifuncionais para otimizar fluxos de trabalho de dados e melhorar a qualidade e o desempenho dos dados. Responsabilidades * Liderar e participar no projeto, desenvolvimento e manutenção de soluções de engenharia de dados. * Desenvolver e implementar processos ETL (Extração, Transformação e Carga) robustos para garantir a integração e transformação eficientes de dados. * Colaborar com cientistas de dados, analistas e outras partes interessadas para compreender os requisitos de dados e fornecer soluções de dados adequadas. * Projetar e construir pipelines de dados escaláveis para suportar aplicações de análise de dados e aprendizado de máquina. * Garantir a qualidade e integridade dos dados por meio da implementação de processos de validação e limpeza de dados. * Otimizar processos de armazenamento e recuperação de dados quanto ao desempenho e escalabilidade. * Monitorar e solucionar problemas nos fluxos de trabalho de engenharia de dados para assegurar sua confiabilidade e desempenho. * Fornecer orientação técnica e mentoria a engenheiros de dados júnior. * Manter-se atualizado sobre as últimas tendências e melhores práticas em engenharia de dados, incorporando-as à estratégia de dados da organização. Educação * É obrigatório possuir, no mínimo, um diploma de bacharelado (ou equivalente) em ciência da computação, tecnologia da informação ou área correlata. Certificações em ferramentas e tecnologias relevantes de engenharia de dados, tais como AWS Certified Big Data Specialty, Google Professional Data Engineer ou Microsoft Certified: Azure Data Engineer Associate, são altamente desejáveis. A proficiência em inglês é essencial para uma comunicação eficaz com membros da equipe, partes interessadas e fornecedores externos. Experiência * Mínimo de 3 anos de experiência em engenharia de dados, gestão de dados ou área correlata. * Experiência comprovada no projeto, desenvolvimento e manutenção de pipelines de dados e processos ETL. * Sólida formação técnica com experiência prática em arquiteturas de dados em larga escala, incluindo data lakes, data warehouses e processamento de dados em tempo real. * Capacidade comprovada de desenvolver e implementar boas práticas e procedimentos de engenharia de dados para assegurar qualidade, confiabilidade e escalabilidade dos dados. * Experiência em modelagem de bancos de dados e integração de dados utilizando ferramentas como Apache Spark, Hadoop e SQL. É desejável experiência em modelagem de dados. * Proficiência no uso de ferramentas e plataformas de engenharia de dados, tais como AWS, Azure e Google Cloud Platform, além de experiência na implantação e gerenciamento de soluções de dados baseadas em nuvem. * Fortes habilidades de programação em linguagens como Python, Java ou Scala, com foco em processamento e manipulação de dados. * Boas habilidades de comunicação, com capacidade de trabalhar eficazmente com outros membros da equipe e partes interessadas. * Certificações relevantes na pilha tecnológica, por exemplo, AWS e Azure. * Atenção aos detalhes e habilidades de resolução de problemas são desejáveis para análise de causa raiz e aplicação da solução adequada. Competências funcionais Conformidade Governação, risco e controle Análise e relatórios Ferramentas e aplicações de TI Controle de custos e orçamento Parceria com o negócio Capacidade digital Visão de negócios Gestão de contratos Gestão da aplicação de mudanças