Engenheiro de Dados (AWS)

Descrição

Resumo: Estamos procurando um Engenheiro de Dados (AWS) para projetar, construir e manter plataformas de dados escaláveis, processar dados complexos e implementar fluxos de processamento de dados para um importante parceiro no setor de telecomunicações. Pontos principais: 1. Projetar, construir e manter plataformas de dados escaláveis 2. Desenvolver e implementar fluxos de processamento de dados usando Spark e Apache Beam 3. Monitorar o desempenho do sistema e otimizá-lo para alta disponibilidade e escalabilidade **Quem somos:** A Neotalent Conclusion é uma das principais especialistas ibéricas em serviços de Tecnologia da Informação e Engenharia. Como parte da organização sediada nos Países Baixos, a Conclusion — que possui um ecossistema com mais de 25 empresas e 3.600 colaboradores — tem como foco aumentar a capacidade tecnológica dos seus clientes e impulsionar a transformação digital de seus ecossistemas de aplicações. Somos especialistas em talento: atraímos as melhores pessoas e as alinhamos às necessidades dos projetos mais ambiciosos, no momento certo. O nosso sucesso resulta dos investimentos em inovação, do foco em resultados e, acima de tudo, da garantia de que os nossos colaboradores terão carreiras gratificantes e plenas. Com mais de 25 anos de experiência sólida, a Neotalent Conclusion estabeleceu a sua presença em locais estratégicos, incluindo Lisboa, Porto e Madrid. Atualmente, a empresa conta com mais de 950 profissionais nas diversas áreas em que atua. *Neotalent, as pessoas responsivas.* *Saiba mais sobre nós em* *\.* **Visão geral da função:** Estamos à procura de um **Engenheiro de Dados (AWS)** para integrar um dos nossos maiores parceiros internacionais no setor de telecomunicações. Trata-se de uma das maiores referências na área, com uma forte presença em mais de 6 países. **(Lisboa/Porto \- Modelo híbrido).** O Engenheiro de Dados é responsável por: * Projetar, construir e manter plataformas de dados escaláveis; * Coletar, processar e analisar grandes conjuntos de dados complexos provenientes de diversas fontes; * Desenvolver e implementar fluxos de processamento de dados utilizando tecnologias de frameworks de processamento de dados, tais como Spark e Apache Beam; * Colaborar com equipas multifuncionais para garantir a exatidão e integridade dos dados; * Garantir a segurança e privacidade dos dados mediante a correta implementação de controles de acesso e criptografia de dados; * Extrair dados de diversas fontes, incluindo bases de dados, sistemas de ficheiros e APIs; * Monitorar o desempenho do sistema e otimizá-lo para alta disponibilidade e escalabilidade. Esta função centra-se no projeto, desenvolvimento e manutenção da plataforma de dados necessária para armazenamento, processamento, orquestração e análise de dados. A missão envolve a implementação de pipelines de dados escaláveis e de alto desempenho, bem como soluções de integração de dados. **Perfil pretendido:** * No mínimo 2 anos de experiência como **Engenheiro de Dados com experiência em AWS**; * Domínio de linguagens de programação **como Python, Java ou Scala**; * Experiência com **ferramentas Big Data**, tais como Spark, Flink, Kafka, Elastic Search, Hadoop, Hive, Sqoop, Flume, Impala, Kafka Streams e Connect, Druid, entre outras; * Familiaridade com ferramentas de integração de dados e ETL (ex.: Apache Kafka, Talend); * **Excelentes competências em SQL** e experiência com bases de dados relacionais e NoSQL; * Conhecimentos de outras plataformas e serviços em nuvem para engenharia de dados (ex.: GCP, Azure Data Factory); * Excelente **proficiência em inglês**, tanto escrita como oral. **Por que se juntar a nós?** * Trabalhar em projetos desafiantes para grandes clientes * Aprender mais sobre tecnologias emergentes * Possibilidade de trabalho remoto * Planejar a sua própria carreira * Acesso a formação contínua e certificações * Evoluir através do nosso programa de mobilidade interna * … e muito mais! **Como candidatar-se:** Envie o seu CV para \ com **PBR\_DataEngineer** no assunto do e-mail. Poderá encontrar o anúncio original publicado em: https://www.itjobs.pt/oferta/512329/data\-engineer\-aws