Descrição
Resumo:
Esta função envolve projetar, desenvolver e manter pipelines de dados e processos ETL para apoiar iniciativas de migração de dados em ambientes baseados na AWS.
Pontos principais:
1. Projetar e manter pipelines de dados e processos ETL para migração de dados
2. Desenvolver e otimizar scripts em Python e SQL para processamento de dados
3. Colaborar com engenheiros de dados, analistas e partes interessadas nos negócios
Visão geral:
A Expleo é um parceiro de confiança na sua jornada de inovação. Como provedora global de serviços de engenharia, tecnologia e consultoria, estamos idealmente posicionados para ajudá-lo a concretizar suas ambições e garantir a sustentabilidade futura do seu negócio. Com uma combinação inteligente de pensamento ousado e execução confiável, conseguimos acelerar a inovação em cada etapa da sua cadeia de valor.
Estamos estrategicamente posicionados para criar valor, com uma presença global em 30 países.
Somos tão globais e locais quanto você precisar, com fortes centros tecnológicos pan-europeus de classe mundial e capacidades únicas de "best-shoring".
Contamos com uma rede de afiliadas de alto valor agregado em consultoria e excelência industrial, bem como parceiros líderes em múltiplos setores, para oferecer-lhe os serviços e soluções mais abrangentes em um ambiente em constante mudança.
Responsabilidades:
* Projetar, desenvolver e manter pipelines de dados e processos ETL para apoiar iniciativas de migração de dados.
* Participar em projetos de migração de dados, assegurando a integridade, qualidade e consistência dos dados entre sistemas.
* Trabalhar com ambientes de dados baseados na AWS para construir soluções de dados escaláveis e confiáveis.
* Desenvolver e otimizar scripts em Python e SQL para processamento e transformação de dados.
* Integrar e gerenciar dados provenientes de plataformas financeiras, como o BlackRock Aladdin e outros sistemas de gestão de investimentos.
* Colaborar com engenheiros de dados, analistas e partes interessadas nos negócios para compreender os requisitos de dados e traduzi-los em soluções técnicas.
* Garantir alto desempenho, confiabilidade e segurança dos fluxos de trabalho de dados.
* Utilizar Docker e Git para controle de versão e ambientes contêinerizados.
* Solucionar e resolver problemas relacionados a dados em ambientes Linux e Windows.
* Documentar a arquitetura de dados, pipelines e processos de migração.
Habilidades essenciais:
* Experiência mínima de 8 anos como Engenheiro de Dados ou em função similar.
* Experiência sólida em Python e SQL para processamento e transformação de dados.
* Experiência prática com serviços em nuvem da AWS.
* Conhecimento sólido no desenvolvimento de ETL e no projeto de pipelines de dados.
* Experiência em projetos de migração de dados.
* Domínio de PostgreSQL ou outros bancos de dados relacionais.
* Experiência com Docker e Git.
* Capacidade de trabalhar confortavelmente em ambientes Linux e Windows.
* Fluência em inglês para comunicação.
O que preciso antes de me candidatar:
* A oportunidade é remota, mas o candidato deve já residir em PT.