Descrição
Resumo:
Procuramos um Engenheiro de Dados para apoiar e desenvolver uma plataforma de dados para um grande fornecedor internacional de energia, com foco na gestão de pipelines de dados, resolução de problemas e otimização.
Pontos principais:
1. Apoiar e desenvolver uma plataforma de dados para um fornecedor internacional de energia
2. Colaborar com arquitetos e partes interessadas para otimizar processos de dados
3. Focar na qualidade dos dados, automação e ajuste de desempenho
* **Fluência em português e inglês, falado e escrito.**
* **Prazo de aviso prévio de 30 dias para rescisão**
* **O candidato pode trabalhar remotamente de qualquer região de Portugal**
**O que você fará:**
* Procuramos um Engenheiro de Dados para apoiar e desenvolver uma plataforma de dados dentro de um grande fornecedor internacional de energia em escala.
* Prestar suporte aos usuários da plataforma de dados, identificando e corrigindo problemas
* Apoiar pipelines de dados e processos ETL/ELT para garantir fluxos de dados confiáveis e escaláveis
* Colaborar com arquitetos da plataforma para assegurar que esta seja eficiente, segura e altamente disponível
* Melhorar processos de dados, monitoramento, desempenho e eficiência da plataforma
* Apoiar estruturas e monitoramento de qualidade de dados para garantir a precisão, consistência e integridade dos pipelines de dados
* Apoiar soluções de data lakes, data warehouses e streaming de dados
* Trabalhar com partes interessadas (cientistas de dados, analistas, usuários de negócios) para resolver problemas na plataforma de dados
* Automatizar tarefas repetitivas e melhorar os processos de ingestão, transformação e entrega de dados
* Diagnosticar e otimizar fluxos de trabalho de dados e consultas SQL quanto ao desempenho e eficiência de custos
* Documentar alterações na plataforma de dados, processos e boas práticas
* Revisar, avaliar e aprovar lançamentos de produtos de dados para produção.
**O que procuramos:**
* Experiência com pipelines de dados em ambiente produtivo
* Conhecimento prático sólido de SQL e experiência em processamento distribuído de dados (ex.: Apache Spark)
* Domínio e conhecimento prático na resolução de problemas com dbt, Apache Kafka, Apache Ignite, Apache NiFi e Apache AirFlow
* Proficiência em uma linguagem de programação como Python ou Scala para tarefas de engenharia de dados
* Experiência com serviços de dados em nuvem (AWS)
* Familiaridade com ferramentas Grafana
* Conhecimento em governança de dados, segurança e conformidade em ambiente de nuvem
* Experiência na implementação de frameworks CI/CD e testes para fluxos de trabalho de dados
* Fortes habilidades de resolução de problemas, comunicação e paixão pela colaboração.
**O que você pode esperar de nós?**
Uma cultura organizacional impressionante. Você será integrado(a) a uma equipe profissional, dinâmica e colaborativa.
**Oportunidades 100% remotas**
Queremos que você tenha a flexibilidade de trabalhar onde se sentir mais confortável e produtivo.
**Carreira internacional**
* Você poderá esperar crescimento profissional e conexões globais.
* Estamos presentes em Portugal, Bélgica, Luxemburgo e Dinamarca.
* E com projetos em muitos outros países: Países Baixos, Luxemburgo, Cingapura e Estados Unidos da América (e muito mais está por vir…)
**Benefícios adicionais & vantagens**
Se deseja trabalhar conosco e estiver fora da União Europeia (boas notícias…), somos uma empresa credenciada para o Tech Visa — ajudaremos você!
**Como bônus, oferecemos Seguro Saúde e Seguro de Vida.**