Engenheiro Sênior de Plataforma de Dados – Nuvem e Modelagem de Dados

Descrição

Resumo: Esta posição de Engenheiro Sênior de Plataforma de Dados envolve projetar, implementar e manter soluções de dados escaláveis na Google Cloud Platform (GCP) para gerar insights estratégicos e impulsionar a transformação digital. Pontos principais: 1. Modele o futuro da engenharia em nuvem e de dados com soluções transformadoras 2. Desempenhe um papel crucial no projeto e na implementação de soluções de dados escaláveis na Google Cloud Platform (GCP) 3. Impulsione a transformação digital em um ambiente dinâmico e voltado para o futuro **Liberte soluções de dados transformadoras — modele o futuro da engenharia em nuvem e de dados!** Oportunidade com sede em Lisboa, com modelo híbrido de trabalho (até 2 dias remotos por semana). Como **Engenheiro Sênior de Plataforma de Dados**, você trabalhará para nosso cliente, uma empresa líder em tomada de decisões orientada por dados. Você desempenhará um papel crucial no projeto, implementação e manutenção de soluções de dados escaláveis na Google Cloud Platform (GCP). A sua especialização apoiará a obtenção de insights estratégicos e capacitará organizações por meio de modelos de dados robustos, pipelines e governança. Esta é a sua oportunidade de impulsionar a transformação digital e levar a sua carreira a novos patamares em um ambiente dinâmico e inovador. **Suas principais responsabilidades:** * Desenvolver e manter modelos de dados usando dbt, com foco na arquitetura em medalhões, incluindo modelos dimensionais. * Projetar modelos de dados genéricos, extensíveis e prontos para integração, capazes de suportar diversas fontes de dados heterogêneas. * Implementar modelos incrementais e testes automatizados de dados (testes dbt) para garantir a confiabilidade dos dados. * Fornecer documentação detalhada sobre modelos de dados, fluxos e processos de transformação. * Processar dados em lote e em tempo real usando Python, Apache Beam e Google Cloud Dataflow. * Integrar dados provenientes de APIs externas e realizar manipulação de dados com pandas e pyarrow. * Gerenciar e operar recursos da GCP, como BigQuery, Cloud Run, Workflows, Cloud Scheduler, Pub/Sub e IAM. * Implementar e manter soluções de governança, qualidade e rastreabilidade de dados usando Dataplex, Data Catalog e melhores práticas do setor. * Gerenciar infraestrutura como código com Terraform, assegurando ambientes organizados e escaláveis nas etapas de desenvolvimento, teste e produção. * Aplicar boas práticas de engenharia de software, incluindo Git, CI/CD, estruturação de projetos e configuração baseada em YAML para pipelines e ambientes. * Monitorar, solucionar problemas e otimizar pipelines, jobs e workflows, utilizando Cloud Logging e Cloud Monitoring. * Fornecer dados a diversos consumidores, incluindo IA, ML, BI e aplicações empresariais, garantindo alto desempenho e confiabilidade. **Você é ideal para esta vaga se tiver:** * 4 anos ou mais de experiência como Engenheiro de Dados ou em cargo sênior equivalente. * Domínio avançado de SQL, especialmente no BigQuery. * Experiência comprovada com dbt e modelagem moderna de dados (camadas Bronze/Silver/Gold). * Conhecimento profundo de processamento de dados com Python, Apache Beam e Google Cloud Dataflow. * Familiaridade com integração de APIs e manipulação de dados usando pandas, pyspark e pyarrow. * Experiência prática com serviços da GCP: BigQuery, Cloud Run, Workflows, Cloud Scheduler, Pub/Sub, Cloud Storage, Dataplex e IAM. * Forte compreensão de governança, qualidade, catalogação e rastreabilidade de dados. * Experiência com infraestrutura como código, especialmente com Terraform, e gerenciamento de ambientes. * Domínio de boas práticas de engenharia de software, incluindo Git, CI/CD e organização de projetos. * Fluência em inglês, com excelentes habilidades de comunicação e documentação. **Será um diferencial se você tiver:** * Graduação em Engenharia de Computação, Ciência de Dados, Sistemas de Informação ou áreas correlatas. * Capacidade de se comunicar em francês (considerado um diferencial). **Elegibilidade para a vaga:** Apenas candidatos com direito legal vigente de trabalho na União Europeia serão considerados para esta vaga. **\#MAKEYourCareerBETTER** Interessado(a)? Candidate-se agora e anexe seu currículo (preferencialmente em inglês), juntamente com uma declaração confirmando seu consentimento para o tratamento e armazenamento de seus dados pessoais. \ Você pode encontrar o anúncio original publicado em: https://www.itjobs.pt/oferta/512894/senior\-data\-platform\-engineer\-cloud\-data\-modeling