Engenheiro de Dados Sênior/Staff

Descrição

Resumo: Como Engenheiro de Dados Sênior na YLD, você elaborará arquiteturas escaláveis, resilientes e tolerantes a falhas, adaptando-se a diversos contextos de clientes e orientando engenheiros de dados. Pontos principais: 1. Elaboração de arquiteturas de dados escaláveis, resilientes e tolerantes a falhas. 2. Mentoria e desenvolvimento de engenheiros de dados em toda a empresa. 3. Adaptação a diferentes contextos de clientes e desafios complexos de dados. **Localização:** Reino Unido ou Portugal **Departamento:** Engenharia **Tipo de contrato:** Permanente **Sobre a YLD:** -------------- Nosso objetivo é ajudar nossos clientes a continuarem avançando. Trabalhamos com eles para construir as competências e capacidades necessárias para se manterem à frente da concorrência, e sabemos que nosso sucesso só ocorre quando eles têm sucesso. Somos uma equipe de pessoas curiosas e talentosas, comprometidas em tornar a YLD um lugar onde grandes profissionais desejam trabalhar, crescer e permanecer. Somos uma consultoria com foco remoto especializada em engenharia de software, design de produtos e dados. Nossas equipes estão sediadas em Londres, Lisboa e Porto, e criamos soluções digitais que continuam gerando valor muito tempo após o término do nosso trabalho. **Sobre a vaga:** ------------------- Como Engenheiro de Dados Sênior, você fará parte de uma equipe cliente desenvolvendo produtos inovadores. Esperamos que você seja curioso, apaixonado, motivado e entusiasmado. Você será hábil na resolução de problemas e na elaboração de arquiteturas escaláveis, resilientes e tolerantes a falhas. Será um comunicador eficaz e um colaborador nato. Você e sua equipe atuarão em um ambiente de engenharia acelerado, alcançando resultados excepcionais e entregando projetos empolgantes. **Sobre você:** -------------- Um Engenheiro de Dados Sênior da YLD é um profissional altamente qualificado, com atuação abrangente entre engenharia de dados e engenharia analítica, ciente dos limites entre essas áreas. Você já construiu pipelines e camadas de transformação. Já herdou projetos de dados caóticos e os tornou bem estruturados. Você possui opiniões sobre como equipes de dados devem operar, além da humildade necessária para adaptá-las ao contexto. Você tem verdadeira paixão pela prática e é um aprendiz contínuo, entusiasmado pela variedade que a consultoria oferece: diferentes clientes, diferentes stacks tecnológicas, diferentes problemas. **Suas responsabilidades diárias serão as seguintes:** ----------------------------------------------------------- * Entrega de trabalho com dados em projetos clientes: pipelines, camadas de transformação, modelos e infraestrutura associada * Adaptação a diferentes contextos de clientes, migrações de data warehouses legados, implantação de lakehouses do zero, recuperação de camadas de transformação problemáticas * Definição e evolução de nossos padrões internos para trabalho com dados: testes, documentação, estrutura de projetos, revisão de código * Mentoria e desenvolvimento de engenheiros de dados em toda a empresa * Participação em momentos da equipe cliente (palestrantes internos, sessões de aprendizado, eventos sociais) para fortalecer relacionamentos de trabalho * Contribuição em propostas e auxílio na definição de projetos durante o processo comercial * Representação externa da YLD por meio de escritos, palestras e contribuições à comunidade de dados mais ampla **Você deverá ter as seguintes habilidades e experiência:** ---------------------------------------------------- * SQL como engenharia: você escreve SQL revisável, testável e performático em escala. Você compreende planejamento de consultas, particularidades de motores e como as escolhas de materialização afetam custo e desempenho * Python para dados: você escreve Python tipado e testável para pipelines e ferramentas. Você já construiu e mantido sistemas de dados em produção, não apenas notebooks * Modelagem de dados: você fez escolhas intencionais entre designs dimensionais, Data Vault, normalizados e desnormalizados. Você consegue explicar essas trocas em termos de flexibilidade, desempenho de consultas e manutenibilidade * Arquitetura de transformações: você projeta transformações idempotentes, incrementais e cientes de dependências. Você pensa em DAGs, não em scripts * Projeto de pipelines: você compreende as trocas entre processamento em lote, streaming e micro-lote. Você considera latência, complexidade, custo e possibilidade de reprocessamento, escolhendo a abordagem adequada para cada problema * Testes de dados: você escreve testes como código, contratos de esquema, asserções e lógica de transformação. Você sabe o que capturar no momento da construção versus o que delegar à observabilidade * Observabilidade de dados: você trata a confiabilidade de dados como a confiabilidade de sites. Indicadores mensuráveis, alertas, resposta a incidentes e análise de causa-raiz * CI/CD para dados: você versiona, testa e implanta pipelines como software. Promoção entre ambientes, estratégias de rollback e infraestrutura como código para ambientes reproduzíveis * Governança de dados: você já implementou rastreamento de lineage, catalogação, classificação de dados sensíveis ou controle de acesso. Não apenas construiu pipelines, mas também os tornou auditáveis e seguros * Consciência de custos: você já otimizou gastos com data warehouse, estratégias de armazenamento ou eficiência de jobs. Você trata a capacidade computacional como um recurso a ser gerenciado, não ignorado * Domínio de plataformas: você já trabalhou com a stack moderna. Orquestração (Airflow, Dagster), data warehouses (Snowflake, BigQuery, Databricks), ingestão (Fivetran, Airbyte, personalizada) e transformação (dbt, Spark) * Domínio transfuncional: você traduz restrições de engenharia em termos comerciais e negocia compromissos realistas **Você será:** -------------- * Automotivado e proativo * Confortável com ambiguidade, experimentação e iteração * Colaborativo por natureza. Trabalha bem em equipes e entre equipes * Analítico e atento aos detalhes em sua abordagem a problemas * Confortável alternando entre diferentes clientes, stacks tecnológicas e tipos de problema * Disposto a moldar projetos, não apenas entregá-los: contribuindo em propostas, definição de escopo e relacionamentos com clientes * Ativo na comunidade de dados mais ampla: escrevendo, palestrando ou contribuindo com código aberto * Verdadeiramente comprometido com diversidade, equidade e inclusão **Benefícios que você receberá:** * Plano privado de saúde da empresa * Licença maternidade e paternidade integralmente remunerada estendida até 6 meses * Plano de pensão da empresa (Apenas Reino Unido) * 25 dias úteis de férias anuais (excluindo feriados públicos) * Auxílio anual de £2000/€2000 para treinamento/conferências * Auxílio anual de £300/€300 para equipamentos adicionais * Apoio à saúde mental e desempenho via Oli, incluindo terapia e coaching * Bônus discrecional (dependendo do desempenho e resultados da empresa) * Notebook corporativo * Programa generoso de indicações **Nosso processo típico de recrutamento é o seguinte:** ---------------------------------------------------- * 1ª entrevista com alguém da equipe de Talentos (30/45 minutos) * Entrevista técnica com nossos Desenvolvedores Sêniores (1h30\) **Tenha um vislumbre do que é trabalhar na YLD!** **Confira nossa página no LinkedIn** **Vivemos e respiramos nossos valores, e sabemos que você também fará o mesmo:** ---------------------------------------------------------- * Crescimento diário * Inclusão de todos * Relacionamentos baseados em honestidade e ética * Soluções inspiradoras * Vitória conjunta Somos uma empresa que promove igualdade de oportunidades e valoriza a diversidade em todas as suas formas. Não discriminamos com base em raça, religião, cor, origem nacional, gênero, orientação sexual, gravidez ou maternidade, idade, estado civil ou deficiência. Oferecemos também um ambiente de trabalho com foco remoto, com horários flexíveis e equilíbrio entre vida pessoal e profissional como padrão para todos os funcionários.