Engenheiro de Dados Sênior

Descrição

Resumo: Junte-se à Equipe Central de Dados da Keyrock como Engenheiro de Dados Sênior para construir e aprimorar sua plataforma de dados, com foco em pipelines de streaming/lote, ferramentas de autoatendimento, governança de dados e análise. Pontos principais: 1. Criar, do zero, uma nova plataforma de dados e uma cultura de equipe 2. Colaboração estreita com as áreas de Arquitetura, Infraestrutura e mesas de negociação 3. Autonomia e ambiente de trabalho flexível **Engenheiro de Dados Sênior** ======================== **Sobre a Keyrock** ================= Desde nossos primórdios em 2017, crescemos para nos tornar um dos principais agentes de mudança no espaço de ativos digitais, reconhecidos por nossas parcerias e inovação. Hoje, contamos com mais de 250 membros em todo o mundo. Nossa equipe diversificada é composta por profissionais de 42 nacionalidades, com formações que vão desde nativos autodidatas do DeFi até doutores. Predominantemente remota, temos hubs em Londres, Bruxelas e Cingapura, além de promovermos regularmente encontros online e presenciais para manter a coesão da equipe. Operamos em mais de 80 venues de negociação e colaboramos com uma ampla gama de emissoras de ativos. Como uma empresa de market making bem estabelecida, nossa especialização distinta impulsionou nosso rápido crescimento. Atualmente, nossos serviços abrangem market making, negociação de opções, negociação de alta frequência, negociação OTC e mesas de negociação DeFi. No entanto, somos mais do que um prestador de serviços. Somos iniciadores. Somos pioneiros na adoção da linguagem de desenvolvimento Rust para nosso trading algorítmico e defensores de seu uso na indústria. Apoiamos o crescimento de startups Web3 por meio de nosso Programa de Aceleração. Aprimoramos ecossistemas ao injetar liquidez em protocolos promissores de DeFi, RWA e NFT. E impulsionamos o progresso da indústria com nossas iniciativas de pesquisa e governança. Na Keyrock, não apenas imaginamos o futuro dos ativos digitais — estamos, ativamente, construindo-o. **Sobre a equipe e o motivo da existência desta vaga** ------------------------------------------ A Equipe Central de Dados (CDT) tem apenas alguns meses de existência, mas os dados sempre foram o sangue vital da Keyrock desde o primeiro dia. Agora, estamos construindo a Plataforma de Dados da Keyrock para fornecer aos Keyrockers — e aos agentes de IA que trabalham ao seu lado — os dados e o contexto necessários para agir com rapidez e autonomia dentro dos limites acordados e alinhados com nossos objetivos compartilhados. Para isso, precisamos reunir dados de toda a empresa e transformá-los em informações significativas em tempo real para todas as funções que dependem deles: mesas de negociação, gestão de patrimônio e ativos, produto, risco, finanças, conformidade e pesquisa, entre outras. Você será uma das primeiras contratações da CDT e esperamos que contribua na maior parte das decisões estratégicas e no desenvolvimento dos principais projetos. Os padrões que adotarmos e a maneira como a equipe passará a operar ainda estão em aberto. **O que você fará** ------------------ * Construir pipelines de streaming e lote que ingestem, normalizem e distribuam dados de mercado, negociação e carteira, com resiliência a falhas nas fontes de dados e exchanges. * Desenvolver ferramentas de autoatendimento (SDKs, padrões, modelos, agentes de IA), permitindo que outras equipes publiquem, consumam e construam sobre produtos de dados sem depender de nós. * Assumir a responsabilidade pelos contratos de dados e pela evolução dos esquemas. Evitar que alterações de esquema se transformem em eventos de coordenação envolvendo múltiplas equipes. * Projetar a camada lakehouse e de séries temporais com base nos padrões de consulta dos usuários finais. * Construir e aprimorar o Quadro de Governança de Dados e Qualidade de Dados: detecção de fontes obsoletas, validação de esquemas, verificações de intervalo, escritas idempotentes, rastreamento de linhagem, atribuição de propriedade e capacidade de autorrecuperação. * Desenvolver análises derivadas utilizadas pelo negócio: spreads entre exchanges, VWAP em profundidade, microestrutura do livro de ofertas para as mesas de negociação; visões de carteira, exposição e desempenho para a gestão de patrimônio e ativos. * Priorizar observabilidade, custo e desempenho desde o primeiro dia. * Tratar infraestrutura como código (Docker, Terraform, CI/CD), em parceria com nossa Equipe Central de Infraestrutura. * Trabalhar de forma aberta: documentar tudo, colaborar de perto com as áreas de Arquitetura, Infraestrutura, Plataforma e demais equipes. **O que buscamos** -------------------------- Ferramentas importam menos para nós do que a forma como você pensa sobre problemas. Dito isso, segue o perfil da pessoa que temos em mente. Excelência em Engenharia * 8 ou mais anos de experiência construindo sistemas de dados em produção, dos quais outras pessoas dependem. * Grande proficiência em Python e SQL: não apenas escrever consultas, mas também entender o que o mecanismo está fazendo com elas. * Código fácil de ler, testar e descartar posteriormente por outra pessoa. * Forte compreensão de modelagem de dados para cargas de trabalho de streaming e analíticas. * Eficiência, qualidade, idempotência e observabilidade são tratadas com seriedade por padrão. Projeto de Sistemas * Você já projetou e operou sistemas de streaming em Kafka, Redpanda, MSK ou Kinesis, e possui opiniões fundamentadas sobre particionamento, grupos de consumidores, offsets e registros de esquemas. * Você já utilizou um banco de dados de séries temporais em produção (preferencialmente ClickHouse; TimescaleDB, QuestDB ou similares também são aceitáveis) e pode discutir o projeto de tabelas como função dos padrões de consulta. * Você já trabalhou com arquitetura lakehouse e sabe raciocinar sobre layout de tabelas, particionamento e compactação como escolhas de projeto que afetam diretamente o desempenho das consultas e o custo de armazenamento. * Você projeta para autorrecuperação e idempotência. Reprocessamentos são seguros, novas tentativas não causam escritas duplicadas e o sistema se recupera sem intervenção humana. Prontidão Operacional * Docker, Terraform e CI/CD fazem parte de seu modo de trabalho, não sendo considerados uma área separada chamada "DevOps". * Você considera custo e desempenho desde as fases iniciais. * Você instrumenta enquanto constrói: logs, métricas e traces fazem parte integrante do sistema desde o primeiro dia. * Você projeta desde o início para qualidade e governança de dados, abrangendo contratos, validação, linhagem e atribuição de propriedade. Como você pensa e trabalha * Você raciocina a partir dos princípios fundamentais quando enfrenta um problema novo, mantém-se pragmático quando não for o caso e atualiza sua visão conforme aprende mais. * Você trata as mesas de negociação, a gestão de patrimônio e ativos, o produto, o risco, as finanças, a conformidade e a pesquisa como clientes do que constrói, comunicando-se com eles dessa forma. * Você prioriza resultados em vez de entregas. Uma solução menor e mais simples que seja lançada e funcione supera uma solução maior que não o faça. * Você assume responsabilidade integral: projeto, lançamento, operação e aprimoramento. * Você expressa francamente sua opinião, inclusive quando for impopular. Muda de ideia quando o argumento contrário for mais sólido. * Você eleva o nível das pessoas ao seu redor. Suas revisões são reais, júniores crescem ao trabalhar com você e colegas desejam trabalhar novamente com você. * Você demonstra curiosidade sobre o funcionamento dos mercados. Engenharia de dados isoladamente não o manterá interessado aqui. * Você é honesto quanto ao que sabe e ao que não sabe, e age rapidamente para preencher eventuais lacunas. * Você compreende os dados de mercados financeiros: livros de ofertas, negociações, dados de referência, carteiras e exposições. Conhecimento em criptoativos, TradFi ou ambos é um diferencial importante. **Desejável** ---------------- * Experiência com lakehouse usando Apache Iceberg ou Delta Lake. * Familiaridade com DataHub ou plataformas semelhantes de metadados/linhagem. * Rust. Alguns de nossos serviços críticos de desempenho são escritos nessa linguagem. Interesse é bem-vindo; fluência não é obrigatória. **O que você receberá** ------------------- * Um mandato do zero. Você será uma das primeiras contratações da CDT, e a plataforma, os padrões e a cultura da equipe serão moldados por você junto conosco. * Parceiros fortes. Relacionamentos estreitos com as áreas de Arquitetura, Infraestrutura, Plataforma e próprias mesas de negociação. Você não construirá dados em isolamento. * Autonomia sobre como trabalhar. Horários flexíveis, modelo predominantemente remoto e plantão em horário comercial compartilhado entre os membros da equipe. * Pacote salarial competitivo, com diversos benefícios. * Uma equipe que gosta uns dos outros. Encontros online regulares e um evento presencial anual em que todos estão na mesma sala. **Nosso processo de recrutamento** --------------------------- Buscamos profissionais com as competências adequadas e que tenham feito, conscientemente, a escolha de ingressar em nosso campo. O candidato ideal? Alguém motivado, colaborativo, que age com senso de propriedade e entrega resultados sólidos e escaláveis. Como empregador, comprometemo-nos a construir um ambiente de trabalho positivo e colaborativo. Recebemos profissionais de todas as origens e contratamos, recompensamos e promovemos exclusivamente com base em mérito e desempenho. Devido à natureza de nosso negócio e aos requisitos externos, realizamos verificações de antecedentes em todos os candidatos potenciais, cuja aprovação é pré-requisito para ingresso na Keyrock