Engenheiro(a) de Crawling para Pesquisa

Construímos infraestrutura que entrega enormes volumes de dados da web para empresas que treinam os modelos de IA mais poderosos do mundo.

Somos a equipe que ajuda a impulsionar e dar suporte ao Grass, uma rede de compartilhamento de largura de banda que nos permite operar um crawler distribuído massivo, nos dando acesso único a dados públicos da web de alta qualidade em escala global. Além disso, construímos pipelines para ingestão, segmentação e anotação de bilhões de vídeos, transcrições e arquivos de áudio, impulsionando a criação de datasets para laboratórios de ponta.

Somos enxutos, técnicos e agimos rápido. Sem burocracia, sem tomada de decisão lenta; apenas uma equipe de construtores se esforçando para expandir o que é possível para dados abertos da web e IA.

Visão Geral

Como Engenheiro(a) de Crawling para Pesquisa, você projetará e operará sistemas de aquisição de dados da web em larga escala para pesquisa e desenvolvimento de modelos. Seu trabalho abrangerá sistemas distribuídos, infraestrutura de scraping e pipelines de dados.

Por Que Trabalhar Conosco

Oportunidade. Estamos na vanguarda do desenvolvimento de um crawler e grafo de conhecimento em escala web que melhora o acesso a dados públicos da web e estende o valor da IA às pessoas.

Cultura. Somos uma equipe enxuta com um alto padrão. Viemos para o trabalho não para ficar confortáveis, mas para descobrir do que somos capazes e para fazer um trabalho que importa. Não estamos chamando pessoas que mantêm as coisas em movimento. Estamos chamando pessoas que tornam todos ao seu redor melhores.

Priorizamos baixo ego e alta produtividade. Esta é uma equipe totalmente remota.

Observação: Esta função exige um horário de trabalho que se sobreponha suficientemente ao horário comercial EST para colaborar efetivamente com a equipe.

Critérios de Avaliação

Exemplos de Projetos

Com base na experiência e na capacidade demonstrada de operar em escala

Remuneração. Você receberá um salário e benefícios competitivos.