Canadá
Global Relay
Movable Ink
Engenheiro de Dados Sênior, Sistemas de IA
Canadá
Toronto, Ontario, Canada
PythonGCPDockerKubernetes
Tradução automática. Consulte o original.
Sobre a oportunidade
A Movable Ink escala a personalização de conteúdo para profissionais de marketing por meio da geração de conteúdo ativado por dados e tomada de decisão por IA. As marcas mais inovadoras do mundo confiam na Movable Ink para maximizar a receita, simplificar o fluxo de trabalho e aumentar a agilidade do marketing. Com sede na cidade de Nova York e cerca de 600 funcionários, a Movable Ink atende sua base global de clientes com operações na América do Norte, América Central, Europa, Austrália e Japão.
A equipe de Sistemas de IA é responsável pelo mecanismo central de recomendações e pela plataforma de IA que impulsiona bilhões de decisões de marketing orientadas por IA diariamente em algumas das maiores marcas de consumo do mundo. Como Engenheiro de Dados Sênior, você será responsável pelos pipelines de dados e pela infraestrutura de dados baseados em Spark que formam o núcleo deste sistema - construindo, escalando e otimizando a camada de dados que alimenta nossos modelos de IA em produção. Você trabalhará ao lado de engenheiros e cientistas de IA em um ambiente colaborativo, contribuindo com pipelines de dados e produtos para impulsionar nossos sistemas de recomendação principais e nosso produto DaVinci Personalization. Esta é uma oportunidade de trabalhar de ponta a ponta em sistemas de dados de grande escala que impactam milhões de clientes, em uma equipe que atua na interseção da engenharia de dados e machine learning.
Esta função se reportará ao Diretor de Engenharia (IA/ML).
Responsabilidades
- Construir, manter e otimizar pipelines de dados em produção que impulsionam a personalização orientada por IA em escala, abrangendo seleção de conteúdo, otimização do tempo de envio, personalização de linhas de assunto e limitação de frequência.
- Possuir e escalar pipelines em lote baseados em Spark, incluindo configuração de cluster, ajuste e otimização de desempenho no GCP Dataproc.
- Construir e manter nosso Data Lake de IA, garantindo a qualidade, acessibilidade e armazenamento eficiente dos dados
- Apoiar as necessidades de dados de Engenheiros e Cientistas de IA para desenvolvimento, treinamento e avaliação de modelos
- Identificar e resolver gargalos de desempenho e limitações de escala em pipelines de dados e infraestrutura.
- Colaborar com engenheiros de sistemas distribuídos na evolução arquitetural da plataforma, garantindo a continuidade da camada de dados durante todo o processo.
- Melhorar continuamente a infraestrutura de dados para maior escalabilidade e confiabilidade.
- Lançar funcionalidades e produtos de dados que entreguem valor de negócio mensurável e tangível.
Qualificações
- 5+ anos de experiência em engenharia de dados.
- Experiência profunda com Apache Spark, incluindo a API de DataFrame do PySpark e experiência na resolução de problemas complexos de escala.
- Experiência com processamento de dados em larga escala, configuração de cluster, otimização e ajuste (utilizamos GCP Dataproc).
- Fortes habilidades de desenvolvimento de software em Python (testes unitários, git, revisão de código, CI/CD).
- Experiência com formatos de armazenamento de dados (utilizamos Parquet, Delta Lake).
- Experiência com dados de streaming de eventos (utilizamos Kafka).
- Experiência com plataformas de computação em nuvem (utilizamos a plataforma Google Cloud).
- Experiência com otimização avançada de consultas.
- Familiaridade com práticas de Ciclo de Vida de Desenvolvimento de Software, como integração contínua/entrega contínua e implantação automatizada (utilizamos Docker, Kubernetes e GitHub Actions).
- Capacidade de colaborar com parceiros técnicos - você trabalhará em estreita colaboração com engenheiros de IA, cientistas e outras equipes para determinar requisitos e tomar decisões de design
- Gostar de trabalhar em um ambiente dinâmico e orientado a metas.
A faixa salarial base para esta posição é $144K CAD - 188K CAD/ano, que pode incluir bônus adicional dependendo da posição oferecida, além de uma gama completa de benefícios médicos, financeiros e/ou outros.
O salário base oferecido pode variar dependendo do conhecimento, habilidades e experiência relacionados ao cargo.
Estudos mostraram que mulheres, comunidades de cor e pessoas historicamente sub-representadas são menos propensas a se candidatar a vagas a menos que atendam a cada uma das qualificações. Estamos comprometidos em construir uma cultura diversa e inclusiva onde todos os Inkers possam prosperar. Se você está entusiasmado com a função, mas não atende a todas as qualificações mencionadas acima, encorajamos você a se candidatar. Nossas diferenças trazem uma amplitude de conhecimento e perspectivas que nos tornam coletivamente mais fortes.
Recebemos e empregamos pessoas independentemente de raça, cor, identidade ou expressão de gênero, religião, informações genéticas, status parental ou de gravidez, origem nacional, orientação sexual, idade, cidadania, estado civil, etnia, status familiar ou conjugal, capacidade física e mental, afiliação política, deficiência, status de Veterano ou outras características protegidas. Temos orgulho de ser um empregador que oferece oportunidades iguais.
Mais oportunidades com um só perfil
Quer aparecer para várias vagas sem repetir todo o processo? Crie seu perfil e seja encontrado pelas empresas que usam a Nort.
Criar meu perfil