Canada
Global Relay
Movable Ink
Ingénieur de données senior, systèmes d'IA
Canada
Toronto, Ontario, Canada
PythonGCPDockerKubernetes
Traduction automatique. Consultez l’original.
À propos du poste
Movable Ink adapte la personnalisation du contenu pour les spécialistes du marketing grâce à la génération de contenu activée par les données et à la prise de décision par IA. Les marques les plus innovantes au monde s'appuient sur Movable Ink pour maximiser leurs revenus, simplifier leurs flux de travail et accroître leur agilité marketing. Basée à New York et comptant près de 600 employés, Movable Ink sert sa clientèle mondiale avec des opérations en Amérique du Nord, en Amérique centrale, en Europe, en Australie et au Japon.
L'équipe Systèmes d'IA gère le moteur de recommandation principal et la plateforme d'IA qui alimentent quotidiennement des milliards de décisions marketing basées sur l'IA pour certaines des plus grandes marques de consommation au monde. En tant qu'ingénieur de données senior, vous serez responsable des pipelines de données et de l'infrastructure de données basés sur Spark au cœur de ce système, en construisant, en mettant à l'échelle et en optimisant la couche de données qui alimente nos modèles d'IA en production. Vous travaillerez aux côtés d'ingénieurs et de scientifiques spécialisés en IA dans un environnement collaboratif, en contribuant à des pipelines de données et à des produits destinés à alimenter nos systèmes de recommandation principaux et notre produit DaVinci Personalization. Il s'agit d'une opportunité de travailler de bout en bout sur des systèmes de données à grande échelle qui touchent des millions de clients, au sein d'une équipe travaillant à l'intersection de l'ingénierie des données et du machine learning.
Ce poste est rattaché au directeur de l'ingénierie (IA/ML).
Responsabilités
- Construire, maintenir et optimiser les pipelines de données de production qui alimentent la personnalisation basée sur l'IA à grande échelle, notamment pour la sélection de contenu, l'optimisation du moment d'envoi, la personnalisation de l'objet et la limitation de la fréquence.
- Gérer et mettre à l'échelle les pipelines par lots basés sur Spark, y compris la configuration des clusters, le réglage et l'optimisation des performances sur GCP Dataproc.
- Construire et maintenir notre lac de données dédié, en garantissant la qualité, l'accessibilité et le stockage efficace des données.
- Soutenir les besoins en données des ingénieurs et scientifiques pour le développement, l'entraînement et l'évaluation des modèles.
- Identifier et résoudre les goulots d'étranglement de performance et les limitations de mise à l'échelle dans les pipelines de données et l'infrastructure.
- Collaborer avec les ingénieurs en systèmes distribués sur l'évolution architecturale de la plateforme, en assurant la continuité de la couche de données.
- Améliorer continuellement l'infrastructure de données pour une meilleure évolutivité et fiabilité.
- Publier des fonctionnalités et des produits de données qui apportent une valeur commerciale mesurable et tangible.
Qualifications
- 5 ans et plus d'expérience en ingénierie des données.
- Expertise approfondie d'Apache Spark, y compris l'API PySpark DataFrame et expérience dans la résolution de problèmes de mise à l'échelle complexes.
- Expérience du traitement de données à grande échelle, de la configuration de clusters, de l'optimisation et du réglage (nous utilisons GCP Dataproc).
- Solides compétences en développement logiciel en Python (tests unitaires, git, revue de code, CI/CD).
- Expérience avec les formats de stockage de données (nous utilisons Parquet, Delta Lake).
- Expérience avec les données de streaming d'événements (nous utilisons Kafka).
- Expérience avec les plateformes de cloud computing (nous utilisons la plateforme Google Cloud).
- Expérience en optimisation avancée des requêtes.
- Connaissance des pratiques du cycle de vie du développement logiciel, telles que l'intégration continue/le déploiement continu et le déploiement automatisé (nous utilisons Docker, Kubernetes et les actions GitHub).
- Capacité à collaborer avec des partenaires techniques - vous travaillerez en étroite collaboration avec des ingénieurs, des scientifiques et d'autres équipes pour déterminer les exigences et prendre des décisions de conception.
- Apprécie de travailler dans un environnement dynamique et axé sur les objectifs.
La fourchette de salaire de base pour ce poste est $144K CAD - 188K CAD/an, ce qui peut inclure une prime supplémentaire selon le poste finalement proposé, en plus d'une gamme complète d'avantages médicaux, financiers et/ou autres.
Le salaire de base proposé peut varier en fonction des connaissances, des compétences et de l'expérience liées au poste.
Des études ont montré que les femmes, les communautés de couleur et les personnes historiquement sous-représentées sont moins susceptibles de postuler à des emplois à moins de remplir toutes les qualifications. Nous nous engageons à bâtir une culture diversifiée et inclusive où tous les Inkers peuvent s'épanouir. Si ce rôle vous enthousiasme mais que vous ne remplissez pas toutes les qualifications mentionnées ci-dessus, nous vous encourageons à postuler. Nos différences apportent une richesse de connaissances et de perspectives qui nous rend collectivement plus forts.
Nous accueillons et employons des personnes indépendamment de leur race, couleur, identité ou expression de genre, religion, informations génétiques, statut parental ou de grossesse, origine nationale, orientation sexuelle, âge, citoyenneté, état civil, ethnicité, situation familiale, capacités physiques et mentales, affiliation politique, handicap, statut d'ancien combattant ou toute autre caractéristique protégée. Nous sommes fiers d'être un employeur offrant l'égalité des chances.
Plus d’opportunités avec un seul profil
Vous souhaitez accéder à plus de postes sans répéter tout le processus ? Créez votre profil pour être trouvé par les entreprises utilisant Nort.
Créer mon profil