États-Unis
B&A
Paramount
Ingénieur de données Pipelines de données et ETL
États-Unis
Burbank, California, United States
PythonSQLGCPGo
Traduction automatique. Consultez l’original.
À propos du poste
La narration est, et sera toujours, au cœur de ce que nous faisons chez Skydance.
Notre vision est de bâtir un écosystème de divertissement prospère où les histoires et les mondes sont imaginés, prennent vie et sont vécus. Nous créons pour tous les âges et tous les publics, en nous appuyant sur la force de notre contenu et de nos expériences ainsi que sur la profondeur de notre lien avec les fans. Nous sommes axés sur les créateurs, centrés sur le public, tournés vers la technologie et déployés à l'échelle mondiale.
Ici, vous travaillerez avec des équipes talentueuses qui avancent rapidement, pensent avec audace et collaborent avec détermination pour obtenir des résultats. Nous visons haut, défendons les meilleures idées et gagnons ensemble, en gagnant chaque jour la confiance de nos employés, créateurs, partenaires et publics.
Si l'opportunité de contribuer à bâtir la prochaine génération d'entreprise mondiale de médias et de divertissement, propulsée par la créativité et la technologie, vous stimule, nous serions ravis de vous accueillir à bord. C'EST PARTI !
Ingénieur de données – Pipeline de données & ETL
L'équipe Data Engineering recrute un Data Engineer – Data Pipeline & ETL. Vous aiderez à concevoir et maintenir des plateformes de données évolutives ainsi que des pipelines ETL/ELT dans un environnement dynamique. Dans ce rôle, vous développerez et prendrez en charge des systèmes de données par lots et en temps réel alimentant des applications d'analyse, ML et IA. Vous développerez également votre expertise en architecture de données moderne et en bonnes pratiques cloud-native.
Présentation et responsabilités
46034
Résumé du poste
#LI-RJ1
INFORMATIONS COMPLÉMENTAIRES
Fourchette de salaire à l'embauche : $98,400.00 - 147,600.00.
La fourchette de salaire à l'embauche pour ce poste s'applique à New York, en Californie, au Colorado, dans l'État de Washington et dans la plupart des autres zones géographiques. La rémunération de départ pour le candidat retenu dépend de divers facteurs liés au poste, notamment, mais sans s'y limiter, la situation géographique, les demandes du marché, l'expérience, la formation et l'éducation. Les avantages sociaux disponibles pour ce poste incluent l'assurance médicale, dentaire, de la vision, un plan 401(k), une couverture d'assurance vie, des prestations d'invalidité, un programme d'aide aux frais de scolarité et des congés payés ou, le cas échéant, tel que dicté par la convention collective appropriée. Ce poste est éligible à une prime.
Skydance est un employeur garantissant l'égalité des chances (EOE)
Nous saisissons l'opportunité de bâtir une main-d'œuvre qui reflète un large éventail de perspectives, d'horizons et d'expériences. Être un employeur garantissant l'égalité des chances signifie que nous prenons au sérieux notre responsabilité de considérer les candidats qualifiés sur la base du mérite. Conformément aux lois du pays ou de la région dans lequel le rôle est basé, cela inclut une considération sans égard à la race, la couleur, l'ethnicité, l'origine nationale, le statut de citoyenneté, la religion ou les croyances, le sexe, le genre, l'identité ou l'expression de genre, l'orientation sexuelle, l'âge, l'état civil, la grossesse, la parentalité, le handicap physique ou mental, les informations génétiques, le statut militaire ou de vétéran protégé, le statut syndical ou toute autre catégorie protégée par la loi applicable.
Si vous êtes une personne qualifiée en situation de handicap, vous pouvez demander un aménagement raisonnable pendant le processus de candidature et/ou de recrutement. Vous pouvez demander des aménagements raisonnables en appelant le 212.846.5500 ou en envoyant un e-mail à [email protected]. Seuls les messages laissés à cette fin seront retournés.
Responsabilités clés
Construire et maintenir des pipelines de données évolutifs
- Concevoir, développer et maintenir des pipelines de données par lots et en streaming pour des jeux de données structurés et non structurés à grande échelle.
- Construire des frameworks ETL/ELT robustes prenant en charge l'analyse, la BI, l'expérimentation et les cas d'utilisation de machine learning.
- Optimiser les pipelines pour la performance, la fiabilité, l'évolutivité et l'efficacité des coûts.
- Implémenter des modèles d'ingestion avancés, notamment le CDC, les chargements incrémentiels et le traitement piloté par les événements.
Modélisation des données & Architecture d'entrepôt de données
- Concevoir des modèles de données évolutifs, dimensionnels et hybrides optimisés pour les cas d'usage analytiques et ML.
- Développer des couches de transformation réutilisables (couches sémantiques) au service des applications BI, ML et IA.
- Écrire du SQL optimisé de qualité production pour des charges de travail analytiques à grande échelle.
- Contribuer à l'optimisation des requêtes, à l'indexation, au partitionnement et au réglage des performances dans les systèmes distribués et les entrepôts cloud.
Développement moderne de pipelines de données
- Construire et maintenir des composants de données modulaires en suivant les modèles de framework établis.
- Contribuer aux décisions architecturales concernant les systèmes de streaming, les lacs de données et les entrepôts.
Qualité des données, gouvernance & observabilité
- Implémenter des frameworks automatisés de validation des données, de détection d'anomalies et de surveillance.
- Établir la lignée des données et des normes de métadonnées pour favoriser la reproductibilité dans les flux de travail ML.
- Appliquer les meilleures pratiques de gouvernance, de confidentialité et de sécurité, en particulier pour les jeux de données d'IA sensibles.
- Assurer une utilisation responsable des données d'IA et le respect des normes de conformité.
Compétences techniques requises
Expertise avancée en pipeline de données & ETL/ELT
- 2–4+ années d'expérience dans la construction et la mise à l'échelle de pipelines ETL/ELT dans des environnements de production.
- Expérience avec des outils d'orchestration de flux de travail tels qu'Airflow, Composer ou des plateformes similaires.
- Solide compréhension des concepts de traitement de données distribuées.
SQL & Modélisation de données pour l'analyse & ML
- Compétences expertes en SQL pour la transformation et l'analyse à grande échelle.
- Expérience dans la conception de schémas d'entrepôt évolutifs et de couches de données prêtes pour le ML.
- Solide expérience dans l'optimisation de requêtes complexes sur des jeux de données de plusieurs téraoctets.
Programmation & Intégration de données ML
- Maîtrise de Python (ou langage similaire) pour le traitement des données et l'intégration de pipelines ML.
- Expérience avec des frameworks de traitement distribué tels que Spark.
- Familiarité avec l'intégration de pipelines de données avec des plateformes ML telles que Vertex AI (préféré), Databricks ML, ou équivalent.
Streaming & Systèmes pilotés par les événements
- Expérience dans la construction de pipelines de données en temps réel utilisant Kafka, Pub/Sub ou des technologies similaires.
- Compréhension du streaming de fonctionnalités, du traitement de données à faible latence et des architectures pilotées par les événements.
- Capacité à architecturer et construire des tableaux de bord en temps réel en utilisant Superset.
Cloud & Plateformes de données d'IA modernes
- Expérience dans la conception d'architectures de données natives cloud (GCP préféré).
- Expérience avec les architectures Lakehouse et les entrepôts de données cloud.
- La familiarité avec les bases de données vectorielles, les pipelines d'embeddings et l'infrastructure de service d'IA est un plus.
Qualifications de base
- Licence ou Master en informatique, ingénierie ou domaine connexe (ou expérience équivalente).
- 2–4+ années d'expérience en ingénierie des données, développement de pipelines de données ou domaines connexes.
- Solide fondation dans les principes modernes d'ingénierie des données, la conception de systèmes distribués et les architectures natives cloud.
- Capacité démontrée à concevoir et exploiter des systèmes de données de production à grande échelle.
- Expérience avérée en leadership technique et en collaboration interfonctionnelle.
- Solides compétences en résolution de problèmes et capacité à prospérer dans des environnements complexes et rapides.
- Souci du détail et engagement envers l'excellence en ingénierie et l'amélioration continue.
- Compréhension du streaming de fonctionnalités, du traitement de données à faible latence et des architectures pilotées par les événements. Travailler en étroite collaboration avec l'équipe de streaming et architecturer/construire des tableaux de bord en temps réel en utilisant Superset. Cloud & Plateformes de données d'IA modernes.
- Expérience dans la conception d'architectures de données natives cloud (GCP préféré). Expérience avec les architectures Lakehouse et les entrepôts de données cloud. La connaissance des bases de données vectorielles, des pipelines d'embeddings et de l'infrastructure de service d'IA est un plus.
Paramount Streaming, une division au sein de Paramount Global, abrite les services directs aux consommateurs de l'entreprise, couvrant les offres gratuites et payantes sous la forme de Pluto TV et Paramount+. Pluto TV est le leader mondial de la télévision gratuite financée par la publicité, proposant plus de 1,400 chaînes mondiales et une vaste bibliothèque de contenu en streaming, y compris des chaînes en direct et originales. Paramount+, service de vidéo à la demande par abonnement numérique et de streaming en direct, combine le sport en direct, les dernières nouvelles et A Mountain of Entertainment™. Paramount+ propose une vaste bibliothèque de séries originales, d'émissions à succès et de films populaires dans tous les genres provenant de marques et de studios de production de renommée mondiale, y compris SHOWTIME®.
Ce que nous offrons
- Une rémunération attractive et des packages d'avantages sociaux complets. Consultez notre liste complète d'avantages ici skydance.com/careers/benefits.
- Des congés payés généreux.
- Des abonnements gratuits à HBO Max, Paramount+ et d'autres services de streaming et produits d'actualité numérique de Skydance.
- Des opportunités d'engagement des employés robustes, incluant l'accès à des projections et événements exclusifs, des séries de conférences, des activités de bénévolat et plus encore.
Plus d’opportunités avec un seul profil
Vous souhaitez accéder à plus de postes sans répéter tout le processus ? Créez votre profil pour être trouvé par les entreprises utilisant Nort.
Créer mon profil