The MITRE Corporation
Paramount
Ingénieur Données Pipelines et ETL
Aperçu et Responsabilités
#WeAreParamount a pour mission de libérer la puissance du contenu… et vous ?
Nous avons les marques, nous avons les stars, nous avons le pouvoir d'accomplir notre mission d'offrir du divertissement à la planète – il ne manque plus que VOUS ! Rejoindre Paramount signifie rejoindre une équipe de passionnés qui non seulement reconnaissent le pouvoir du contenu, mais apprécient également une touche de plaisir et d'originalité. Ensemble, nous co-créons des moments qui comptent – tant pour nos audiences que pour nos employés – et visons à laisser une empreinte positive sur la culture.
Ingénieur Données – Pipeline de Données & ETL
Résumé du poste
L'équipe d'ingénierie des données recrute un Ingénieur Données – Pipeline de Données & ETL. Vous contribuerez à construire et maintenir des plateformes de données évolutives et des pipelines ETL/ELT dans un environnement en évolution rapide. Dans ce rôle, vous construirez et supporterez des systèmes de données batch et temps réel alimentant les applications d'analyse, de ML et d'IA. Vous développerez également votre expertise en architecture de données moderne et en meilleures pratiques cloud-natives.
INFORMATIONS COMPLÉMENTAIRES
46034
#LI-RJ1
Fourchette de salaire d'embauche : $98,400.00 - 147,600.00.
La fourchette de salaire d'embauche pour ce poste s'applique à New York, Californie, Colorado, État de Washington et la plupart des autres régions. Le salaire de départ pour le candidat retenu dépendra de divers facteurs liés au poste, notamment, mais sans s'y limiter, la localisation géographique, la demande du marché, l'expérience, la formation et l'éducation. Les avantages disponibles pour ce poste comprennent l'assurance médicale, dentaire, vision, un plan 401(k), une assurance-vie, des prestations d'invalidité, un programme d'aide à la scolarité et des congés payés ou, le cas échéant, tels que dictés par la convention collective appropriée. Ce poste est éligible à une prime.
Paramount est un employeur qui respecte l'égalité des chances (EOE), y compris pour les personnes handicapées/les anciens combattants.
Chez Paramount, l'esprit d'inclusion alimente tout ce que nous faisons, à l'écran comme hors écran. De la programmation et des films que nous créons aux avantages/programmes pour les employés et aux initiatives de rayonnement à impact social, nous croyons que les opportunités, l'accès, les ressources et les récompenses doivent être disponibles pour et au bénéfice de tous. Paramount est fier d'être un lieu de travail qui respecte l'égalité des chances. Nous nous engageons à l'égalité d'emploi, indépendamment de la race, de la couleur, de l'origine ethnique, de l'ascendance, de la religion, du credo, du sexe, de l'origine nationale, de l'orientation sexuelle, de l'âge, du statut de citoyenneté, de l'état civil, du handicap, de l'identité de genre, de l'expression de genre et du statut d'ancien combattant.
Si vous êtes une personne qualifiée handicapée ou un ancien combattant handicapé, vous pouvez demander un aménagement raisonnable si vous êtes incapable ou limité dans votre capacité à utiliser ou à accéder à paramount.com/careers en raison de votre handicap. Vous pouvez demander des aménagements raisonnables en appelant le 212.846.5500 ou en envoyant un e-mail à [email protected]. Seuls les messages laissés à cet effet recevront une réponse.
Responsabilités Clés
Construire et Maintenir des Pipelines de Données Évolutifs
- Concevoir, développer et maintenir des pipelines de données batch et de streaming évolutifs pour des ensembles de données structurés et non structurés à grande échelle.
- Construire des frameworks ETL/ELT robustes supportant les cas d'utilisation d'analyse, de BI, d'expérimentation et de machine learning.
- Optimiser les pipelines pour la performance, la fiabilité, l'évolutivité et l'efficacité des coûts.
- Implémenter des modèles d'ingestion avancés incluant CDC, chargements incrémentiels et traitement piloté par les événements.
Modélisation des Données & Architecture d'Entrepôt de Données
- Concevoir des modèles de données évolutifs, dimensionnels et hybrides optimisés pour les cas d'utilisation d'analyse et de ML.
- Développer des couches de transformation réutilisables (couches sémantiques) qui servent les applications de BI, ML et IA.
- Écrire des requêtes SQL optimisées et prêtes pour la production pour des charges de travail d'analyse à grande échelle.
- Contribuer à l'optimisation des requêtes, à l'indexation, au partitionnement et au réglage des performances sur les systèmes distribués et les entrepôts cloud.
Développement de Pipelines de Données Modernes
- Construire et maintenir des composants de données modulaires suivant les modèles de framework établis.
- Contribuer aux décisions architecturales sur les systèmes de streaming, les lacs de données et les entrepôts.
Qualité, Gouvernance & Observabilité des Données
- Implémenter des cadres automatisés de validation des données, de détection d'anomalies et de surveillance.
- Établir la lignée des données et les normes de métadonnées pour supporter la reproductibilité dans les flux de travail ML.
- Appliquer les meilleures pratiques de gouvernance, de confidentialité et de sécurité, en particulier pour les ensembles de données IA sensibles.
- Assurer l'utilisation responsable des données IA et les normes de conformité.
Compétences Techniques Requises
Expertise Avancée en Pipelines de Données & ETL/ELT
- 2–4+ années d'expérience dans la construction et la mise à l'échelle de pipelines ETL/ELT en production.
- Expérience avec des outils d'orchestration de flux de travail tels qu'Airflow, Composer ou des plateformes similaires.
- Solide compréhension des concepts de traitement de données distribuées.
SQL & Modélisation des Données pour l'Analyse & le ML
- Compétences expertes en SQL pour la transformation et l'analyse à grande échelle.
- Expérience dans la conception de schémas d'entrepôt évolutifs et de couches de données prêtes pour le ML.
- Solide expérience dans l'optimisation de requêtes complexes sur des ensembles de données multi-téraoctets.
Programmation & Intégration de Données ML
- Maîtrise de Python (ou langage similaire) pour le traitement des données et l'intégration de pipelines ML.
- Expérience avec des frameworks de traitement distribué tels que Spark.
Systèmes de Streaming & Pilotés par Événements
- Expérience dans la construction de pipelines de données en temps réel utilisant Kafka, Pub/Sub, ou des technologies similaires.
- Compréhension du streaming de caractéristiques, du traitement de données à faible latence et des architectures pilotées par événements.
- Capacité à architecturer et construire des tableaux de bord en temps réel à l'aide de Superset.
Plateformes de Données Cloud & IA Modernes
- Expérience dans la conception d'architectures de données cloud-natives (GCP préféré).
- Expérience avec les architectures Lakehouse et les entrepôts de données cloud.
Qualifications de Base
- Diplôme de Licence ou de Master en Informatique, Ingénierie ou domaine connexe (ou expérience équivalente).
- 2–4+ années d'expérience en ingénierie des données, développement de pipelines de données ou domaines connexes.
- Solide base en principes d'ingénierie des données modernes, conception de systèmes distribués et architectures cloud-natives.
- Capacité démontrée à concevoir et opérer des systèmes de données de production à grande échelle.
- Expérience avérée en leadership technique et en collaboration interfonctionnelle.
- Solides compétences en résolution de problèmes et capacité à prospérer dans des environnements complexes et rapides.
- Souci du détail et engagement envers l'excellence technique et l'amélioration continue.
Compréhension du streaming de caractéristiques, du traitement de données à faible latence et des architectures pilotées par événements. Travailler en étroite collaboration avec l'équipe de streaming et concevoir/construire des tableaux de bord en temps réel à l'aide de Superset. Plateformes de Données Cloud & IA Modernes. Expérience dans la conception d'architectures de données cloud-natives (GCP préféré) Expérience avec les architectures Lakehouse et les entrepôts de données cloud. La connaissance des bases de données vectorielles, des pipelines d'embeddings et de l'infrastructure de service IA est un plus.
- Familiarité avec l'intégration de pipelines de données avec des plateformes ML telles que Vertex AI (préféré), Databricks ML, ou équivalent.
- La familiarité avec les bases de données vectorielles, les pipelines d'embeddings et l'infrastructure de service IA est un plus.
Paramount Streaming, une division de Paramount Global, abrite les services directs au consommateur de l'entreprise, qu'ils soient gratuits ou payants, sous forme de Pluto TV et Paramount+. Pluto TV est le leader mondial de la télévision gratuite financée par la publicité, offrant plus de 1,400 chaînes mondiales et une vaste bibliothèque de contenu en streaming, y compris des chaînes en direct et originales. Paramount+, service de vidéo à la demande par abonnement numérique et de streaming en direct, combine des sports en direct, des informations de dernière minute et une montagne de divertissement™. Paramount+ propose une vaste bibliothèque de séries originales, de succès et de films populaires dans tous les genres, issus de marques et de studios de production de renommée mondiale, dont SHOWTIME®.
Ce que nous offrons
- Rémunération attractive et avantages sociaux complets. Consultez notre liste complète d'avantages ici : paramount.com/careers/benefits
- Congés payés généreux.
- Une opportunité passionnante et enrichissante de faire partie d'une des équipes les plus dynamiques de Paramount.
- Opportunités d'événements d'engagement sur site et virtuels.
- Opportunités uniques de créer des liens significatifs et de bâtir une communauté dynamique, à l'intérieur et à l'extérieur du lieu de travail.
- Découvrez la vie chez Paramount : paramount.com/careers/life-at-paramount
