États-Unis
Ametek, Inc.
Zurich Insurance Company Ltd.
Ingénieur Data - Databricks
États-Unis
Ciudad de México, Mexico · New Mexico, United States
PythonSQL
Traduction automatique. Consultez l’original.
À propos du poste
#ZCC Zurich Capability Center recrute actuellement un(e) :
Ingénieur Data - Databricks
Responsabilités
En tant qu'Ingénieur Data, vos principales tâches comprendront :
- Concevoir, construire et maintenir des pipelines de données évolutifs en utilisant Databricks et des plateformes de données basées sur le cloud.
- Développer, optimiser et automatiser les processus ETL/ELT pour soutenir les initiatives d'analyse, de reporting et de machine learning.
- Travailler en étroite collaboration avec les Data Scientists, les Analystes, les Ingénieurs ML et les parties prenantes métier pour comprendre les besoins en données et fournir des ensembles de données fiables.
- Implémenter des frameworks d'ingestion de données à partir de plusieurs sources de données structurées et non structurées.
- Construire et maintenir des modèles de données, des lacs de données et des entrepôts de données qui soutiennent les besoins analytiques de l'entreprise.
- Assurer la qualité, la cohérence, la gouvernance et la sécurité des données sur les plateformes.
- Optimiser les charges de travail Spark et les environnements Databricks en termes de performance et de rentabilité.
- Soutenir le déploiement et l'opérationnalisation des solutions de machine learning en fournissant des ensembles de données prêts pour la production et des pipelines de fonctionnalités.
- Collaborer avec les équipes Azure, IT et DevOps pour mettre en œuvre les meilleures pratiques CI/CD et DataOps.
- Surveiller, dépanner et améliorer continuellement la performance et la fiabilité de la plateforme de données.
Vos compétences et votre expérience
En tant qu'Ingénieur Data, vos compétences et votre expérience comprendront idéalement :
Requis
- Diplôme de Licence en Informatique, Ingénierie, Systèmes d'Information, Mathématiques ou un domaine connexe.
- 3+ années d'expérience en Ingénierie de données, en entrepôt de données ou dans des environnements Big Data.
- Solides compétences en programmation en Python et SQL.
- Expérience pratique avec Databricks, Apache Spark et le traitement distribué des données.
- Expérience dans la conception et le développement de pipelines de données ETL/ELT.
- Expérience de travail avec des lacs de données et des architectures de données modernes.
- Compréhension des concepts de modélisation de données, y compris le schéma en étoile et la modélisation dimensionnelle.
- Expérience de travail avec Git et les systèmes de contrôle de version.
- Solides compétences analytiques et de résolution de problèmes.
- Niveau d'anglais B2 ou supérieur.
Qualifications préférées
- Expérience avec les services de plateforme de données Azure, y compris :
- Azure Databricks
- Azure Data Factory
- Azure Data Lake Storage
- Azure Synapse Analytics
- Azure DevOps
- Expérience de travail avec Delta Lake et l'architecture Lakehouse.
- Connaissance des outils d'orchestration tels qu'Airflow, Databricks Workflows, ou Azure Data Factory.
- Expérience dans le support des cas d'utilisation de Machine Learning et des pratiques MLOps.
- Familiarité avec MLflow et les processus de déploiement de modèles.
- Connaissance des pratiques CI/CD, Infrastructure as Code et DataOps.
- Expérience avec les technologies de streaming telles que Kafka ou Event Hubs.
- Expérience de travail dans des environnements Agile.
- L'expérience dans le secteur de l'assurance est un plus.
Atouts
- Expérience de collaboration avec des équipes de Data Science et de soutien aux initiatives IA/ML.
- Connaissance de l'IA Générative, des pipelines de données LLM, des bases de données vectorielles et des flux d'intégration (embedding).
- Expérience avec Unity Catalog, la gouvernance des données et la gestion des métadonnées.
- Exposition aux architectures cloud natives et aux plateformes de données à l'échelle de l'entreprise.
*
Si vous êtes intéressé(e), postulez directement via ce lien ou envoyez votre CV à [email protected] [[email protected]].
Poste disponible uniquement pour les candidats résidant à Mexico, dans l'État de Mexico ou à Guadalajara. Veuillez postuler uniquement si vous résidez dans l'une de ces régions.
Qui sommes-nous
Vous recherchez un environnement de travail stimulant et inspirant où vous pouvez faire la différence ? Chez Zurich, des millions d'individus et d'entreprises nous font confiance pour nos produits et services chaque jour. Nos 53,000 employés dans le monde entier constituent la base de notre succès, permettant aux entreprises et aux communautés d'affronter un monde de risques en toute confiance. Imaginez si vous pouviez aider les gens à faire cela partout dans le monde. Vous leur donneriez confiance et assurance en protégeant ce qu'ils aiment le plus. C'est un défi de taille, mais vous serez soutenu(e) par une équipe de classe mondiale qui croit en vous aidant à atteindre votre plein potentiel et à tenir nos promesses. Alors, relevez le défi. Soyez inspiré(e). Aidez-nous à faire la différence.
Chez Zurich, nous sommes un employeur qui respecte l'égalité des chances. Nous attirons et retenons les personnes les plus qualifiées, sans distinction de race/origine ethnique, de religion, de sexe, d'orientation sexuelle, d'âge ou de handicap.
Plus d’opportunités avec un seul profil
Vous souhaitez accéder à plus de postes sans répéter tout le processus ? Créez votre profil pour être trouvé par les entreprises utilisant Nort.
Créer mon profil