Principal Engineer - Databricks Data Engineer

Mexiko

Guadalajara, Sonora, Mexico

Automatische Übersetzung. Prüfe das Original.

Unternehmensbeschreibung

Wir sind ein Unternehmen für Digital Product Engineering, das stark wächst! Wir entwickeln Produkte, Dienstleistungen und Erlebnisse, die inspirieren, begeistern und Freude bereiten. Wir arbeiten in großem Maßstab – über alle Geräte und digitalen Medien hinweg – und unsere Mitarbeiter sind auf der ganzen Welt vertreten (genau genommen über 15000 Experten in 26 Ländern). Unsere Arbeitskultur ist dynamisch und nicht hierarchisch geprägt. Wir suchen großartige neue Kollegen. Hier kommen Sie ins Spiel!

Stellenbeschreibung

Stellenbeschreibung:

Überprüfung des aktuellen Status der Databricks-Arbeitsumgebung, einschließlich Umgebungen, Clustern, Unity Catalog-Einrichtung, Zugriffskontrollen und Kostenkonfiguration.

Implementierung und Härtung von Unity Catalog, einschließlich Namensraumstruktur, Zugriffskontrollen, Cluster-Richtlinien und Umgebungstrennung.

Definition von Arbeitsumgebungsstandards, Namenskonventionen, Workflows für Zugriffsanfragen sowie Prozessen für das Onboarding von Benutzern und Teams.

Etablierung von Frameworks zur Datenqualität, einschließlich SLAs, Zertifizierungskriterien und Modellen für die Datenverantwortung.

Erstellung von Automatisierungsvorlagen für routinemäßige Arbeitsumgebungsoperationen wie Cluster-Lebenszyklusmanagement, Kostenwarnungen und Überwachung der Auslastung.

Einrichtung von Observability-Dashboards für Plattformintegrität, Kosten, Erfolgsraten von Jobs und DQ-SLA-KPIs sowie Überwachung der Herkunft (Lineage) zentraler Datenbestände über Arbeitsumgebungen hinweg.

Erstellung von Runbooks für wiederkehrende operative Aufgaben, die von einem Engineer mittlerer Ebene oder Junior-Engineer ohne ständige Unterstützung durch die Senior-Ressource ausgeführt werden können.

Durchführung von Wissenstransfer-Sitzungen mit dem Platform-Engineering-Team.

Bereitstellung einer abschließenden Dokumentation zu Architektur-Entscheidungen, operativen Standards, offenen Punkten und Empfehlungen für das Profil der Festanstellung.

Hauptverantwortlichkeiten.

Bewertung und Optimierung von Databricks-Umgebungen, einschließlich Arbeitsumgebungen, Clustern, Katalogen, Berechtigungen und Sicherheitskonfigurationen.

Definition und Implementierung von Governance-Standards zur Gewährleistung eines sicheren, skalierbaren und konformen Plattformbetriebs.

Federführende Einführung von Unity Catalog durch Entwurf von Datenstrukturen, Zugriffsmodellen und Strategien zur Umgebungstrennung.

Etablierung von RBAC-Richtlinien, Arbeitsumgebungsstandards, Namenskonventionen und Prozessen für den Benutzerzugriff.

Vorantreiben von Data-Governance-Initiativen, einschließlich Frameworks zur Datenqualität, Verantwortungsmodellen, SLAs, Lineage und Stewardship-Praktiken.

Entwicklung von Automatisierungslösungen und Infrastructure as Code (IaC)-Frameworks zur Optimierung der Plattformverwaltung und Reduzierung manueller Aufwände.

Implementierung von Kostenoptimierung, Überwachung und Praktiken für operative Exzellenz in Databricks-Umgebungen.

Entwurf von Observability- und Performance-Dashboards zur Nachverfolgung von Plattformintegrität, Auslastung, Erfolgsraten von Jobs und Datenqualitäts-KPIs.

Erstellung von operativer Dokumentation, Runbooks und Support-Verfahren zur Verbesserung der Plattformzuverlässigkeit und Team-Bereitschaft.

Zusammenarbeit mit Sicherheits-, Compliance-, Infrastruktur- und Data-Engineering-Teams zur Abstimmung der Plattformfähigkeiten mit den Geschäftsanforderungen.

Bereitstellung von Schulungen, Mentoring und Wissenstransfer-Sitzungen zur Befähigung von Plattformadministratoren und Engineering-Teams.

Empfehlung von Plattformverbesserungen und langfristigen Strategien zur Steigerung von Governance, Skalierbarkeit und organisatorischer Reife.

Qualifikationen

Erforderliche Fähigkeiten: Azure Data Factory, Databricks, Unity Catalog

Wünschenswerte Fähigkeiten: Implementierung von Datenplattformen, Google Workspace Administration

Service-Region: UCC

Sprachen

Principal Engineer - Databricks Data Engineer

Unternehmensbeschreibung

Stellenbeschreibung

Hauptverantwortlichkeiten.

Qualifikationen

Dein nächster Jobsucht schon nach dir.

Mehr Möglichkeiten mit einem Profil

Weiter entdecken

Forward Deployed Engineer, Mid-Market - Mexiko-Stadt 🇲🇽

Forward Deployed Engineer, Enterprise - Mexiko-Stadt 🇲🇽

Technischer Support-Ingenieur