Sonae MC
AgileEngine
Infrastructure Engineer (Kafka) ID82562
Über die Stelle
AgileEngine ist ein Unternehmen mit 5000 Mitarbeitern, das preisgekrönte Software für Fortune-500-Marken und wegweisende Startups in über 17 Branchen entwickelt. Wir zählen zu den führenden Unternehmen in Bereichen wie Anwendungsentwicklung sowie KI/ML, und unsere mitarbeiterorientierte Unternehmenskultur hat uns bereits mehrfach Auszeichnungen als „Best Place to Work“ eingebracht.
WARUM SIE ZU UNS KOMMEN SOLLTEN
Wenn Sie nach einem Ort suchen, an dem Sie wachsen, etwas bewegen und mit engagierten Menschen zusammenarbeiten können, würden wir Sie gerne kennenlernen!
ÜBER DIE ROLLE
Wir suchen einen Infrastructure Engineer (Kafka), der die Kafka-Umgebung hinter einer ereignisgesteuerten Integrationsplattform verantwortet und betreibt, einschließlich der Infrastruktur für Build, Deployment und Monitoring.
DAS BRINGEN SIE MIT
- Fundierte, praktische Produktionserfahrung mit Kafka von mindestens 4+ Jahren – dies ist die zentrale Anforderung. Erfahrung mit Topic- und Partition-Design, Consumer-Group-Mechaniken, Retention und Compaction, Replikation, Performance-Tuning sowie Fehlerbehebung bei Latenz, Rebalances und Zustellungsfehlern unter Last.
- Praktisches Verständnis von ereignisgesteuerten Zustellungssemantiken: at-least-once vs. exactly-once, Idempotenz, Reihenfolgegarantien, Dead-Letter-Handling und Replay.
- Starke Enterprise-Linux-Engineering- und Automatisierungskenntnisse – Shell- und Python-Scripting.
- Erfahrung mit CI/CD-Pipelines, idealerweise deklarative Jenkins-Pipelines, sowie praktische Erfahrung mit Artefakt- und Release-Management.
- Container – Docker oder Podman, OCI-Images – und Container-Orchestrierungsplattformen.
- Infrastructure-as-Code und Konfigurationsmanagement.
- Observability-Tools: Log-Aggregation, Metriken, Alerting und SLO-Definition.
- GenAI-gestützte Entwicklung – Sie nutzen aktiv KI-Coding-Agenten in Ihrem täglichen Workflow oder sind nachweislich daran interessiert, diese einzusetzen. Wir automatisieren und entwickeln im gesamten Team mit diesen Tools und erwarten von jedem, dass er sicher damit umgehen kann.
- Netzwerktechnik, TLS, Secrets-Management und Enterprise-Authentifizierung (OAuth2).
- Eine Mentalität für den Produktionsbetrieb: Incident-Response, Kapazitätsplanung und Change-Control.
- Starke schriftliche und mündliche Kommunikationsfähigkeiten für die Arbeit in einem globalen Team.
- Englischkenntnisse auf fortgeschrittenem Niveau.
WÜNSCHENSWERT
- Tiefe Kenntnisse im Kafka-Ökosystem: Kafka Connect, Schema Registry, Kafka Streams, MirrorMaker oder verwaltete Kafka-Dienste.
- Change-Data-Capture-Muster und entsprechende Tools.
- Infrastruktur zur Unterstützung großer kommerzieller SaaS-Plattformen, einschließlich Integrations-Gateways oder Connector-Servern.
- Paket- und Artefaktverteilung im Enterprise-Maßstab.
- Erfahrung in einer regulierten Umgebung – Audit-Retention, Datenklassifizierung, formale Build- und Betriebs-Governance.
- Kubernetes; Multi-Region- und Hochverfügbarkeitsdesign.
IHRE AUFGABEN
- Verantwortung für die Kafka-Umgebung – Topic-Design und Namenskonventionen, Partitionierungs- und Keying-Strategie, Replikation, Retention- und Compaction-Richtlinien, Consumer-Group- und Offset-Management, Quotas sowie Broker-Konfiguration und Upgrades.
- Sicherstellung der Plattform-Resilienz und -Zuverlässigkeit – Aufrechterhaltung der Verfügbarkeit der Integrationsplattform bei Beeinträchtigung oder Ausfall der vorgelagerten SaaS-Plattform des Anbieters, Abfangen von Traffic-Spitzen ohne Überlastung und Sicherstellung, dass Events durch eine korrekt dimensionierte, konfigurierte und betriebene Kafka-Infrastruktur wiederholbar und auditierbar bleiben.
- Praktische Umsetzung der Zustellungsgarantien der Plattform: at-least-once- und exactly-once-Semantik, idempotente Producer, transaktionale Schreibvorgänge wo erforderlich, Dead-Letter-Topics und Self-Service-Replay-Tools zur Wiederherstellung nach nachgelagerten Fehlern.
- Aufbau von Streaming-Observability: Monitoring von Consumer-Lag, Queue-Tiefe, Durchsatz und Rebalance; End-to-End-Correlation-ID-Tracing über Topics hinweg; Dashboards, Service Level Objectives und Alerting.
- Planung von Kapazität, Kosten und Retention für ein dauerhaftes Log mit regulatorischen Audit-Retention-Anforderungen sowie deren Anpassung an die zunehmende Nutzung im Unternehmen.
- Evaluierung und Integration von anbieterspezifischen Streaming- und Change-Data-Capture-Mechanismen im Zuge der Weiterentwicklung der Ingress- und Egress-Pfade der Plattform.
- Verantwortung für die Weiterentwicklung der Build- und Release-Pipeline – automatisierte Jenkins-Pipelines zur Erstellung paketierter Anwendungsinstallationen für mehrere Enterprise-Linux-Generationen, signierte Container-Images und generierte Dokumentation, bereitgestellt über interne Artefakt- und Image-Verteilungsdienste.
- Betrieb der Runtime-Umgebung: containerisierte Deployments, Integrations-Gateway-Hosts und die laufende Modernisierung des Betriebssystems dieser Umgebung.
- Entwicklung der Infrastruktur hinter der Resilienz und Kontinuität der Plattform – Gesundheitsprüfung, Circuit-Breaking sowie die Abgleich- und Monitoring-Prozesse, die nachweisen, dass die Plattform sauber wiederhergestellt wird, wenn die vorgelagerte Anbieterplattform beeinträchtigt oder nicht verfügbar ist.
- Automatisierung der Umgebungsbereitstellung und -konfiguration sowie Pflege der Konfigurations- und Asset-Inventarisierung als verlässliche Single Source of Truth.
- Zusammenarbeit mit den Python-Entwicklern des Teams in Bezug auf Deployability, Performance und Kosten; Teilnahme an Change-Management und Produktionssupport.
VORTEILE UND BENEFITS
- Berufliche Weiterentwicklung: Mentoring, TechTalks und personalisierte Wachstumspläne.
- Wettbewerbsfähige Vergütung: Bezahlung auf Basis von USD sowie Budgets für Weiterbildung, Fitness und Teamaktivitäten.
- Spannende Projekte: Moderne Lösungen mit Fortune-500-Unternehmen und führenden Produktherstellern.
- Flextime: Flexible Arbeitszeiten mit Optionen für Remote-Arbeit und Büropräsenz.
Unser Bewerbungsprozess
Bewerbung → Coding-Challenge → Video-Interview → Technisches Interview oder Interview mit dem Hiring Manager
Jeder Schritt hilft uns dabei, Ihre Fähigkeiten und Ihre Eignung für die Rolle besser zu verstehen.
Wenn es passt, erhalten Sie ein Angebot.
