Sonae MC
AgileEngine
Infrastructure Engineer (Kafka) ID82562
Über die Stelle
AgileEngine ist ein Unternehmen mit 5000 Mitarbeitern, das preisgekrönte Software für Fortune 500-Marken und zukunftsweisende Startups in über 17 Branchen entwickelt. Wir zählen zu den führenden Anbietern in Bereichen wie Anwendungsentwicklung und KI/ML, und unsere mitarbeiterorientierte Unternehmenskultur hat uns bereits mehrfach Auszeichnungen als „Best Place to Work“ eingebracht.
WARUM SIE ZU UNS KOMMEN SOLLTEN
Wenn Sie nach einem Ort suchen, an dem Sie wachsen, etwas bewegen und mit engagierten Menschen zusammenarbeiten können, würden wir Sie gerne kennenlernen!
ÜBER DIE ROLLE
Wir suchen einen Infrastructure Engineer (Kafka), der die Kafka-Umgebung hinter einer ereignisgesteuerten Integrationsplattform verantwortet und betreibt, einschließlich der Build-, Deployment- und Monitoring-Infrastruktur.
DAS BRINGEN SIE MIT
- Fundierte, praktische Produktionserfahrung mit Kafka von mindestens 4+ Jahren – dies ist die zentrale Anforderung. Erfahrung mit Topic- und Partition-Design, Consumer-Group-Mechaniken, Retention und Compaction, Replikation, Performance-Tuning sowie Fehlerbehebung bei Latenz, Rebalances und Zustellungsfehlern unter Last.
- Praktisches Verständnis von ereignisgesteuerten Zustellungssemantiken: at-least-once vs. exactly-once, Idempotenz, Reihenfolgegarantien, Dead-Letter-Handling und Replay.
- Starke Kenntnisse in der Linux-Infrastruktur und Automatisierung – Shell- und Python-Scripting.
- Verantwortung für CI/CD-Pipelines, idealerweise deklarative Jenkins-Pipelines, mit praktischer Erfahrung im Artefakt- und Release-Management.
- Container – Docker oder Podman, OCI-Images – und Container-Orchestrierungsplattformen.
- Infrastructure-as-Code und Konfigurationsmanagement.
- Observability-Tools: Log-Aggregation, Metriken, Alerting und SLO-Definition.
- GenAI-gestützte Entwicklung – Sie nutzen aktiv KI-Coding-Agenten in Ihrem täglichen Workflow oder sind nachweislich daran interessiert, diese einzusetzen. Wir automatisieren und entwickeln im gesamten Team mit diesen Tools und erwarten von jedem, dass er sicher damit umgehen kann.
- Netzwerktechnik, TLS, Secrets-Management und Enterprise-Authentifizierung (OAuth2).
- Eine Mentalität für den Produktionsbetrieb: Incident-Response, Kapazitätsplanung und Change-Control.
- Starke schriftliche und mündliche Kommunikationsfähigkeiten für die Arbeit in einem globalen Team.
- Englischkenntnisse auf fortgeschrittenem Niveau.
WÜNSCHENSWERT
- Tiefe Kenntnisse im Kafka-Ökosystem: Kafka Connect, Schema Registry, Kafka Streams, MirrorMaker oder verwaltete Kafka-Dienste.
- Change-Data-Capture-Muster und entsprechende Tools.
- Infrastruktur zur Unterstützung großer kommerzieller SaaS-Plattformen, einschließlich Integrations-Gateways oder Connector-Servern.
- Paket- und Artefaktverteilung im Unternehmensmaßstab.
- Erfahrung in einer regulierten Umgebung – Audit-Retention, Datenklassifizierung, formale Build- und Betriebs-Governance.
- Kubernetes; Multi-Region- und Hochverfügbarkeitsdesign.
IHRE AUFGABEN
- Verantwortung für die Kafka-Umgebung – Topic-Design und Namenskonventionen, Partitionierungs- und Keying-Strategie, Replikation, Retention- und Compaction-Richtlinien, Consumer-Group- und Offset-Management, Quotas sowie Broker-Konfiguration und -Upgrades.
- Sicherstellung der Plattform-Resilienz und -Zuverlässigkeit – Aufrechterhaltung der Verfügbarkeit der Integrationsplattform bei Beeinträchtigung oder Ausfall der vorgelagerten SaaS-Plattform, Abfangen von Traffic-Spitzen ohne Überlastung und Sicherstellung, dass Events durch eine korrekt dimensionierte, konfigurierte und betriebene Kafka-Infrastruktur wiederholbar und auditierbar bleiben.
- Praktische Umsetzung der Zustellungsgarantien der Plattform: at-least-once- und exactly-once-Semantiken, idempotente Producer, transaktionale Schreibvorgänge bei Bedarf, Dead-Letter-Topics und Self-Service-Replay-Tools zur Wiederherstellung nach nachgelagerten Fehlern.
- Aufbau von Streaming-Observability: Monitoring von Consumer-Lag, Queue-Tiefe, Durchsatz und Rebalance; End-to-End-Correlation-ID-Tracing über Topics hinweg; Dashboards, Service-Level-Objectives und Alerting.
- Planung von Kapazität, Kosten und Aufbewahrungsfristen für ein dauerhaftes Log mit regulatorischen Audit-Anforderungen sowie deren Anpassung an die Skalierung im Unternehmen.
- Evaluierung und Integration von herstellereigenen Streaming- und Change-Data-Capture-Mechanismen im Zuge der Weiterentwicklung der Ingress- und Egress-Pfade der Plattform.
- Verantwortung für die Weiterentwicklung der Build- und Release-Pipeline – automatisierte Jenkins-Pipelines zur Erstellung paketierter Anwendungsinstallationen für mehrere Linux-Generationen im Unternehmen, signierte Container-Images und generierte Dokumentation, bereitgestellt über interne Artefakt- und Image-Verteilungsdienste.
- Betrieb der Runtime-Umgebung: containerisierte Deployments, Integrations-Gateway-Hosts und die laufende Modernisierung der Betriebssysteme dieser Umgebung.
- Entwicklung der Infrastruktur hinter der Resilienz und Kontinuität der Plattform – Gesundheitsprüfung, Circuit-Breaking sowie die Abgleich- und Monitoring-Prozesse, die sicherstellen, dass die Plattform sauber wiederhergestellt wird, wenn die vorgelagerte Anbieterplattform beeinträchtigt oder nicht verfügbar ist.
- Automatisierung der Umgebungsbereitstellung und -konfiguration sowie Sicherstellung, dass die Konfigurations- und Asset-Inventarisierung eine verlässliche Single Source of Truth bleibt.
- Zusammenarbeit mit den Python-Entwicklern des Teams in Bezug auf Deployability, Performance und Kosten; Teilnahme an Change-Management und Produktionssupport.
BENEFITS
- Berufliche Weiterentwicklung: Mentoring, TechTalks und personalisierte Entwicklungspläne.
- Wettbewerbsfähige Vergütung: Gehalt in USD mit Budgets für Weiterbildung, Fitness und Teamaktivitäten.
- Spannende Projekte: Moderne Lösungen mit Fortune 500-Unternehmen und führenden Produktfirmen.
- Flexible Arbeitszeiten: Flexibler Zeitplan mit Optionen für Remote-Arbeit und Büropräsenz.
Unser Bewerbungsprozess
Bewerbung → Coding-Challenge → Video-Interview → Technisches Interview oder Interview mit dem Hiring Manager
Jeder Schritt hilft uns dabei, Ihre Fähigkeiten und die allgemeine Eignung besser zu verstehen.
Wenn es passt, erhalten Sie ein Angebot.
