Sonae MC
AgileEngine
Infrastructure Engineer (Kafka) ID82562
Über die Stelle
AgileEngine ist ein Unternehmen mit 5000 Mitarbeitern, das preisgekrönte Software für Fortune 500-Marken und zukunftsweisende Startups in über 17 Branchen entwickelt. Wir zählen zu den führenden Anbietern in Bereichen wie Anwendungsentwicklung und KI/ML, und unsere mitarbeiterorientierte Unternehmenskultur hat uns bereits mehrfach Auszeichnungen als „Best Place to Work“ eingebracht.
WARUM SIE ZU UNS KOMMEN SOLLTEN
Wenn Sie nach einem Ort suchen, an dem Sie wachsen, etwas bewegen und mit Menschen zusammenarbeiten können, denen das Miteinander am Herzen liegt, würden wir Sie gerne kennenlernen!
ÜBER DIE ROLLE
Wir suchen einen Infrastructure Engineer (Kafka), der die Kafka-Umgebung hinter einer ereignisgesteuerten Integrationsplattform verantwortet und betreibt, einschließlich der Infrastruktur für Build, Deployment und Monitoring.
DAS BRINGEN SIE MIT
- Fundierte, praktische Produktionserfahrung mit Kafka von mindestens 4+ Jahren – dies ist die zentrale Anforderung. Erfahrung mit Topic- und Partition-Design, Consumer-Group-Mechaniken, Retention und Compaction, Replikation, Performance-Tuning sowie Fehlerbehebung bei Latenz, Rebalances und Zustellungsfehlern unter Last.
- Praktisches Verständnis von ereignisgesteuerten Zustellungssemantiken: at-least-once vs. exactly-once, Idempotenz, Reihenfolgegarantien, Dead-Letter-Handling und Replay.
- Starke Kenntnisse in der Linux-Infrastruktur und Automatisierung – Shell- und Python-Scripting.
- Verantwortung für CI/CD-Pipelines, idealerweise deklarative Jenkins-Pipelines, mit echter Erfahrung im Artefakt- und Release-Management.
- Container – Docker oder Podman, OCI-Images – und Container-Orchestrierungsplattformen.
- Infrastructure-as-Code und Konfigurationsmanagement.
- Observability-Tools: Log-Aggregation, Metriken, Alerting und SLO-Definition.
- GenAI-gestützte Entwicklung – Sie nutzen aktiv KI-Coding-Agenten in Ihrem täglichen Workflow oder sind nachweislich daran interessiert, diese einzusetzen. Wir automatisieren und entwickeln im gesamten Team mit diesen Tools und erwarten von jedem, dass er sicher damit umgehen kann.
- Netzwerktechnik, TLS, Secrets-Management und Enterprise-Authentifizierung (OAuth2).
- Eine Mentalität für den Produktionsbetrieb: Incident-Response, Kapazitätsplanung und Change-Control.
- Starke schriftliche und mündliche Kommunikationsfähigkeiten für die Arbeit in einem globalen Team.
- Englischkenntnisse auf fortgeschrittenem Niveau.
WAS WIR UNS WÜNSCHEN
- Tiefe Kenntnisse im Kafka-Ökosystem: Kafka Connect, Schema Registry, Kafka Streams, MirrorMaker oder verwaltete Kafka-Dienste.
- Change-Data-Capture-Muster und entsprechende Tools.
- Infrastruktur zur Unterstützung großer kommerzieller SaaS-Plattformen, einschließlich Integrations-Gateways oder Connector-Servern.
- Paket- und Artefaktverteilung im Unternehmensmaßstab.
- Erfahrung in einem regulierten Umfeld – Audit-Retention, Datenklassifizierung, formale Build- und Betriebs-Governance.
- Kubernetes; Multi-Region- und Hochverfügbarkeitsdesign.
IHRE AUFGABEN
- Verantwortung für die Kafka-Umgebung – Topic-Design und Namenskonventionen, Partitionierungs- und Keying-Strategie, Replikation, Retention- und Compaction-Richtlinien, Consumer-Group- und Offset-Management, Quotas sowie Broker-Konfiguration und -Upgrades.
- Sicherstellung der Plattform-Resilienz und -Zuverlässigkeit – Aufrechterhaltung der Verfügbarkeit der Integrationsplattform bei Beeinträchtigung oder Ausfall der vorgelagerten SaaS-Plattform, Abfangen von Traffic-Spitzen ohne Überlastung und Sicherstellung, dass Events durch eine korrekt dimensionierte, konfigurierte und betriebene Kafka-Infrastruktur wiederholbar und auditierbar bleiben.
- Entwicklung der Zustellungsgarantien der Plattform in der Praxis: at-least-once- und exactly-once-Semantiken, idempotente Producer, transaktionale Schreibvorgänge wo sinnvoll, Dead-Letter-Topics und Self-Service-Replay-Tools zur Wiederherstellung nach nachgelagerten Fehlern.
- Aufbau von Streaming-Observability: Monitoring von Consumer-Lag, Queue-Tiefe, Durchsatz und Rebalance; End-to-End-Correlation-ID-Tracing über Topics hinweg; Dashboards, Service Level Objectives und Alerting.
- Planung von Kapazität, Kosten und Retention für ein dauerhaftes Log mit regulatorischen Audit-Retention-Anforderungen und Anpassung bei zunehmender Nutzung im Unternehmen.
- Evaluierung und Integration von herstellereigenen Streaming- und Change-Data-Capture-Mechanismen, während die Ingress- und Egress-Pfade der Plattform reifen.
- Verantwortung für die Weiterentwicklung der Build- und Release-Pipeline – automatisierte Jenkins-Pipelines zur Erstellung paketierter Anwendungsinstallationen für mehrere Linux-Generationen im Unternehmen, signierte Container-Images und generierte Dokumentation, bereitgestellt über interne Artefakt- und Image-Verteilungsdienste.
- Betrieb der Laufzeitumgebung: containerisierte Deployments, Integrations-Gateway-Hosts und die laufende Modernisierung des Betriebssystems dieser Umgebung.
- Entwicklung der Infrastruktur hinter der Resilienz und Kontinuität der Plattform – Gesundheitserkennung, Circuit-Breaking sowie die Abgleichs- und Monitoring-Prozesse, die belegen, dass die Plattform sauber wiederhergestellt wird, wenn die vorgelagerte Plattform beeinträchtigt oder nicht verfügbar ist.
- Automatisierung der Umgebungsbereitstellung und -konfiguration sowie Pflege der Konfigurations- und Asset-Inventarisierung als verlässliche Single Source of Truth.
- Zusammenarbeit mit den Python-Entwicklern des Teams in Bezug auf Deployability, Performance und Kosten; Teilnahme an Change-Management und Produktionssupport.
VORTEILE UND BENEFITS
- Berufliche Weiterentwicklung: Mentoring, TechTalks und personalisierte Wachstumspläne.
- Wettbewerbsfähige Vergütung: Bezahlung in USD mit Budgets für Weiterbildung, Fitness und Teamaktivitäten.
- Spannende Projekte: Moderne Lösungen mit Fortune 500-Unternehmen und führenden Produktherstellern.
- Flextime: Flexible Arbeitszeiten mit Remote- und Bürooptionen.
Unser Bewerbungsprozess
Bewerbung → Coding-Challenge → Video-Interview → Technisches Interview oder Interview mit dem Hiring Manager
Jeder Schritt hilft uns dabei, Ihre Fähigkeiten und die allgemeine Eignung besser zu verstehen.
Wenn es passt, erhalten Sie ein Angebot.
