Kafka Platform Engineer (m/w/d)

Stellenbeschreibung:

Overview

In dieser Rolle arbeiten Sie an der Modernisierung zentraler Fachverfahren einer öffentlichen Auftraggeberin bzw. eines öffentlichen Auftraggebers mit Fokus auf eine skalierbare Kafka-Architektur. Sie planen, betreiben und sichern Kafka-Cluster (on-prem, Azure, OpenShift) und tragen zu einer zukunftsfähigen Systemlandschaft bei. Sie optimieren Leistung, Sicherheit und Betrieb, bereiten Dokumentationen und Schulungen vor und arbeiten eng mit Entwicklern sowie Betriebsteams zusammen, um zeitkritische Prozesse effizient zu unterstützen.

Verantwortungsbereiche

Design, Bereitstellung und Betrieb von skalierbaren Kafka-Clustern (on-prem, Azure, OpenShift)
Konfiguration und Wartung von Kafka-Komponenten (Broker, Connect, ksqlDB, Schema Registry, MirrorMaker)
Implementierung von Sicherheits- und Authentifizierungsmechanismen (TLS, SASL, ACLs, Kerberos)
Monitoring, Log-Analyse und Performance-Tuning (Prometheus, Grafana, JMX, Kafka-Metrics)
Incident-Management: Fehlerdiagnose, Root-Cause-Analysis, Wiederherstellung und Post-Mortem-Berichte
Automatisierung von Deployments und Konfigurationen mittels IaC & GitOps-Workflows
Planung und Durchführung von Kapazitäts- und Kosten-Optimierungsmaßnahmen (Partition-Strategien, Tiered Storage, Dynamic Scaling)
Erstellung von Dokumentation, Best-Practice-Guides und Schulungen für Entwickler und Betriebsteams

Zentrale Anforderungen

Tiefgehende Expertise in Apache Kafka / Confluent Kafka (Broker-Installation, Cluster-Setup, Topic-Management, Partitioning, Replication, Quotas, ACLs)
Erfahrung mit Kafka-Connect, ksqlDB / Kafka Streams, Schema Registry
Monitoring & Performance-Tuning (JMX-Metriken, Prometheus, Grafana, Kafka-Metrics)
Fehlerdiagnose & Incident-Response in einer produktiven Kafka-Umgebung
Grundlegende Kenntnisse in Kubernetes/OpenShift (Deployment von Kafka-Clustern in Container-Umgebungen)
Sicheres Verständnis von Netzwerk- und Sicherheitskonzepten (TLS/SSL, Kerberos, SASL)