Senior Data Engineer - Google Cloud Platform Bad Friedrichshall (m/w/d)

Senior Data Engineer - Google Cloud Platform Bad Friedrichshall (m/w/d)

Wir suchen einen erfahrenden Senior Data Engineer, der unser zentrales Google Cloud Data Lakehouse für Analytics- und Machine-Learning-Anwendungsfälle konzipiert, entwickelt und betreibt. Du bist verantwortlich für die Optimierung der Cloud-Architektur, die Skalierbarkeit unserer Lösungen und die Weiterentwicklung unserer Standards für die Datenverarbeitung in Echtzeit und Batch.

Kurzüberblick

• Standort: Bad Friedrichshall
• Arbeitsmodell: Hybrid
• Anstellungsart: Vollzeit

Aufgaben

Als Senior Data Engineer bist du verantwortlich für die folgenden Aufgaben:

• Data Product Engineering: Konzipierung, Entwicklung und Betrieb von hochperformanten Batch- und Streaming-Datenflüssen in unserem zentralen Google Cloud Data Lakehouse.
• Architektur & Skalierung: Optimierung der Cloud-Architektur (GCP), Sicherstellung der Skalierbarkeit unserer Lösungen und Weiterentwicklung unserer Standards für die Datenverarbeitung in Echtzeit und Batch.
• Software Excellence: Anwendung moderner Software-Engineering-Methoden und Setzen neuer Maßstäbe für CI/CD, automatisiertes Testing und Deployment-Prozesse in der Datenorganisation.
• Framework-Mitgestaltung: Unterstützung der Weiterentwicklung unserer zentralen Orchestrierungs-Tools (auf Basis von Airflow und dbt), um die Effizienz und Qualität der Datenbereitstellung unternehmensweit zu steigern.
• Datenqualität & Governance: Implementierung automatisierter Validierungsprozesse (z. B. für Streaming-Events) und Sicherstellung der Einhaltung von Sicherheits- und Datenschutzstandards.
• Agile Kollaboration: Arbeit in interdisziplinären Teams mit Product Ownern, Data Scientists und Fachbereichen, um komplexe Business-Anforderungen in technische Lösungen zu übersetzen.

Anforderungen

• Mehrjährige fundierte Erfahrung im Data Engineering, Big Data Umfeld oder Software Engineering, idealerweise in einer Senior-Rolle.
• Fundierte Kenntnisse in Cloud-Infrastrukturen (Google Cloud Platform) sowie tiefe Erfahrung in der Verarbeitung von Echtzeitdaten mit Apache Kafka.
• Sehr gute Kenntnisse in Python und Spark. Sicherer Umgang mit Containerisierung (Kubernetes/Docker).
• Erfahrung mit Tools wie Apache Airflow und Transformationen via dbt ist von großem Vorteil.
• Sicherer Umgang mit dem Softwareentwicklungszyklus, Versionsverwaltung (Git) sowie DevOps-Prinzipien und automatisierten Tests.
• Analytisches Denkvermögen, agiles Mindset sowie eigenverantwortliche und lösungsorientierte Arbeitsweise.
• Sehr gute Englischkenntnisse; Deutschkenntnisse sind bevorzugt.

Benefits

• Flexibles Arbeitsmodell mit Homeoffice-Möglichkeiten.
• Modernes und dynamisches Arbeitsumfeld mit agilen Methoden.
• Weiterbildungsmöglichkeiten und persönliche Entwicklungschancen.
• Attraktive Bezahlung und umfassende Sozialleistungen.
• Interessante und herausfordernde Projekte in einem dynamischen Umfeld.