Senior Data Engineer - Google Cloud Platform Berlin (m/w/d)

Senior Data Engineer - Google Cloud Platform Berlin (m/w/d)

Wir suchen einen erfahrenden Senior Data Engineer, der unser zentrales Google Cloud Data Lakehouse für Analytics- und Machine-Learning-Anwendungsfälle konzipiert, entwickelt und betreibt. Du bist verantwortlich für die Optimierung der Cloud-Architektur, die Skalierbarkeit unserer Lösungen und die Weiterentwicklung unserer Standards für die Datenverarbeitung in Echtzeit und Batch.

Kurzüberblick

• Standort: Berlin
• Arbeitsmodell: Hybrid
• Anstellungsart: Vollzeit

Aufgaben

Als Senior Data Engineer bist du verantwortlich für:

• Data Product Engineering: Du konzipierst, entwickelst und betreibst hochperformante Batch- und Streaming-Datenflüsse in unserem zentralen Google Cloud Data Lakehouse für Analytics- und Machine-Learning-Anwendungsfälle.
• Architektur & Skalierung: Du optimierst die Cloud-Architektur (GCP), stellst die Skalierbarkeit unserer Lösungen sicher und entwickelst unsere Standards für die Datenverarbeitung in Echtzeit und Batch weiter.
• Software Excellence: Du wendest moderne Software-Engineering-Methoden an und setzt neue Maßstäbe für CI/CD, automatisiertes Testing und Deployment-Prozesse in der Datenorganisation.
• Framework-Mitgestaltung: Du unterstützt die Weiterentwicklung unserer zentralen Orchestrierungs-Tools (auf Basis von Airflow und dbt), um die Effizienz und Qualität der Datenbereitstellung unternehmensweit zu steigern.
• Datenqualität & Governance: Du implementierst automatisierte Validierungsprozesse (z. B. für Streaming-Events) und stellst die Einhaltung von Sicherheits- und Datenschutzstandards sicher.
• Agile Kollaboration: Du arbeitest in interdisziplinären Teams eng mit Product Ownern, Data Scientists und Fachbereichen zusammen, um komplexe Business-Anforderungen in technische Lösungen zu übersetzen.

Anforderungen

• Mehrjährige fundierte Erfahrung im Data Engineering, Big Data Umfeld oder Software Engineering, idealerweise in einer Senior-Rolle.
• Fundierte Kenntnisse in Cloud-Infrastrukturen (Google Cloud Platform) sowie tiefe Erfahrung in der Verarbeitung von Echtzeitdaten mit Apache Kafka.
• Sehr gute Kenntnisse in Python und Spark. Du bist sicher im Umgang mit Containerisierung (Kubernetes/Docker).
• Erfahrung mit Tools wie Apache Airflow und Transformationen via dbt ist von großem Vorteil.
• Sehr gute Englischkenntnisse; Deutschkenntnisse sind bevorzugt.

Benefits

• Flexibles Arbeitsmodell mit Homeoffice-Möglichkeit.
• Hohe Autonomie und Gestaltungsspielräume in deinen Projekten.
• Chance zur Weiterentwicklung in einem dynamischen und innovativen Umfeld.
• Sehr gute Bezahlung und eine Vielzahl von Benefits.