Senior Data Engineer - Data Platform Architecture (m/w/d)

Stellenbeschreibung

Die Informationsplattform Energienetze (iPEN) stellt sicher, dass die Daten der regionalen Verteilnetzbetreiber zentral gebündelt und verfügbar gemacht werden können. Du unterstützt uns dabei, das neue Produkt "Business Insights Hub" innerhalb von iPEN aufzubauen - eine Kombination aus Standardreporting und KI-basiertem Process Reporting & Mining. Dieses Produkt ermöglicht den Verteilnetzbetreibern, Dashboards für vielfältige Analysen von Businessprozessen auf einer einheitlichen Datenbasis zu betreiben. So steigern wir Effizienz und Transparenz und schaffen die Grundlage für daten- und faktenbasierte Entscheidungen in der gesamten Netz-Community.

Eine Aufgabe, die Dich herausfordert:

• Datenintegration: Du unterstützt alle Datenintegrationsaktivitäten für das neue Produkt innerhalb der bestehenden iPEN-Plattform (Databricks, Unity Catalog).
• Quellsystemanbindung: Du gestaltest den Prozess zur Anbindung der Quellsysteme und begleitest die Transformation in das gemeinsame Datenmodell.
• Enablement: Du befähigst die Data Engineers der Netzbetreiber, aktiv zur ETL-Codebasis beizutragen und förderst die Wiederverwendung von Code.
• Pipeline-Entwicklung: Du implementierst ETL-Pipelines zur Datenextraktion und sorgst für deren Effizienz.
• Betriebssicherheit: Du verantwortest den stabilen und zuverlässigen Betrieb der Datenpipelines.

Ein Background, der überzeugt:

• Azure-Erfahrung: Du bringst fundierte Kenntnisse im Microsoft Azure Technologie-Stack mit, insbesondere in Azure Data Factory und Azure Databricks.
• Entwicklungskompetenz: Du hast mehrjährige Erfahrung mit Python, Scala, SQL, Spark und Databricks in cloud-nativen Projekten.
• Pipeline-Know-how: Du hast nachweislich Erfahrung im Management von Datenextraktionspipelines.
• Analytisches Denken: Du arbeitest strukturiert, denkst analytisch und organisierst komplexe Aufgaben souverän.
• Kommunikation: Du kommunizierst klar, erstellst überzeugende Konzepte und sprichst fließend Deutsch und Englisch

Inklusion

Show in English

OFF ON

Uns ist wichtig, Menschen mit Behinderung ein faires Bewerbungsverfahren zu ermöglichen, in dem sie ihr Bestes zeigen können. Daher wird unsere Schwerbehindertenvertretung frühzeitig in das Verfahren einbezogen. Bitte teile uns über das Bewerbungsformular mit, ob du technische oder organisatorische Anpassungen für das Bewerbungsverfahren benötigst. Wir stellen diese gern zur Verfügung.

Wenn es dir nicht möglich ist, dich online zu bewerben und du stattdessen mit jemandem sprechen möchtest, kontaktiere bitte deinen lokalen Recruiter.