DAGSTER Experte (m/w/d)

DAGSTER Experte (m/w/d) - Frankfurt (10 Tage) und Remote (202 Tage)

Rahmeninformationen

• Referenz:
• Start: (ASAP)
• Dauer: + Option
• Standort: Frankfurt (10 Tage) und Remote (202 Tage)
• Arbeitsumfang: full-time(100%)
• Sprachen: Deutsch

Ihre Qualifikationen

• Dagster Experte Erfahrung im Aufbau und Umsetzung komplexer dagster-Projekte insb. dagster-dbt, embedded-elt mit dlt (Junior ( <= 3 Jahre Erfahrung))
• Python Experte - Beratung und Strukturierung der Implementierung von Datenstrecken (Senior (> 5 Jahre Erfahrung))
• Data Engineering Experte - Beratung hinsichtlich der Nutzung und Umsetzung der Features inkl. Dokumentation (Senior (> 5 Jahre Erfahrung))
• Erfahrung mit komplexen dbt Projekten mit dbt-core (Anzahl Referenzen: 3)
• Erfahrung mit Projekten auf AWS Infrastruktur
• Erfahrung im Einsatz von containerisierten open-source-Orchestratoren bei Aufbau und Betrieb von Datenstrecken durch Entwickler-Teams (Airflow oder dagster)
• Know-How im agilen Projektmanagement z.B. IAPM/CAPM, PMI Agile Certified Practitioner, Scaled Agile Framework
• Erfahrungen mit komplexen dbt Projekten mit dbt-core

Ihre Aufgaben

• Beratung bei der Strukturierung der Implementierung von Datenstrecken mit der Python-Open-Source Bibliothek dagster hinsichtlich der Nutzung und Umsetzung der verfügbaren Features (z.b. sensors, par titions etc.) inkl. Dokumentation (inkl. „Hands-On“-Unterstützung durch Beitragen von Programmcode)
• Beratung beim Einsatz von dagster-Intergrationen, insb. dagster-dbt, embedded-elt mit dlt (inkl. „Hands-On“-Unterstützung durch Beitragen von Programmcode)
• Umsetzung beim automatisierten Deployment von dagster code auf einem Kubernetes Cluster (CI/CD) Entwicklung von dagster-Komponenten wie Resources, Assets, Sensors etc. gemäß Kundenanforderun gen inkl. Dokumentation
• Durchführen von Code-Reviews
• Teilnahme an den koordinierenden Meetings der Entwickler des Projektes (Planning, Dailies/Scrums, Retros)