Dagster Experte (m/w/d)

Project overview

Wir suchen einen erfahrenen Dagster-Experten zur Unterstützung bei der Implementierung und Optimierung von Datenpipelines. Die Position ist als Vollzeitprojekt mit flexibler Arbeitsgestaltung konzipiert (überwiegend remote mit gelegentlichen Vor-Ort-Terminen).

Ihre Hauptaufgaben umfassen die fachliche Beratung bei der Strukturierung von Datenstrecken mit der Open-Source-Bibliothek Dagster, insbesondere hinsichtlich der optimalen Nutzung von Features wie Sensors und Partitions. Sie unterstützen bei der Integration von Dagster mit anderen Tools, speziell mit dbt und dlt-basierten ELT-Lösungen. Darüber hinaus entwickeln Sie Dagster-Komponenten wie Resources, Assets und Sensors gemäß Anforderungen und tragen durch Programmcode aktiv zur Umsetzung bei.

Weitere Verantwortungen sind die Implementierung automatisierter Deployment-Prozesse auf Kubernetes-Clustern (CI/CD), die Durchführung von Code-Reviews sowie die Teilnahme an agilen Projektmeetings.

Wir erwarten umfangreiche Erfahrung in Python-Entwicklung (mindestens 5 Jahre) und Data Engineering. Sie sollten Expertise in komplexen dbt-Projekten mitbringen und Erfahrung mit containerisierten Orchestratoren wie Airflow oder Dagster haben. Kenntnisse in AWS-Infrastruktur sowie agilen Projektmanagement-Methoden sind von Vorteil. Idealerweise verfügen Sie über mehrere Referenzprojekte im Bereich dbt und Data Engineering.

Die Position bietet die Möglichkeit, an modernen Datentechnologien zu arbeiten und ein erfahrenes Entwickler-Team zu unterstützen. Deutsch ist erforderlich.