Dagster Experte (m/w/d)
🏛 Ausgeschrieben von Westhouse Consulting GmbHWir suchen einen erfahrenen Dagster-Experten zur Unterstützung bei der Implementierung und Optimierung von Datenpipelines. Die Position ist als Vollzeitprojekt mit flexibler Arbeitsgestaltung konzipiert (überwiegend remote mit gelegentlichen Vor-Ort-Terminen).
Ihre Hauptaufgaben umfassen die fachliche Beratung bei der Strukturierung von Datenstrecken mit der Open-Source-Bibliothek Dagster, insbesondere hinsichtlich der optimalen Nutzung von Features wie Sensors und Partitions. Sie unterstützen bei der Integration von Dagster mit anderen Tools, speziell mit dbt und dlt-basierten ELT-Lösungen. Darüber hinaus entwickeln Sie Dagster-Komponenten wie Resources, Assets und Sensors gemäß Anforderungen und tragen durch Programmcode aktiv zur Umsetzung bei.
Weitere Verantwortungen sind die Implementierung automatisierter Deployment-Prozesse auf Kubernetes-Clustern (CI/CD), die Durchführung von Code-Reviews sowie die Teilnahme an agilen Projektmeetings.
Wir erwarten umfangreiche Erfahrung in Python-Entwicklung (mindestens 5 Jahre) und Data Engineering. Sie sollten Expertise in komplexen dbt-Projekten mitbringen und Erfahrung mit containerisierten Orchestratoren wie Airflow oder Dagster haben. Kenntnisse in AWS-Infrastruktur sowie agilen Projektmanagement-Methoden sind von Vorteil. Idealerweise verfügen Sie über mehrere Referenzprojekte im Bereich dbt und Data Engineering.
Die Position bietet die Möglichkeit, an modernen Datentechnologien zu arbeiten und ein erfahrenes Entwickler-Team zu unterstützen. Deutsch ist erforderlich.
Anforderungen
- Rollenfamilie
- Daten / KI
- Berufserfahrung
- mindestens 5 Jahre
- Zertifikate
- IAPM, CAPM, PMI Agile Certified Practitioner, Scaled Agile Framework
- Sprachen
- Deutsch (gut)
Rahmenbedingungen
- Gesuchte Personen
- 1
Projekt
- Projektart
- Weiterentwicklung
- Vermittlung
- Über Vermittler
Skills erklärt
- Dagster
- Open-Source-Framework zur Orchestrierung und Verwaltung von Daten-Pipelines und ETL-Prozessen.
- Python
- Universelle Programmiersprache für Webentwicklung, Datenanalyse, Automatisierung und künstliche Intelligenz.
- Data Engineering
- Data Engineering umfasst den Aufbau und die Verwaltung von Dateninfrastrukturen, Pipelines und Systemen zur Verarbeitung großer Datenmengen für Analysen und Anwendungen.
- dbt
- Data Build Tool; Framework zur Transformation von Rohdaten in Data Warehouses mittels SQL und Versionskontrolle.
- dbt Core
- Open-Source-Tool zur Transformation von Rohdaten in Data Warehouses mittels SQL und Versionskontrolle.
- dagster-dbt
- Kombination aus Dagster (Orchestrierungs-Tool für Datenworkflows) und dbt (Tool zur Datentransformation); wird eingesetzt, um komplexe Daten-Pipelines zu verwalten und zu automatisieren.
- DLT
- Distributed Ledger Technology; dezentralisierte Technologie zur Speicherung und Verwaltung von Transaktionsdaten über mehrere Knoten.
- Kubernetes
- Open-Source-Plattform zur automatisierten Verwaltung, Skalierung und Orchestrierung von containerisierten Anwendungen.
- CI/CD
- Automatisierte Prozesse für kontinuierliche Integration von Code-Änderungen und kontinuierliche Bereitstellung von Software-Updates.
- AWS
- Amazon Web Services, Cloud-Plattform für Bereitstellung von Rechenleistung, Speicher, Datenbanken und weiteren IT-Services.
- Airflow
- Open-Source-Plattform zur Planung, Überwachung und Automatisierung von Datenverarbeitungs-Workflows.
- Agile Projektmanagement
- Projektmanagement-Methode mit iterativen Zyklen, regelmäßigem Feedback und flexibler Anpassung an Anforderungsänderungen.
- IAPM
- International Association for Project Management; Zertifizierungsorganisation für Projektmanagement-Qualifikationen. Bietet Standards und Zertifizierungen für Projektmanager verschiedener Erfahrungsstufen.
- CAPM
- Capital Asset Pricing Model; Finanzmodell zur Berechnung der erwarteten Rendite von Wertpapieren basierend auf Risiko und Marktrendite.
- PMI Agile Certified Practitioner
- Zertifizierung des Project Management Institute für agile Projektmanagement-Methoden; bescheinigt Kenntnisse in agilen Frameworks wie Scrum und Kanban.
- Scaled Agile Framework
- Rahmenwerk zur Anwendung agiler Methoden in großen Organisationen mit mehreren Teams, um koordinierte und schnelle Entwicklung zu ermöglichen.
- Code Reviews
- Code Reviews sind ein Qualitätssicherungsprozess, bei dem andere Entwickler den geschriebenen Code überprüfen, um Fehler zu finden und die Codequalität zu verbessern.
Als IT-Freelancer automatisch auf Projekte wie dieses bewerben
Nexus ist die KI-gestützte Plattform für IT-Freelancer, die täglich neue Projektausschreibungen analysiert und passgenaue Bewerbungstexte generiert – vollautomatisch, in Sekunden. Kein manuelles Schreiben mehr: Nexus liest die Ausschreibung, erkennt die gefragten Skills und erstellt einen individuellen Bewerbungstext, den du per Klick versendest.
- ✓ Projektausschreibungen direkt von Anbietern aus dem DACH-Raum
- ✓ KI-Bewerbungstext in unter 30 Sekunden – individuell auf jedes Projekt zugeschnitten
- ✓ Automatischer Versand per E-Mail + Anlage in Pipedrive
- ✓ Kostenlos starten – keine Kreditkarte erforderlich
Häufige Fragen zu Nexus
- Was ist Nexus und für wen ist es geeignet?
- Nexus richtet sich an selbstständige IT-Freelancer, die regelmäßig auf Projektausschreibungen antworten. Die Plattform automatisiert den gesamten Bewerbungsprozess – von der Analyse der Ausschreibung bis zum Versand der Bewerbung.
- Wie schreibt Nexus den Bewerbungstext?
- Nexus analysiert die Projektbeschreibung mit Claude (Anthropic) und gleicht die Anforderungen mit deinem hinterlegten Profil ab. Der generierte Text ist individuell, professionell und direkt versendbar – du kannst ihn vor dem Absenden noch anpassen.
- Welche Projektplattformen werden unterstützt?
- Nexus erhält Projekte direkt von Projektanbietern aus dem DACH-Raum – neue Ausschreibungen erscheinen automatisch in deiner Pipeline, ohne dass du Plattformen manuell durchsuchen musst.
- Kostet Nexus etwas?
- Der Einstieg ist dauerhaft kostenlos. Für professionelle Nutzung mit erweiterten Funktionen gibt es kostenpflichtige Pläne – ohne versteckte Kosten oder automatische Verlängerung.
Passende Freelancer
Profile die zu den Skills dieses Projekts passen
Enterprise Architect und AI Platform Strategist mit über 25 Jahren Erfahrung in der Entwicklung, Architektur und Skalierung komplexer Softwareplattformen sowie der Integration moderner AI-Technologien in Enterprise-Umgebungen.
- Senior Backend Developer68 €/h
20+ Jahre Java, 15+ Jahre PHP, 10+ Jahre Frontend – Senior Fullstack-Entwickler mit umfassender Expertise in modernen Web- und Cloud-Technologien.
AI Automation Engineer mit Fokus auf agentische Workflows, LLM-Integration, Fullstack-Entwicklung und intelligente Prozessautomatisierung.
Nie wieder Bewerbungen schreiben.
Nexus matcht deine Skills und schreibt Bewerbungen automatisch.
Kostenlos registrieren →Keine Kreditkarte erforderlich
Kostenloser CV-Check
Wie gut passt dein Python-Profil zum Markt?
- ✓ Market Fit gegen 873 Python-Ausschreibungen
- ✓ Welche Skills dir fehlen und was sie bringen
- ✓ Dein Stundensatz im Vergleich
Kostenlos · anonym gespeichert · von FreelancerJury
Marktgeschwindigkeit
Projekte dieser Skills werden nach durchschnittlich 6,3 Tagen geschlossen.
Stundensatz vs. Markt
Kein Stundensatz für dieses Projekt hinterlegt.
Ø 97 €/h (für diese Skills)
Tipp
Zeiterfassung & Projektverwaltung
Projekte, Stunden und Rechnungen in einer App. Flow ist die schlanke Lösung für IT-Freelancer und Agenturen – kostenlos starten.
Flow ausprobierenÄhnliche Projekte
- Projektleiter Data Hub (m/w/d)
- Senior Data Engineer (m/w/d)
- Senior Data Engineer – SAP BW to BigQuery Migration
- Data Engineer (Dagster, dbt-core, Python) (m/w/d) 95% remote
- Energy Market Operator – Capacity Mechanism (Brussels, 60% Remote)
- Data Engineer (ETL Migration)
- Data Engineer (Python, SQL, IfcOpenShell) (m/w/d) remote
- Senior Data Product Owner – Data Platform
- Datenbankentwickler Oracle (m/w/d)(abgelaufen)
Tipp
Konferenzraum in Hamburg
Für das nächste Kunden- oder Teammeeting in Hamburg: vollausgestattet mit Beamer, Whiteboard und Videokonferenz – ab 49 €/h, direkt am Gänsemarkt.
Konferenzraum mieten