Zum Hauptinhalt springen
Data & Analyticsvor 3 Tagen

Senior Databricks Data Engineer (m/w/d)

🏛 Ausgeschrieben von VP Systeme
Contracting⏱ 12 Monate📍 Köln 🏢 40% vor Ort 🚀 Start: 01.12.2026 ⏳ 100% Auslastung 🎓 Senior 🏭 IT/Software 🌐 Deutsch

Wir suchen einen erfahrenen Senior Databricks Data Engineer (m/w/d) für ein anspruchsvolles Migrationsprojekt. Sie werden die Modernisierung einer bestehenden Data-Warehouse-Infrastruktur in eine zeitgemäße Azure-Lakehouse-Architektur auf Basis von Databricks vorantreiben.

In dieser Rolle entwickeln Sie robuste und skalierbare Datenlösungen in enger Zusammenarbeit mit Fachbereichen und weiteren Data Engineers. Sie migrieren bestehende ETL-Prozesse in performante Databricks-Pipelines, entwickeln Datenpipelines mit Python, PySpark und SQL und bauen Delta-Lake-Strukturen sowie Pipelines mit modernen Tools auf. Ihre Aufgaben umfassen zudem die Umsetzung von Datenmodellen, Sicherstellung von Datenqualität und Governance sowie Performance-Optimierung bei großen Datenmengen. Sie begleiten Tests, Parallelbetrieb und Cutover und dokumentieren Ihre Arbeitsergebnisse.

Sie bringen fundierte Praxis in Lakehouse-Architekturen und Databricks-Betrieb mit. Sie verfügen über tiefe Kenntnisse in Delta Lake, Unity Catalog, DLT/SDP sowie Governance-Mechanismen. Ihre Expertise in Python, PySpark und SQL ist ausgeprägt, ebenso Ihre Fähigkeit zur Performance-Optimierung großer Datenmengen. Sie nutzen KI-basierte Tools souverän zur Effizienzsteigerung. Erfahrung im klassischen BI-/DWH-Umfeld, insbesondere bei der Ablösung klassischer ETL-Strecken, ist von Vorteil. Sie arbeiten sicher in Scrum-Teams und kommunizieren klar mit Fachbereichen und Entwicklungsteams.

Die Position ist auf 12 Monate befristet mit Verlängerungspotenzial. Der Einsatzort liegt in Köln mit 60 % Remote-Anteil (2 Tage vor Ort pro Woche). Wohnort maximal 100 km um Köln erforderlich. Vollzeitauslastung.

Skills

DatabricksLakehouse-ArchitekturDelta LakeUnity CatalogDLTSDPPythonPySparkSQLAzureETLOracleDatenmodellierungSCD2GovernanceBerechtigungsmodellePerformance-OptimierungScrumKI-basierte ToolsDatenhaltungDatentransportBIDWHInformatica wünschenswert

Anforderungen

Rollenfamilie
Daten / KI
Sprachen
Deutsch (verhandlungssicher)
Rechtsform
Einzelfreelancer möglich

Rahmenbedingungen

Verlängerung
Option auf Verlängerung
Remote
Wohnort maximal 100 km um Köln

Projekt

Projektart
Migration / Modernisierung
Vermittlung
Über Vermittler

Skills erklärt

Databricks
Plattform für Datenverarbeitung und Machine Learning basierend auf Apache Spark; wird für Big-Data-Analysen und kollaborative Datenarbeit eingesetzt.
Delta Lake
Open-Source-Speicherformat, das strukturierte Daten mit Transaktionsfähigkeit und Versionskontrolle verwaltet und häufig in Big-Data-Umgebungen eingesetzt wird.
Unity Catalog
Datenverwaltungs-Feature in der Databricks-Plattform zur zentralisierten Kontrolle von Daten-Assets und Zugriffsrechten.
DLT
Distributed Ledger Technology; dezentralisierte Technologie zur Speicherung und Verwaltung von Transaktionsdaten über mehrere Knoten.
Python
Universelle Programmiersprache für Webentwicklung, Datenanalyse, Automatisierung und künstliche Intelligenz.
PySpark
Ein Python-Framework zur verteilten Datenverarbeitung großer Datenmengen auf Clustern, basierend auf Apache Spark.
SQL
Programmiersprache zur Abfrage und Verwaltung von Daten in Datenbanken.
Azure
Cloud-Computing-Plattform von Microsoft für Hosting, Datenverarbeitung, Speicherung und verschiedene IT-Services.
ETL
Prozess zum Extrahieren, Transformieren und Laden von Daten aus verschiedenen Quellen in Zieldatenbanken oder Data Warehouses.
Oracle
Großes relationales Datenbanksystem für die Verwaltung großer Datenmengen in Unternehmen; wird für komplexe Geschäftsanwendungen und Datenspeicherung eingesetzt.
Datenmodellierung
Strukturierung und Darstellung von Datenbeziehungen in Datenbanken oder Informationssystemen; Grundlage für effiziente Datenverwaltung.
Governance
Regelwerk und Strukturen für Entscheidungsfindung und Kontrolle in Organisationen; definiert Verantwortlichkeiten, Prozesse und Compliance-Anforderungen.
Performance Optimierung
Prozess zur Verbesserung der Geschwindigkeit und Effizienz von Systemen, Anwendungen oder Prozessen durch Analyse und Optimierung von Engpässen.
Scrum
Agile Projektmanagement-Methode, die Arbeit in kurzen Zyklen (Sprints) organisiert und regelmäßige Abstimmungen vorsieht.
BI
Business Intelligence; Sammlung von Technologien und Methoden zur Analyse von Geschäftsdaten, um Entscheidungen zu unterstützen.

Als IT-Freelancer automatisch auf Projekte wie dieses bewerben

Nexus ist die KI-gestützte Plattform für IT-Freelancer, die täglich neue Projektausschreibungen analysiert und passgenaue Bewerbungstexte generiert – vollautomatisch, in Sekunden. Kein manuelles Schreiben mehr: Nexus liest die Ausschreibung, erkennt die gefragten Skills und erstellt einen individuellen Bewerbungstext, den du per Klick versendest.

  • ✓ Projektausschreibungen direkt von Anbietern aus dem DACH-Raum
  • ✓ KI-Bewerbungstext in unter 30 Sekunden – individuell auf jedes Projekt zugeschnitten
  • ✓ Automatischer Versand per E-Mail + Anlage in Pipedrive
  • ✓ Kostenlos starten – keine Kreditkarte erforderlich

Häufige Fragen zu Nexus

Was ist Nexus und für wen ist es geeignet?
Nexus richtet sich an selbstständige IT-Freelancer, die regelmäßig auf Projektausschreibungen antworten. Die Plattform automatisiert den gesamten Bewerbungsprozess – von der Analyse der Ausschreibung bis zum Versand der Bewerbung.
Wie schreibt Nexus den Bewerbungstext?
Nexus analysiert die Projektbeschreibung mit Claude (Anthropic) und gleicht die Anforderungen mit deinem hinterlegten Profil ab. Der generierte Text ist individuell, professionell und direkt versendbar – du kannst ihn vor dem Absenden noch anpassen.
Welche Projektplattformen werden unterstützt?
Nexus erhält Projekte direkt von Projektanbietern aus dem DACH-Raum – neue Ausschreibungen erscheinen automatisch in deiner Pipeline, ohne dass du Plattformen manuell durchsuchen musst.
Kostet Nexus etwas?
Der Einstieg ist dauerhaft kostenlos. Für professionelle Nutzung mit erweiterten Funktionen gibt es kostenpflichtige Pläne – ohne versteckte Kosten oder automatische Verlängerung.

Nie wieder Bewerbungen schreiben.

Nexus matcht deine Skills und schreibt Bewerbungen automatisch.

Kostenlos registrieren →

Keine Kreditkarte erforderlich

Kostenloser CV-Check

Wie gut passt dein Databricks-Profil zum Markt?

  • ✓ Market Fit gegen 105 Databricks-Ausschreibungen
  • ✓ Welche Skills dir fehlen und was sie bringen
  • ✓ Dein Stundensatz im Vergleich
CV vor die Jury bringen →

Kostenlos · anonym gespeichert · von FreelancerJury

Marktgeschwindigkeit

⏳

Projekte dieser Skills werden nach durchschnittlich 3,5 Tagen geschlossen.

Stundensatz vs. Markt

Kein Stundensatz für dieses Projekt hinterlegt.

Ø 110 €/h (für diese Skills)

Untergrenze 38 €Median 90 €Top 10% 115 €

Tipp

Zeiterfassung & Projektverwaltung

Projekte, Stunden und Rechnungen in einer App. Flow ist die schlanke Lösung für IT-Freelancer und Agenturen – kostenlos starten.

Flow ausprobieren

Ähnliche Projekte

Tipp

Konferenzraum in Hamburg

Für das nächste Kunden- oder Teammeeting in Hamburg: vollausgestattet mit Beamer, Whiteboard und Videokonferenz – ab 49 €/h, direkt am Gänsemarkt.

Konferenzraum mieten