Senior Data Engineer – Databricks & Azure Data Platform
Wir suchen einen erfahrenen Senior Data Engineer zur Unterstützung beim Aufbau und der Weiterentwicklung einer modernen Datenplattform im Versicherungs- und Rückversicherungsbereich.
In dieser Rolle werden Sie die Gestaltung, den Aufbau und die Wartung einer skalierbaren Datenplattform auf Basis von Databricks auf Azure unterstützen. Die Plattform soll fragmentierte Datenquellen zentralisieren, Datenqualitätsprüfungen etablieren, Daten in aussagekräftige Business-Domänen organisieren und zuverlässige Datenschichten für Reporting, Anwendungen, Analytics und zukünftige KI-Anwendungsfälle bereitstellen.
Die Plattform unterstützt zentrale Rückversicherungsprozesse wie Underwriting, Pricing, Aktuariat, Reservierung und Finanzen. Daten werden aus verschiedenen Quellsystemen, hauptsächlich aus ERP-Systemen, integriert.
Ihre Aufgaben umfassen: - Aufbau, Wartung und Optimierung von Datenpipelines - Design und Implementierung skalierbarer Lakehouse- und Medallion-Architektur-Konzepte - Strukturierung von Daten in Business-Domänen - Entwicklung und Wartung von Datenschichten - Implementierung von Datenqualitätsprüfungen und Validierungsmechanismen - Unterstützung bei Datenmodellierung und Performance-Optimierung - Beitrag zu Governance-, Sicherheits- und Zugriffsmanagement-Konzepten - Unterstützung von CI/CD-Pipelines - Zusammenarbeit mit Infrastructure-, Architektur-, Business- und Daten-Teams
Wir erwarten mehrjährige Erfahrung als Senior Data Engineer, fundierte Kenntnisse in Databricks und Cloud-Datenplattformen (vorzugsweise Azure), Verständnis für Datenqualität und Governance sowie Erfahrung mit Datenmodellierung und Performance-Optimierung. Erfahrung mit ERP-Systemen und dem Versicherungssektor ist von Vorteil.
Position: Remote, 100%, Start ab Mitte Juli 2026.
Skills erklärt
- Databricks
- Plattform für Datenverarbeitung und Machine Learning basierend auf Apache Spark; wird für Big-Data-Analysen und kollaborative Datenarbeit eingesetzt.
- Azure
- Cloud-Computing-Plattform von Microsoft für Hosting, Datenverarbeitung, Speicherung und verschiedene IT-Services.
- Data Engineering
- Data Engineering umfasst den Aufbau und die Verwaltung von Dateninfrastrukturen, Pipelines und Systemen zur Verarbeitung großer Datenmengen für Analysen und Anwendungen.
- Data pipelines
- Automatisierte Prozesse zur Erfassung, Verarbeitung, Transformation und Bereitstellung von Daten zwischen verschiedenen Systemen.
- Medallion Architecture
- Datenlake-Architektur mit drei Schichten (Bronze, Silber, Gold) zur schrittweisen Datenbereinigung und -anreicherung.
- Data Quality
- Bewertung und Verbesserung der Genauigkeit, Vollständigkeit und Konsistenz von Daten; wird in Datenmanagement und Business Intelligence eingesetzt.
- Data Governance
- Rahmenwerk für Regeln und Verantwortlichkeiten im Umgang mit Daten; wird implementiert, um Datenqualität, Sicherheit und Compliance zu gewährleisten.
- SAP
- Enterprise-Resource-Planning-System zur Verwaltung von Geschäftsprozessen wie Finanzen, Personal, Logistik und Produktion in Unternehmen.
- CI/CD
- Automatisierte Prozesse für kontinuierliche Integration von Code-Änderungen und kontinuierliche Bereitstellung von Software-Updates.
- Power BI
- Ein Business-Intelligence-Tool von Microsoft zur Visualisierung und Analyse von Daten durch interaktive Dashboards und Berichte.
- Cloud platforms
- Internetbasierte Plattformen (wie AWS, Azure, Google Cloud) zur Bereitstellung von Rechenleistung, Speicher und Softwareservices ohne lokale Hardware.
- Performance Optimization
- Methode zur Verbesserung der Geschwindigkeit, Effizienz und Ressourcennutzung von Systemen, Anwendungen oder Prozessen.
- Security
- Die Gesamtheit von Maßnahmen und Praktiken zum Schutz von Systemen, Daten und Infrastrukturen vor unbefugtem Zugriff und Bedrohungen.
Als IT-Freelancer automatisch auf Projekte wie dieses bewerben
Nexus ist die KI-gestützte Plattform für IT-Freelancer, die täglich neue Projektausschreibungen analysiert und passgenaue Bewerbungstexte generiert – vollautomatisch, in Sekunden. Kein manuelles Schreiben mehr: Nexus liest die Ausschreibung, erkennt die gefragten Skills und erstellt einen individuellen Bewerbungstext, den du per Klick versendest.
- ✓ Projektausschreibungen direkt von Anbietern aus dem DACH-Raum
- ✓ KI-Bewerbungstext in unter 30 Sekunden – individuell auf jedes Projekt zugeschnitten
- ✓ Automatischer Versand per E-Mail + Anlage in Pipedrive
- ✓ Kostenlos starten – keine Kreditkarte erforderlich
Häufige Fragen zu Nexus
- Was ist Nexus und für wen ist es geeignet?
- Nexus richtet sich an selbstständige IT-Freelancer, die regelmäßig auf Projektausschreibungen antworten. Die Plattform automatisiert den gesamten Bewerbungsprozess – von der Analyse der Ausschreibung bis zum Versand der Bewerbung.
- Wie schreibt Nexus den Bewerbungstext?
- Nexus analysiert die Projektbeschreibung mit Claude (Anthropic) und gleicht die Anforderungen mit deinem hinterlegten Profil ab. Der generierte Text ist individuell, professionell und direkt versendbar – du kannst ihn vor dem Absenden noch anpassen.
- Welche Projektplattformen werden unterstützt?
- Nexus erhält Projekte direkt von Projektanbietern aus dem DACH-Raum – neue Ausschreibungen erscheinen automatisch in deiner Pipeline, ohne dass du Plattformen manuell durchsuchen musst.
- Kostet Nexus etwas?
- Der Einstieg ist dauerhaft kostenlos. Für professionelle Nutzung mit erweiterten Funktionen gibt es kostenpflichtige Pläne – ohne versteckte Kosten oder automatische Verlängerung.
Passende Freelancer
Profile die zu den Skills dieses Projekts passen
- Enterprise Architect | AI Platform Strategist | Technology Consultant100 €/h
Enterprise Architect und AI Platform Strategist mit über 25 Jahren Erfahrung in der Entwicklung, Architektur und Skalierung komplexer Softwareplattformen sowie der Integration moderner AI-Technologien in Enterprise-Umgebungen.
- Senior Backend Developer68 €/h
20+ Jahre Java, 15+ Jahre PHP, 10+ Jahre Frontend – Senior Fullstack-Entwickler mit umfassender Expertise in modernen Web- und Cloud-Technologien.
- Senior IT-Berater / Digitalisierungsexperte für Pensionsverwaltung
- Microsoft 365 Consultant & Security Specialist
- CTO / Senior Software Architect & Project Manager120 €/h
25 Jahre eCommerce-Erfahrung mit tiefem Verständnis für Online-Geschäftsprozesse
Nie wieder Bewerbungen schreiben.
Nexus matcht deine Skills und schreibt Bewerbungen automatisch.
Kostenlos registrieren →Keine Kreditkarte erforderlich
Tipp
Zeiterfassung & Projektverwaltung
Projekte, Stunden und Rechnungen in einer App. Flow ist die schlanke Lösung für IT-Freelancer und Agenturen – kostenlos starten.
Flow ausprobierenÄhnliche Projekte
- Oracle Entwickler (m/w/d)
- Senior BI- und Data-Analyst (m/w/d)
- Data Domain Manager (m/w/d)
- Senior Data Migration Engineer (SQL / PostgreSQL / MS SQL)
- Reporting / Business Analyse / PL/SQL
- Data Engineer – Python / Airflow / Azure Databricks (m/w/d)
- Senior Business Analyst – Data & Governance (Nachhaltigkeit)
- Business Analyst mit SQL-/PL/SQL-Erfahrung
- BI Developer / Snowflake – SQL & Power BI
- Data Engineer (m/w/d)
- Architect Expert for Databricks and Tableau Reporting Transformation (m/f/d)
- Senior Data Engineer – Azure Data Products (m/w/d)
- Spezialist Data Analytics & Projektmanagement (m/w/d)
- Lead Analyst - Master Data Operations
- Denodo Solution Architect – sozialversicherungspflichtig angestellt (m/w/d)
Tipp
Konferenzraum in Hamburg
Für das nächste Kunden- oder Teammeeting in Hamburg: vollausgestattet mit Beamer, Whiteboard und Videokonferenz – ab 49 €/h, direkt am Gänsemarkt.
Konferenzraum mieten