Data Ingestion Engineer
Wir suchen einen erfahrenen Data Ingestion Engineer für den Aufbau und die Skalierung einer modernen Datenplattform. In dieser Position übernehmen Sie die vollständige Verantwortung für die Anbindung neuer Datenquellen durch vollautomatisierte, versionierte und kontinuierlich überwachte Pipelines.
Ihre Hauptaufgaben umfassen die End-to-End-Betreuung der Datenquellen-Integration von der ersten Verbindung bis zur stabilen Produktionsumgebung. Sie entwickeln und pflegen automatisierte Ingestion-Pipelines, die Daten innerhalb von Minuten in die Raw-Layer laden. Dabei automatisieren Sie das Source-Onboarding mittels Git und template-basierten Workflows unter Verwendung von YAML und Jinja.
Sie implementieren und warten Integrationen über JDBC, API und dateibasierte Quellen und führen CI/CD über Azure DevOps durch, einschließlich Python-basierter Deployments, Tests und Promotion-Jobs. Ein wichtiger Aspekt ist die Entwicklung automatisierter Schema-Drift-Checks, die Quell- und Vault-Strukturen vergleichen und Pull Requests oder Alerts auslösen.
Wir erwarten fundierte Python-Kenntnisse und die Fähigkeit, produktionsreifen Code für Ingestion und Automatisierung zu schreiben. Starke Datenbank-Grundlagen und praktische Erfahrung mit strukturierten Daten sind essentiell. Sie sollten Erfahrung im Design, Aufbau und der Wartung robuster Ingestion-Frameworks mitbringen sowie mit automatisierten Tests, CI/CD und operativem Monitoring vertraut sein.
Vorteilhaft sind Erfahrungen mit DLT, dbt, Snowflake und Data Vault Loading Patterns. Wir suchen eine proaktive, autonome Persönlichkeit mit pragmatischer Arbeitsweise und klarer Kommunikation. Die Position bietet hybrides Arbeiten und die Möglichkeit, Junior Engineers zu mentoren.
Als IT-Freelancer automatisch auf Projekte wie dieses bewerben
Nexus ist die KI-gestützte Plattform für IT-Freelancer, die täglich neue Projektausschreibungen analysiert und passgenaue Bewerbungstexte generiert – vollautomatisch, in Sekunden. Kein manuelles Schreiben mehr: Nexus liest die Ausschreibung, erkennt die gefragten Skills und erstellt einen individuellen Bewerbungstext, den du per Klick versendest.
- ✓ Projektausschreibungen direkt von Anbietern aus dem DACH-Raum
- ✓ KI-Bewerbungstext in unter 30 Sekunden – individuell auf jedes Projekt zugeschnitten
- ✓ Automatischer Versand per E-Mail + Anlage in Pipedrive
- ✓ Kostenlos starten – keine Kreditkarte erforderlich
Häufige Fragen zu Nexus
- Was ist Nexus und für wen ist es geeignet?
- Nexus richtet sich an selbstständige IT-Freelancer, die regelmäßig auf Projektausschreibungen antworten. Die Plattform automatisiert den gesamten Bewerbungsprozess – von der Analyse der Ausschreibung bis zum Versand der Bewerbung.
- Wie schreibt Nexus den Bewerbungstext?
- Nexus analysiert die Projektbeschreibung mit Claude (Anthropic) und gleicht die Anforderungen mit deinem hinterlegten Profil ab. Der generierte Text ist individuell, professionell und direkt versendbar – du kannst ihn vor dem Absenden noch anpassen.
- Welche Projektplattformen werden unterstützt?
- Nexus erhält Projekte direkt von Projektanbietern aus dem DACH-Raum – neue Ausschreibungen erscheinen automatisch in deiner Pipeline, ohne dass du Plattformen manuell durchsuchen musst.
- Kostet Nexus etwas?
- Der Einstieg ist dauerhaft kostenlos. Für professionelle Nutzung mit erweiterten Funktionen gibt es kostenpflichtige Pläne – ohne versteckte Kosten oder automatische Verlängerung.
Passende Freelancer
Profile die zu den Skills dieses Projekts passen
- Senior Software Developer / Full-Stack Engineer80 €/h
25 Jahre eCommerce-Erfahrung als Fullstack-Entwickler, IT-Architekt und hands-on Projektmanager
- IT-Consultant / Full-Stack Developer
- IT-Consultant / Full-Stack Developer
- IT-Consultant / Full-Stack Developer
- Senior IT-Consultant für Energie- und Umwelttechnologien
Nie wieder Bewerbungen schreiben.
Nexus matcht deine Skills und schreibt Bewerbungen automatisch.
Kostenlos registrieren →Keine Kreditkarte erforderlich
Tipp
Zeiterfassung & Projektverwaltung
Projekte, Stunden und Rechnungen in einer App. Flow ist die schlanke Lösung für IT-Freelancer und Agenturen – kostenlos starten.
Flow ausprobierenÄhnliche Projekte
- Power Platform & BI Analyst (m/f/d)
- Power BI / Embedded BI Engineer / Data Analyst
- Python Data Processor
- Data Analyst Systems Engineering (m/w/d)
- Senior Data Engineer - Google Cloud Platform (GCP)
- Senior Information Analyst
- Microsoft Fabric Expert (m/w/d) // Remote/GR Wolfsburg // August 2026 // 6 Monate
- Senior Analytics Engineer – Greenfield Data Platform – Amsterdam – Hybrid
- Data Engineer (m/w/d)
- Kaufmännischer Mitarbeiter Excel (m/w/d)
- Excel- und Reporting Spezialist
- BI Consultant (w/m/d) Select Line / SQL / Power BI
- Principal Data Engineer (m/f/d) Life Sciences & Bioinformatics
- Qlik Sense Analyst (m/w/d)
- Consultant Power Platform & BI (m/w/d)
Tipp
Konferenzraum in Hamburg
Für das nächste Kunden- oder Teammeeting in Hamburg: vollausgestattet mit Beamer, Whiteboard und Videokonferenz – ab 49 €/h, direkt am Gänsemarkt.
Konferenzraum mieten