Data Engineer (m/w/d) – AWS-Datenplattform & ETL
🏛 Ausgeschrieben von Constaff GmbHWir suchen einen erfahrenen Data Engineer (m/w/d) für die Weiterentwicklung und den Betrieb einer zentralen Datenplattform in einer Cloud-Umgebung. Das Projekt ist auf 36 Monate ausgelegt und startet im November 2026. Der Arbeitsort ist in Deutschland mit 80% Remote-Option.
Ihre Aufgaben umfassen die Entwicklung und Migration von ETL-Strecken und Datenpipelines in eine cloudbasierte Infrastruktur, die Anbindung heterogener Datenquellen sowie deren Aufbereitung und Qualitätssicherung. Sie konzipieren und optimieren Data-Warehouse- und Datalakehouse-Lösungen und sind verantwortlich für die Erstellung und Weiterentwicklung von Testkonzepten und Teststrategien. Ein weiterer Schwerpunkt liegt auf der Konzeption und Entwicklung automatisierter Tests sowie deren Integration in CI/CD-Prozesse. Darüber hinaus unterstützen Sie bei der Implementierung generativer KI-Lösungen zur Optimierung von Entwicklung und Testautomatisierung.
Wir erwarten ein abgeschlossenes IT-Studium oder eine vergleichbare Qualifikation sowie mindestens 2 Jahre Erfahrung in der Entwicklung großer BI- und Data-Warehouse-Lösungen mit SQL-basierten ETL-Strecken. Erforderlich sind fundierte Kenntnisse in Cloud-Technologien, Datenmodellierung und DWH-Strukturen. Erfahrung mit automatisierten Tests, generativer KI sowie Branchenkenntnisse im Transportwesen sind von Vorteil.
Das Projekt wird als projektbezogene Anstellung durchgeführt. Wenn Sie diese Herausforderung reizt und Sie die geforderten Qualifikationen mitbringen, freuen wir uns auf Ihre Bewerbung.
Skills erklärt
- AWS
- Amazon Web Services, Cloud-Plattform für Bereitstellung von Rechenleistung, Speicher, Datenbanken und weiteren IT-Services.
- Redshift
- Ein Cloud-basiertes Data-Warehouse von Amazon Web Services zur Speicherung und Analyse großer Datenmengen.
- Lambda
- Serverlose Compute-Technologie (z.B. AWS Lambda), die Code ausführt ohne eigene Server zu verwalten.
- Step Functions
- AWS-Service zur Orchestrierung von verteilten Workflows und Prozessen; verbindet mehrere Cloud-Services in definierten Abläufen.
- S3
- Amazon Simple Storage Service, ein Cloud-Speicherdienst für große Datenmengen; wird verwendet, um Dateien, Backups und Daten flexibel in der Cloud zu speichern und zu verwalten.
- IAM
- Identity and Access Management – Verwaltung von Benutzeridentitäten und deren Zugriffsberechtigung auf IT-Systeme.
- Python
- Universelle Programmiersprache für Webentwicklung, Datenanalyse, Automatisierung und künstliche Intelligenz.
- SQL
- Programmiersprache zur Abfrage und Verwaltung von Daten in Datenbanken.
- ETL
- Prozess zum Extrahieren, Transformieren und Laden von Daten aus verschiedenen Quellen in Zieldatenbanken oder Data Warehouses.
- Data Warehouse
- Zentrales Datenspeichersystem, das große Mengen strukturierter Daten aus verschiedenen Quellen sammelt und für Analysen bereitstellt.
- Datenmodellierung
- Strukturierung und Darstellung von Datenbeziehungen in Datenbanken oder Informationssystemen; Grundlage für effiziente Datenverwaltung.
- Testkonzepte
- Systematische Pläne und Strategien zur Überprüfung von Software, Hardware oder Prozessen auf Funktionalität und Qualität.
- Teststrategien
- Systematische Planung und Festlegung von Vorgehen, Methoden und Kriterien für das Testen von Software oder Systemen.
- Testfälle
- Dokumentierte Szenarien und Schritte zur Überprüfung, ob Software oder Systeme die geforderten Funktionen korrekt erfüllen.
- Testszenarien
- Vordefinierte Situationen oder Ablauffolgen, die beim Testen von Software oder Systemen durchgespielt werden, um Funktionalität und Verhalten zu überprüfen.
- automatisierte Tests
- Verfahren zur automatischen Überprüfung von Software auf Fehler durch Testskripte und Test-Frameworks statt manueller Prüfung.
- CI/CD
- Automatisierte Prozesse für kontinuierliche Integration von Code-Änderungen und kontinuierliche Bereitstellung von Software-Updates.
- Integrationstests
- Testverfahren, bei dem mehrere Softwarekomponenten zusammen getestet werden, um Schnittstellen und Zusammenspiel zu überprüfen.
- Regressionstests
- Softwaretests, die überprüfen, ob bereits getestete Funktionen nach Änderungen oder Updates noch fehlerfrei funktionieren.
- Datenflüsse
- Beschreibung und Visualisierung, wie Daten innerhalb von Systemen oder Organisationen von einer Stelle zur anderen bewegt werden; wird für Prozessoptimierung und Systemdesign verwendet.
- Schnittstellen
- Verbindungspunkte zwischen Systemen oder Komponenten, über die Daten oder Befehle ausgetauscht werden; ermöglichen die Kommunikation zwischen verschiedenen Programmen.
- Systemabhängigkeiten
- Beziehungen zwischen IT-Systemen, bei denen ein System auf Funktionen oder Daten eines anderen Systems angewiesen ist.
Als IT-Freelancer automatisch auf Projekte wie dieses bewerben
Nexus ist die KI-gestützte Plattform für IT-Freelancer, die täglich neue Projektausschreibungen analysiert und passgenaue Bewerbungstexte generiert – vollautomatisch, in Sekunden. Kein manuelles Schreiben mehr: Nexus liest die Ausschreibung, erkennt die gefragten Skills und erstellt einen individuellen Bewerbungstext, den du per Klick versendest.
- ✓ Projektausschreibungen direkt von Anbietern aus dem DACH-Raum
- ✓ KI-Bewerbungstext in unter 30 Sekunden – individuell auf jedes Projekt zugeschnitten
- ✓ Automatischer Versand per E-Mail + Anlage in Pipedrive
- ✓ Kostenlos starten – keine Kreditkarte erforderlich
Häufige Fragen zu Nexus
- Was ist Nexus und für wen ist es geeignet?
- Nexus richtet sich an selbstständige IT-Freelancer, die regelmäßig auf Projektausschreibungen antworten. Die Plattform automatisiert den gesamten Bewerbungsprozess – von der Analyse der Ausschreibung bis zum Versand der Bewerbung.
- Wie schreibt Nexus den Bewerbungstext?
- Nexus analysiert die Projektbeschreibung mit Claude (Anthropic) und gleicht die Anforderungen mit deinem hinterlegten Profil ab. Der generierte Text ist individuell, professionell und direkt versendbar – du kannst ihn vor dem Absenden noch anpassen.
- Welche Projektplattformen werden unterstützt?
- Nexus erhält Projekte direkt von Projektanbietern aus dem DACH-Raum – neue Ausschreibungen erscheinen automatisch in deiner Pipeline, ohne dass du Plattformen manuell durchsuchen musst.
- Kostet Nexus etwas?
- Der Einstieg ist dauerhaft kostenlos. Für professionelle Nutzung mit erweiterten Funktionen gibt es kostenpflichtige Pläne – ohne versteckte Kosten oder automatische Verlängerung.
Passende Freelancer
Profile die zu den Skills dieses Projekts passen
- Enterprise Architect | AI Platform Strategist | Technology Consultant100 €/h
Enterprise Architect und AI Platform Strategist mit über 25 Jahren Erfahrung in der Entwicklung, Architektur und Skalierung komplexer Softwareplattformen sowie der Integration moderner AI-Technologien in Enterprise-Umgebungen.
- Senior Backend Developer68 €/h
20+ Jahre Java, 15+ Jahre PHP, 10+ Jahre Frontend – Senior Fullstack-Entwickler mit umfassender Expertise in modernen Web- und Cloud-Technologien.
- IT-Consultant / Full-Stack Developer
- IT-Consultant / Full-Stack Developer
- Senior IT-Consultant für Energie- und Umwelttechnologien
Nie wieder Bewerbungen schreiben.
Nexus matcht deine Skills und schreibt Bewerbungen automatisch.
Kostenlos registrieren →Keine Kreditkarte erforderlich
Marktgeschwindigkeit
Projekte dieser Skills werden nach durchschnittlich 3,5 Tagen geschlossen.
Stundensatz vs. Markt
Kein Stundensatz für dieses Projekt hinterlegt.
Ø 94 €/h (für diese Skills)
Tipp
Zeiterfassung & Projektverwaltung
Projekte, Stunden und Rechnungen in einer App. Flow ist die schlanke Lösung für IT-Freelancer und Agenturen – kostenlos starten.
Flow ausprobierenÄhnliche Projekte
- Data Engineer (m/w/d)
- Snowflake & dbt Consultant - Data Engineering
- Data Engineer with BI Focus
- Senior Microsoft Data Engineer (Amsterdam)
- Data Architect mit AWS/Big-Data-Erfahrung (m/w/d) - 100% Remote
- Data Architect – Datenplattform, Integrationsarchitektur, Governance, Betriebsarchitektur (m/w/d)
- Data Architect – Betrieb & Service Management, Datenplattform, Governance (m/w/d)
- Data Architect – Datenplattform, Governance, RACI, Data-&-Analytics-Strategien (m/w/d)
- Data Scientist Life Science (m/w/d)
- Data Engineer
- Data Governance/Management Consultant
- GCP Data Engineer
- Data Engineer (B2C / Consumer Data)
- Senior Data Engineer (m/w/d)
- Data Engineer met BI-focus
Tipp
Konferenzraum in Hamburg
Für das nächste Kunden- oder Teammeeting in Hamburg: vollausgestattet mit Beamer, Whiteboard und Videokonferenz – ab 49 €/h, direkt am Gänsemarkt.
Konferenzraum mieten