Data Engineer (AWS, SQL, Python) – 90% Remote
🏛 Ausgeschrieben von mund consulting AGFür ein Projekt im Bereich Transport und Logistik suchen wir einen erfahrenen Data Engineer (m/w/d) zur Entwicklung und Automatisierung von produktionsreifen Datenpipelines in einer cloudnativen AWS-Umgebung.
Ihre Aufgaben umfassen die Konzeption, Implementierung und Qualitätssicherung von ETL-/ELT-Strecken sowie die Erstellung von Datenmodellen mit SQL, Python und Spark/PySpark. Sie arbeiten mit AWS-Managed-Services, implementieren Data-Quality-Prozesse und etablieren CI/CD-Pipelines. Darüber hinaus unterstützen Sie teilweise bei Product-Owner-Aufgaben wie Anforderungsaufnahme, Priorisierung und Backlog-Management.
Wir erwarten mindestens 5 Jahre Erfahrung in der Entwicklung und Automatisierung von Datenpipelines, davon mindestens 3 Jahre mit AWS-Cloud-Technologien und Managed Services. Sie sollten fundierte Kenntnisse in Datenexploration, Datenanalyse, Datenmodellierung und Data Stewardship mitbringen sowie Erfahrung mit Softwareentwicklungspraktiken wie Versionsverwaltung, CI/CD und automatisierten Tests haben. Projekterfahrung mit AWS Glue Data Quality und Power BI ist erforderlich.
Vorteilhaft sind Erfahrungen mit serverlosen Cloud-Datenplattformen, Data-Science-Verfahren (Prognose, Klassifikation, Clustering), Docker-Containern sowie Kenntnisse im Umgang mit Transport- und Logistikdaten.
Das Projekt startet zum 01.01.2027 und läuft über 12 Monate. Der Arbeitsort ist Frankfurt am Main mit 90% Remote-Anteil. Wir freuen uns auf Ihre Bewerbung mit CV und Stundensatz.
Skills
Anforderungen
- Rollenfamilie
- Daten / KI
- Berufserfahrung
- mindestens 5 Jahre
- Rechtsform
- Einzelfreelancer möglich
Rahmenbedingungen
- Abrechnung
- Nach Aufwand
- Bewerbungsfrist
- 25.11.2026 (bald fällig)
Projekt
- Projektart
- Weiterentwicklung
- Vermittlung
- Über Vermittler
Skills erklärt
- AWS
- Amazon Web Services, Cloud-Plattform für Bereitstellung von Rechenleistung, Speicher, Datenbanken und weiteren IT-Services.
- AWS Glue Data Quality
- AWS-Service zur Überprüfung und Validierung von Datenqualität in ETL-Prozessen. Stellt sicher, dass Daten vollständig, korrekt und konsistent sind, bevor sie weiterverarbeitet werden.
- SQL
- Programmiersprache zur Abfrage und Verwaltung von Daten in Datenbanken.
- Python
- Universelle Programmiersprache für Webentwicklung, Datenanalyse, Automatisierung und künstliche Intelligenz.
- Spark
- Apache Spark ist ein Framework zur verteilten Datenverarbeitung großer Datenmengen; wird verwendet um Daten schnell zu analysieren und zu transformieren.
- PySpark
- Ein Python-Framework zur verteilten Datenverarbeitung großer Datenmengen auf Clustern, basierend auf Apache Spark.
- ETL
- Prozess zum Extrahieren, Transformieren und Laden von Daten aus verschiedenen Quellen in Zieldatenbanken oder Data Warehouses.
- ELT
- Ein Datenverarbeitungsprozess, bei dem Daten zuerst extrahiert und geladen werden und die Transformation erst im Zielsystem stattfindet.
- Data Exploration
- Systematische Untersuchung von Datensätzen, um Strukturen, Muster und Besonderheiten zu erkennen. Wird eingesetzt, um Daten vor der Analyse zu verstehen und Hypothesen zu entwickeln.
- Datenanalyse
- Prozess der Untersuchung, Bereinigung und Interpretation von Daten zur Gewinnung von Erkenntnissen und Unterstützung von Entscheidungen.
- Datenmodellierung
- Strukturierung und Darstellung von Datenbeziehungen in Datenbanken oder Informationssystemen; Grundlage für effiziente Datenverwaltung.
- Datenqualität
- Datenqualität beschreibt die Vollständigkeit, Genauigkeit und Konsistenz von Daten und ist entscheidend für zuverlässige Geschäftsprozesse und Analysen.
- Data Stewardship
- Verantwortung für die Verwaltung, Qualität und Governance von Daten in einer Organisation.
- CI/CD
- Automatisierte Prozesse für kontinuierliche Integration von Code-Änderungen und kontinuierliche Bereitstellung von Software-Updates.
- Versionsverwaltung
- Verwaltungssystem (wie Git) zur Verfolgung von Änderungen an Dateien und Code, um Zusammenarbeit und Nachverfolgbarkeit zu ermöglichen.
- automatisierte Tests
- Verfahren zur automatischen Überprüfung von Software auf Fehler durch Testskripte und Test-Frameworks statt manueller Prüfung.
- Softwareentwicklung
- Prozess der Planung, Programmierung, Testung und Wartung von Softwareanwendungen und -systemen.
- Microsoft Power BI
- Business-Intelligence-Tool von Microsoft zur Visualisierung, Analyse und Berichterstattung von Daten aus verschiedenen Quellen.
- AWS Managed Services
- Vorgefertigte Cloud-Services von Amazon Web Services, bei denen AWS die Infrastruktur und Wartung übernimmt. Ermöglicht es Unternehmen, sich auf ihre Anwendungen zu konzentrieren statt auf Server-Management.
- Cloud-Datenplattformen
- Dienste in der Cloud, die Speicherung, Verarbeitung und Analyse großer Datenmengen ermöglichen, z.B. AWS S3 oder Azure Data Lake.
- Docker
- Software-Plattform zur Containerisierung, die Anwendungen mit ihren Abhängigkeiten in isolierten Umgebungen verpackt.
- Data Science
- Interdisziplinäres Feld, das Daten analysiert und interpretiert, um Erkenntnisse zu gewinnen und datengestützte Entscheidungen zu treffen.
- Product Owner
- Rolle im agilen Projektmanagement, die für die Produktvision, Anforderungen und Priorisierung von Aufgaben verantwortlich ist.
- Transport-/Logistikdaten
- Daten aus dem Bereich Verkehr und Lagerwirtschaft, wie Lieferketten, Fahrtrouten oder Bestandsinformationen. Werden analysiert, um Effizienz zu optimieren und Kosten zu senken.
Als IT-Freelancer automatisch auf Projekte wie dieses bewerben
Nexus ist die KI-gestützte Plattform für IT-Freelancer, die täglich neue Projektausschreibungen analysiert und passgenaue Bewerbungstexte generiert – vollautomatisch, in Sekunden. Kein manuelles Schreiben mehr: Nexus liest die Ausschreibung, erkennt die gefragten Skills und erstellt einen individuellen Bewerbungstext, den du per Klick versendest.
- ✓ Projektausschreibungen direkt von Anbietern aus dem DACH-Raum
- ✓ KI-Bewerbungstext in unter 30 Sekunden – individuell auf jedes Projekt zugeschnitten
- ✓ Automatischer Versand per E-Mail + Anlage in Pipedrive
- ✓ Kostenlos starten – keine Kreditkarte erforderlich
Häufige Fragen zu Nexus
- Was ist Nexus und für wen ist es geeignet?
- Nexus richtet sich an selbstständige IT-Freelancer, die regelmäßig auf Projektausschreibungen antworten. Die Plattform automatisiert den gesamten Bewerbungsprozess – von der Analyse der Ausschreibung bis zum Versand der Bewerbung.
- Wie schreibt Nexus den Bewerbungstext?
- Nexus analysiert die Projektbeschreibung mit Claude (Anthropic) und gleicht die Anforderungen mit deinem hinterlegten Profil ab. Der generierte Text ist individuell, professionell und direkt versendbar – du kannst ihn vor dem Absenden noch anpassen.
- Welche Projektplattformen werden unterstützt?
- Nexus erhält Projekte direkt von Projektanbietern aus dem DACH-Raum – neue Ausschreibungen erscheinen automatisch in deiner Pipeline, ohne dass du Plattformen manuell durchsuchen musst.
- Kostet Nexus etwas?
- Der Einstieg ist dauerhaft kostenlos. Für professionelle Nutzung mit erweiterten Funktionen gibt es kostenpflichtige Pläne – ohne versteckte Kosten oder automatische Verlängerung.
Passende Freelancer
Profile die zu den Skills dieses Projekts passen
Enterprise Architect und AI Platform Strategist mit über 25 Jahren Erfahrung in der Entwicklung, Architektur und Skalierung komplexer Softwareplattformen sowie der Integration moderner AI-Technologien in Enterprise-Umgebungen.
- Senior Backend Developer68 €/h
20+ Jahre Java, 15+ Jahre PHP, 10+ Jahre Frontend – Senior Fullstack-Entwickler mit umfassender Expertise in modernen Web- und Cloud-Technologien.
AI Automation Engineer mit Fokus auf agentische Workflows, LLM-Integration, Fullstack-Entwicklung und intelligente Prozessautomatisierung.
Nie wieder Bewerbungen schreiben.
Nexus matcht deine Skills und schreibt Bewerbungen automatisch.
Kostenlos registrieren →Keine Kreditkarte erforderlich
Kostenloser CV-Check
Wie gut passt dein AWS-Profil zum Markt?
- ✓ Market Fit gegen 535 AWS-Ausschreibungen
- ✓ Welche Skills dir fehlen und was sie bringen
- ✓ Dein Stundensatz im Vergleich
Kostenlos · anonym gespeichert · von FreelancerJury
Marktgeschwindigkeit
Projekte dieser Skills werden nach durchschnittlich 9,3 Tagen geschlossen.
Stundensatz vs. Markt
Kein Stundensatz für dieses Projekt hinterlegt.
Ø 93 €/h (für diese Skills)
Tipp
Zeiterfassung & Projektverwaltung
Projekte, Stunden und Rechnungen in einer App. Flow ist die schlanke Lösung für IT-Freelancer und Agenturen – kostenlos starten.
Flow ausprobierenÄhnliche Projekte
- Senior/Lead Databricks Engineer
- Data Scientist (AWS SageMaker, GraphStorm, PySpark) (m/w/d) 90% remote
- Data Architect (AWS Glue, Data Platform, PostgreSQL) (m/w/d) 90% remote
- Data Engineer (AWS, Python, SQL) (m/w/d) 90% remote
- Senior AWS Data Engineer (m/w/d)
- Senior Databricks Data Engineer (m/w/d) mit GenAI-Erfahrung Remote und München
- Entwicklung und Optimierung cloudbasierter Data Products auf Google Cloud Platform
- Senior Business Analyst – Data & Reporting Transformation (m/w/d)
- Data Engineer (m/w/d) / Microsoft Fabric & Power BI(abgelaufen)
- Senior Data Engineer – SAP BW to BigQuery Migration(abgelaufen)
Tipp
Konferenzraum in Hamburg
Für das nächste Kunden- oder Teammeeting in Hamburg: vollausgestattet mit Beamer, Whiteboard und Videokonferenz – ab 49 €/h, direkt am Gänsemarkt.
Konferenzraum mieten