Data Engineer (AWS, Python, SQL)
🏛 Ausgeschrieben von mund consulting AGFür ein Projekt im Bereich Data & AI suchen wir einen erfahrenen Data Engineer (m/w/d) zur Umsetzung und Weiterentwicklung von Datenpipelines und Datenanwendungen in einer AWS-basierten Analyseumgebung.
Das Projekt ist hybrid ausgerichtet mit 90 % Remote-Anteil und startet zum 01.01.2027 für eine Laufzeit von 12 Monaten. Der Arbeitsort ist Frankfurt am Main.
Aufgaben: Sie entwickeln und optimieren Datenpipelines und Datenanwendungen mit SQL, Python, AWS Glue, AWS Lambda, AWS Batch sowie Airflow/MWAA. Weitere Aufgaben umfassen die Erstellung von Power-BI-Dashboards, die Arbeit mit Docker und Git, die Implementierung von CI/CD-Prozessen, Testing, Fehleranalyse und technische Dokumentation.
Anforderungen (Muss): - Fundierte Erfahrung in der Softwareentwicklung mit Git, CI/CD und automatisierten Tests - Projekterfahrung mit Power BI als BI- und Dashboard-Lösung - Nachgewiesene Erfahrung mit ETL-/ELT-Pipelines und Datenmodellierung (SQL, Python oder vergleichbar) - Projekterfahrung mit AWS Cloud-Services für Datenverarbeitung und Pipeline-Entwicklung - Praktische Erfahrung mit AWS Glue Data Quality und der Erstellung entsprechender Regeln
Anforderungen (Soll): - Erfahrung mit serverlosen Datenplattformen und Orchestrierungslösungen - Kenntnisse in Data Science und etablierten Verfahren (Prognose, Klassifikation, Clustering, Anomalieerkennung) - Erfahrung mit agilen Methoden (Scrum, Kanban) - Praktische Docker-Erfahrung - Vorteilhaft: Erfahrung mit Daten aus Transport und Logistik
Technologien: AWS, Python, SQL, Git, CI/CD, Power BI, AWS Glue, Lambda, Batch, Airflow, MWAA, Docker, Data Science.
Skills
Anforderungen
- Rollenfamilie
- Daten / KI
- Rechtsform
- Einzelfreelancer möglich
Rahmenbedingungen
- Abrechnung
- Nach Aufwand
- Bewerbungsfrist
- 25.11.2026 (bald fällig)
Projekt
- Projektart
- Weiterentwicklung
- Vermittlung
- Über Vermittler
Skills erklärt
- AWS
- Amazon Web Services, Cloud-Plattform für Bereitstellung von Rechenleistung, Speicher, Datenbanken und weiteren IT-Services.
- AWS Batch
- Cloud-Service von Amazon Web Services zur Ausführung großer Mengen von Batch-Verarbeitungsaufträgen parallel und skalierbar.
- AWS Glue
- Cloud-Service von Amazon Web Services zur automatisierten Datenintegration, Bereinigung und Vorbereitung von Daten aus verschiedenen Quellen.
- AWS Glue Data Quality
- AWS-Service zur Überprüfung und Validierung von Datenqualität in ETL-Prozessen. Stellt sicher, dass Daten vollständig, korrekt und konsistent sind, bevor sie weiterverarbeitet werden.
- AWS Lambda
- Serverless-Computing-Service von Amazon Web Services, der Code ausführt, ohne dass Server bereitgestellt oder verwaltet werden müssen.
- Airflow
- Open-Source-Plattform zur Planung, Überwachung und Automatisierung von Datenverarbeitungs-Workflows.
- CI/CD
- Automatisierte Prozesse für kontinuierliche Integration von Code-Änderungen und kontinuierliche Bereitstellung von Software-Updates.
- Data Science
- Interdisziplinäres Feld, das Daten analysiert und interpretiert, um Erkenntnisse zu gewinnen und datengestützte Entscheidungen zu treffen.
- Docker
- Software-Plattform zur Containerisierung, die Anwendungen mit ihren Abhängigkeiten in isolierten Umgebungen verpackt.
- Git
- Versionskontrollsystem zur Verwaltung von Codeänderungen, das Zusammenarbeit mehrerer Entwickler und Nachverfolgung von Änderungen ermöglicht.
- Kanban
- Projektmanagement-Methode, bei der Aufgaben auf einem Board in Spalten (z.B. Zu tun, In Arbeit, Fertig) visualisiert und kontinuierlich bearbeitet werden.
- MWAA
- Amazon Managed Workflows for Apache Airflow – ein verwalteter Service zum Orchestrieren von Daten-Workflows in der Cloud. Wird verwendet, um komplexe, zeitgesteuerte Datenverarbeitungsprozesse automatisiert auszuführen.
- Microsoft Power BI
- Business-Intelligence-Tool von Microsoft zur Visualisierung, Analyse und Berichterstattung von Daten aus verschiedenen Quellen.
- Python
- Universelle Programmiersprache für Webentwicklung, Datenanalyse, Automatisierung und künstliche Intelligenz.
- Scrum
- Agile Projektmanagement-Methode, die Arbeit in kurzen Zyklen (Sprints) organisiert und regelmäßige Abstimmungen vorsieht.
- SQL
- Programmiersprache zur Abfrage und Verwaltung von Daten in Datenbanken.
- Testing
- Systematische Überprüfung von Software oder Systemen auf Fehler und korrekte Funktionsweise durch verschiedene Testmethoden und -szenarien.
- ETL/ELT-Pipelines
- Datenverarbeitungsprozesse, die Daten extrahieren (Extract), transformieren (Transform) und laden (Load) oder in anderer Reihenfolge verarbeiten; zentral für Datenintegration und Data Warehousing.
- Datenmodellierung
- Strukturierung und Darstellung von Datenbeziehungen in Datenbanken oder Informationssystemen; Grundlage für effiziente Datenverwaltung.
Als IT-Freelancer automatisch auf Projekte wie dieses bewerben
Nexus ist die KI-gestützte Plattform für IT-Freelancer, die täglich neue Projektausschreibungen analysiert und passgenaue Bewerbungstexte generiert – vollautomatisch, in Sekunden. Kein manuelles Schreiben mehr: Nexus liest die Ausschreibung, erkennt die gefragten Skills und erstellt einen individuellen Bewerbungstext, den du per Klick versendest.
- ✓ Projektausschreibungen direkt von Anbietern aus dem DACH-Raum
- ✓ KI-Bewerbungstext in unter 30 Sekunden – individuell auf jedes Projekt zugeschnitten
- ✓ Automatischer Versand per E-Mail + Anlage in Pipedrive
- ✓ Kostenlos starten – keine Kreditkarte erforderlich
Häufige Fragen zu Nexus
- Was ist Nexus und für wen ist es geeignet?
- Nexus richtet sich an selbstständige IT-Freelancer, die regelmäßig auf Projektausschreibungen antworten. Die Plattform automatisiert den gesamten Bewerbungsprozess – von der Analyse der Ausschreibung bis zum Versand der Bewerbung.
- Wie schreibt Nexus den Bewerbungstext?
- Nexus analysiert die Projektbeschreibung mit Claude (Anthropic) und gleicht die Anforderungen mit deinem hinterlegten Profil ab. Der generierte Text ist individuell, professionell und direkt versendbar – du kannst ihn vor dem Absenden noch anpassen.
- Welche Projektplattformen werden unterstützt?
- Nexus erhält Projekte direkt von Projektanbietern aus dem DACH-Raum – neue Ausschreibungen erscheinen automatisch in deiner Pipeline, ohne dass du Plattformen manuell durchsuchen musst.
- Kostet Nexus etwas?
- Der Einstieg ist dauerhaft kostenlos. Für professionelle Nutzung mit erweiterten Funktionen gibt es kostenpflichtige Pläne – ohne versteckte Kosten oder automatische Verlängerung.
Passende Freelancer
Profile die zu den Skills dieses Projekts passen
Enterprise Architect und AI Platform Strategist mit über 25 Jahren Erfahrung in der Entwicklung, Architektur und Skalierung komplexer Softwareplattformen sowie der Integration moderner AI-Technologien in Enterprise-Umgebungen.
- Senior Backend Developer68 €/h
20+ Jahre Java, 15+ Jahre PHP, 10+ Jahre Frontend – Senior Fullstack-Entwickler mit umfassender Expertise in modernen Web- und Cloud-Technologien.
Nie wieder Bewerbungen schreiben.
Nexus matcht deine Skills und schreibt Bewerbungen automatisch.
Kostenlos registrieren →Keine Kreditkarte erforderlich
Kostenloser CV-Check
Wie gut passt dein AWS-Profil zum Markt?
- ✓ Market Fit gegen 535 AWS-Ausschreibungen
- ✓ Welche Skills dir fehlen und was sie bringen
- ✓ Dein Stundensatz im Vergleich
Kostenlos · anonym gespeichert · von FreelancerJury
Marktgeschwindigkeit
Projekte dieser Skills werden nach durchschnittlich 8,3 Tagen geschlossen.
Stundensatz vs. Markt
Kein Stundensatz für dieses Projekt hinterlegt.
Ø 93 €/h (für diese Skills)
Tipp
Zeiterfassung & Projektverwaltung
Projekte, Stunden und Rechnungen in einer App. Flow ist die schlanke Lösung für IT-Freelancer und Agenturen – kostenlos starten.
Flow ausprobierenÄhnliche Projekte
- Data Management and Governance Lead
- Senior/Lead Databricks Engineer
- Data Scientist (AWS SageMaker, GraphStorm, PySpark) (m/w/d) 90% remote
- Data Architect (AWS Glue, Data Platform, PostgreSQL) (m/w/d) 90% remote
- Data Engineer (AWS, SQL, Python) (m/w/d) 90% remote
- Senior AWS Data Engineer (m/w/d)
- Senior Databricks Data Engineer (m/w/d) mit GenAI-Erfahrung Remote und München
- Entwicklung und Optimierung cloudbasierter Data Products auf Google Cloud Platform
- Data Engineer (m/w/d) / Microsoft Fabric & Power BI(abgelaufen)
- Senior Data Engineer – SAP BW to BigQuery Migration(abgelaufen)
Tipp
Konferenzraum in Hamburg
Für das nächste Kunden- oder Teammeeting in Hamburg: vollausgestattet mit Beamer, Whiteboard und Videokonferenz – ab 49 €/h, direkt am Gänsemarkt.
Konferenzraum mieten