Data Engineer (AWS, Python, PostgreSQL) – 95% Remote
🏛 Ausgeschrieben von mund consulting AGFür ein Projekt im Bereich Transport und Logistik suchen wir einen erfahrenen Data Engineer (m/w/d) zur Entwicklung und zum Betrieb einer Cloud-Anwendung auf Basis von AWS, Python und PostgreSQL.
Aufgaben: Sie entwickeln und betreiben Cloud-Anwendungen mit Fokus auf ETL-Pipelines, Datenanbindung via APIs und Cross-Account-Zugriff. Ihre Verantwortung umfasst die Implementierung automatisierter Unit- und Integrationstests, Data Quality Tests sowie umfassendes Monitoring und Logging. Sie gestalten GitLab CI/CD-Pipelines und integrieren Security-Scanner in den Entwicklungsprozess.
Anforderungen: Sie bringen mehr als 3 Jahre Erfahrung in der Python-Softwareentwicklung mit, einschließlich Testing und Code-Qualität. Umfangreiche Erfahrung mit AWS-Cloud-Anwendungen (Lambda, Glue, RDS, Step Functions, Athena) ist erforderlich. Sie haben nachgewiesene Expertise in der Entwicklung von ETL-Pipelines mit Python oder PySpark sowie in der Bereitstellung von Infrastruktur mittels AWS CDK. Kenntnisse in GitLab CI für automatisierte Deployment-Prozesse sind notwendig.
Wünschenswert sind Erfahrungen in Cloud-Architekturkonzeption, PostgreSQL/AWS RDS, AWS IAM und Data Governance (einschließlich AWS Lake Formation) sowie Kenntnisse im Schienenverkehr.
Rahmen: Einsatzort: Frankfurt am Main mit 95% Remote-Anteil Start: 01.01.2027 Laufzeit: 12 Monate Arbeitsmodell: Hybrid
Wir suchen einen zuverlässigen Partner für ein anspruchsvolles Projekt mit modernen Technologien und agilen Methoden.
Anforderungen
- Rollenfamilie
- Daten / KI
- Berufserfahrung
- mindestens 3 Jahre
Rahmenbedingungen
- Abrechnung
- Nach Aufwand
- Bewerbungsfrist
- 25.11.2026 (bald fällig)
Projekt
- Projektart
- Weiterentwicklung
- Vermittlung
- Über Vermittler
Skills erklärt
- Python
- Universelle Programmiersprache für Webentwicklung, Datenanalyse, Automatisierung und künstliche Intelligenz.
- AWS
- Amazon Web Services, Cloud-Plattform für Bereitstellung von Rechenleistung, Speicher, Datenbanken und weiteren IT-Services.
- Postgresql
- Relationale Datenbank, die strukturierte Daten speichert und mit SQL-Abfragen verwaltet wird.
- AWS Lambda
- Serverless-Computing-Service von Amazon Web Services, der Code ausführt, ohne dass Server bereitgestellt oder verwaltet werden müssen.
- AWS Glue
- Cloud-Service von Amazon Web Services zur automatisierten Datenintegration, Bereinigung und Vorbereitung von Daten aus verschiedenen Quellen.
- AWS RDS
- Amazon Relational Database Service – ein Cloud-Service zum Betrieb von verwalteten relationalen Datenbanken (wie MySQL, PostgreSQL) ohne eigene Infrastruktur.
- AWS Step Functions
- AWS-Service zur Orchestrierung und Automatisierung von Workflows, der mehrere AWS-Services in einer definierten Abfolge koordiniert und ausführt.
- Amazon Athena
- AWS-Service zum Abfragen von Daten in S3-Speichern mittels SQL, ohne separate Datenbank-Infrastruktur betreiben zu müssen.
- PySpark
- Ein Python-Framework zur verteilten Datenverarbeitung großer Datenmengen auf Clustern, basierend auf Apache Spark.
- AWS CDK
- Infrastructure-as-Code-Framework von Amazon Web Services, das ermöglicht, Cloud-Infrastruktur mit Programmiersprachen wie Python oder TypeScript zu definieren.
- GitLab CI
- GitLab CI ist ein Continuous-Integration-System von GitLab, das automatisiert Code-Tests, Builds und Deployments durchführt, wenn Code in ein Repository gepusht wird.
- CI/CD
- Automatisierte Prozesse für kontinuierliche Integration von Code-Änderungen und kontinuierliche Bereitstellung von Software-Updates.
- Unit Tests
- Automatisierte Tests in der Softwareentwicklung, die einzelne Funktionen oder Komponenten auf korrekte Funktionsweise überprüfen.
- Integrationstests
- Testverfahren, bei dem mehrere Softwarekomponenten zusammen getestet werden, um Schnittstellen und Zusammenspiel zu überprüfen.
- REST APIs
- Schnittstellen zur Datenübertragung zwischen Softwaresystemen, die auf HTTP-Protokoll und standardisierten Webmethoden basieren.
- Cross-Account-Zugriff
- Technische Möglichkeit, dass Benutzer oder Systeme auf Ressourcen in mehreren separaten IT-Konten oder Cloud-Accounts zugreifen können, ohne sich neu anmelden zu müssen.
- AWS IAM
- Service von Amazon Web Services zur Verwaltung von Benutzeridentitäten und Zugriffsrechten auf Cloud-Ressourcen.
- Data Governance
- Rahmenwerk für Regeln und Verantwortlichkeiten im Umgang mit Daten; wird implementiert, um Datenqualität, Sicherheit und Compliance zu gewährleisten.
- AWS Lake Formation
- AWS-Service zur Einrichtung und Verwaltung von Data Lakes, die große Mengen strukturierter und unstrukturierter Daten speichern und analysieren.
- Monitoring
- Kontinuierliche Überwachung von Systemen, Anwendungen oder Prozessen zur Erfassung von Leistungsdaten und Erkennung von Problemen.
- Logging
- Technik zur automatischen Aufzeichnung von Ereignissen und Fehlern in Systemen, um Probleme zu analysieren und nachzuvollziehen.
- ADR
- Alternative Dispute Resolution; außergerichtliche Verfahren zur Konfliktlösung wie Mediation oder Schiedsverfahren.
Als IT-Freelancer automatisch auf Projekte wie dieses bewerben
Nexus ist die KI-gestützte Plattform für IT-Freelancer, die täglich neue Projektausschreibungen analysiert und passgenaue Bewerbungstexte generiert – vollautomatisch, in Sekunden. Kein manuelles Schreiben mehr: Nexus liest die Ausschreibung, erkennt die gefragten Skills und erstellt einen individuellen Bewerbungstext, den du per Klick versendest.
- ✓ Projektausschreibungen direkt von Anbietern aus dem DACH-Raum
- ✓ KI-Bewerbungstext in unter 30 Sekunden – individuell auf jedes Projekt zugeschnitten
- ✓ Automatischer Versand per E-Mail + Anlage in Pipedrive
- ✓ Kostenlos starten – keine Kreditkarte erforderlich
Häufige Fragen zu Nexus
- Was ist Nexus und für wen ist es geeignet?
- Nexus richtet sich an selbstständige IT-Freelancer, die regelmäßig auf Projektausschreibungen antworten. Die Plattform automatisiert den gesamten Bewerbungsprozess – von der Analyse der Ausschreibung bis zum Versand der Bewerbung.
- Wie schreibt Nexus den Bewerbungstext?
- Nexus analysiert die Projektbeschreibung mit Claude (Anthropic) und gleicht die Anforderungen mit deinem hinterlegten Profil ab. Der generierte Text ist individuell, professionell und direkt versendbar – du kannst ihn vor dem Absenden noch anpassen.
- Welche Projektplattformen werden unterstützt?
- Nexus erhält Projekte direkt von Projektanbietern aus dem DACH-Raum – neue Ausschreibungen erscheinen automatisch in deiner Pipeline, ohne dass du Plattformen manuell durchsuchen musst.
- Kostet Nexus etwas?
- Der Einstieg ist dauerhaft kostenlos. Für professionelle Nutzung mit erweiterten Funktionen gibt es kostenpflichtige Pläne – ohne versteckte Kosten oder automatische Verlängerung.
Passende Freelancer
Profile die zu den Skills dieses Projekts passen
Enterprise Architect und AI Platform Strategist mit über 25 Jahren Erfahrung in der Entwicklung, Architektur und Skalierung komplexer Softwareplattformen sowie der Integration moderner AI-Technologien in Enterprise-Umgebungen.
- Senior Backend Developer68 €/h
20+ Jahre Java, 15+ Jahre PHP, 10+ Jahre Frontend – Senior Fullstack-Entwickler mit umfassender Expertise in modernen Web- und Cloud-Technologien.
AI Automation Engineer mit Fokus auf agentische Workflows, LLM-Integration, Fullstack-Entwicklung und intelligente Prozessautomatisierung.
Nie wieder Bewerbungen schreiben.
Nexus matcht deine Skills und schreibt Bewerbungen automatisch.
Kostenlos registrieren →Keine Kreditkarte erforderlich
Kostenloser CV-Check
Wie gut passt dein Python-Profil zum Markt?
- ✓ Market Fit gegen 1.031 Python-Ausschreibungen
- ✓ Welche Skills dir fehlen und was sie bringen
- ✓ Dein Stundensatz im Vergleich
Kostenlos · anonym gespeichert · von FreelancerJury
Marktgeschwindigkeit
Projekte dieser Skills werden nach durchschnittlich 9,4 Tagen geschlossen.
Stundensatz vs. Markt
Kein Stundensatz für dieses Projekt hinterlegt.
Ø 93 €/h (für diese Skills)
Tipp
Zeiterfassung & Projektverwaltung
Projekte, Stunden und Rechnungen in einer App. Flow ist die schlanke Lösung für IT-Freelancer und Agenturen – kostenlos starten.
Flow ausprobierenÄhnliche Projekte
- DataStage Entwickler (m/w/d)
- Data Analyst - Data Science & Model Governance
- Data Architect (m/w/d) Databricks, Entropy Data & Gitlab - remote
- Nearshore Snowflake Data Engineer (m/f/d)
- Senior KDB+/q Engineer (DRWN)
- Data Management and Governance Lead
- Senior/Lead Databricks Engineer
- Data Architect (AWS Glue, Data Platform, PostgreSQL) (m/w/d) 90% remote
- Senior Snowflake Data Engineer mit SQL und dbt für Remote gesucht - NEARSHORE(abgelaufen)
- Data Engineer (m/w/d) / Microsoft Fabric & Power BI(abgelaufen)
Tipp
Konferenzraum in Hamburg
Für das nächste Kunden- oder Teammeeting in Hamburg: vollausgestattet mit Beamer, Whiteboard und Videokonferenz – ab 49 €/h, direkt am Gänsemarkt.
Konferenzraum mieten