ETL Entwickler (m/w/d) PySpark und AWS
🏛 Ausgeschrieben von Nemensis AGFür einen Kunden aus dem Finanzsektor suchen wir einen erfahrenen ETL-Entwickler (m/w/d) zur Unterstützung eines innovativen Transformationsprojekts.
Aufgaben: Sie werden an der Erstellung eines Proof of Concept im Rahmen eines Vorprojektes zur Modernisierung und Ablösung bestehender Batch-Prozesse mitwirken. Dabei gestalten Sie die technische Umsetzung von ETL-Lösungen aktiv mit und tragen zur Optimierung von Datenverarbeitungsprozessen bei.
Anforderungen: - Fundierte Erfahrung mit PySpark, insbesondere im Bereich der Batch-Datenverarbeitung - Sichere Kenntnisse in der Spark-Infrastruktur innerhalb von AWS EKS on EC2 - Solide Python- und SQL-Kompetenzen - Erfahrung mit Datenmodellen und ETL-Prozessen
Wünschenswert: - Terraform-Kenntnisse - Erfahrung mit Apache Iceberg - Fundierte Kenntnisse in Monitoring und Logging im PySpark-Kontext
Rahmenbedingungen: Laufzeit: 15.10.2026 – 31.12.2026 (mit Aussicht auf Verlängerung) Standort: Stuttgart mit Remote-Option (erste drei Wochen ca. 3 Tage vor Ort, danach überwiegend remote) Auslastung: 4 Tage pro Woche (32 Stunden) Sprache: Deutsch Vergütung: Stundensatz verhandelbar
Wir freuen uns auf Ihre Bewerbung!
Skills erklärt
- PySpark
- Ein Python-Framework zur verteilten Datenverarbeitung großer Datenmengen auf Clustern, basierend auf Apache Spark.
- AWS EKS
- Verwalteter Kubernetes-Service von Amazon Web Services, ermöglicht das Betreiben von containerisierten Anwendungen in der Cloud ohne eigene Kubernetes-Infrastruktur.
- EC2
- Amazon EC2 (Elastic Compute Cloud) ist ein Cloud-Computing-Service von Amazon Web Services, der virtuelle Rechenressourcen (Server) bereitstellt, die bedarfsgerecht skaliert werden können.
- Python
- Universelle Programmiersprache für Webentwicklung, Datenanalyse, Automatisierung und künstliche Intelligenz.
- SQL
- Programmiersprache zur Abfrage und Verwaltung von Daten in Datenbanken.
- Datenmodelle
- Strukturen, die definieren, wie Daten organisiert, gespeichert und zueinander in Beziehung stehen; werden verwendet, um Datenbanken und Informationssysteme zu planen.
- ETL-Prozesse
- Extract-Transform-Load beschreibt den Prozess zum Extrahieren, Umwandeln und Laden von Daten zwischen Systemen.
- Terraform
- Infrastructure-as-Code-Tool zur automatisierten Bereitstellung und Verwaltung von Cloud-Infrastruktur über Konfigurationsdateien.
- Monitoring
- Kontinuierliche Überwachung von Systemen, Anwendungen oder Prozessen zur Erfassung von Leistungsdaten und Erkennung von Problemen.
- Logging
- Technik zur automatischen Aufzeichnung von Ereignissen und Fehlern in Systemen, um Probleme zu analysieren und nachzuvollziehen.
Als IT-Freelancer automatisch auf Projekte wie dieses bewerben
Nexus ist die KI-gestützte Plattform für IT-Freelancer, die täglich neue Projektausschreibungen analysiert und passgenaue Bewerbungstexte generiert – vollautomatisch, in Sekunden. Kein manuelles Schreiben mehr: Nexus liest die Ausschreibung, erkennt die gefragten Skills und erstellt einen individuellen Bewerbungstext, den du per Klick versendest.
- ✓ Projektausschreibungen direkt von Anbietern aus dem DACH-Raum
- ✓ KI-Bewerbungstext in unter 30 Sekunden – individuell auf jedes Projekt zugeschnitten
- ✓ Automatischer Versand per E-Mail + Anlage in Pipedrive
- ✓ Kostenlos starten – keine Kreditkarte erforderlich
Häufige Fragen zu Nexus
- Was ist Nexus und für wen ist es geeignet?
- Nexus richtet sich an selbstständige IT-Freelancer, die regelmäßig auf Projektausschreibungen antworten. Die Plattform automatisiert den gesamten Bewerbungsprozess – von der Analyse der Ausschreibung bis zum Versand der Bewerbung.
- Wie schreibt Nexus den Bewerbungstext?
- Nexus analysiert die Projektbeschreibung mit Claude (Anthropic) und gleicht die Anforderungen mit deinem hinterlegten Profil ab. Der generierte Text ist individuell, professionell und direkt versendbar – du kannst ihn vor dem Absenden noch anpassen.
- Welche Projektplattformen werden unterstützt?
- Nexus erhält Projekte direkt von Projektanbietern aus dem DACH-Raum – neue Ausschreibungen erscheinen automatisch in deiner Pipeline, ohne dass du Plattformen manuell durchsuchen musst.
- Kostet Nexus etwas?
- Der Einstieg ist dauerhaft kostenlos. Für professionelle Nutzung mit erweiterten Funktionen gibt es kostenpflichtige Pläne – ohne versteckte Kosten oder automatische Verlängerung.
Nie wieder Bewerbungen schreiben.
Nexus matcht deine Skills und schreibt Bewerbungen automatisch.
Kostenlos registrieren →Keine Kreditkarte erforderlich
Kostenloser CV-Check
Wie gut passt dein PySpark-Profil zum Markt?
- ✓ Market Fit gegen 35 PySpark-Ausschreibungen
- ✓ Welche Skills dir fehlen und was sie bringen
- ✓ Dein Stundensatz im Vergleich
Kostenlos · anonym gespeichert · von FreelancerJury
Marktgeschwindigkeit
Projekte dieser Skills werden nach durchschnittlich 3,6 Tagen geschlossen.
Stundensatz vs. Markt
Kein Stundensatz für dieses Projekt hinterlegt.
Ø 122 €/h (für diese Skills)
Tipp
Zeiterfassung & Projektverwaltung
Projekte, Stunden und Rechnungen in einer App. Flow ist die schlanke Lösung für IT-Freelancer und Agenturen – kostenlos starten.
Flow ausprobierenÄhnliche Projekte
- BI / Data Engineer (m/w/d) mit Fokus auf AWS / dbt / Power BI / Microsoft Fabric
- Industrial Data & IT/OT Integration Architect / Shopfloor (m/w/d)
- Data Engineer (m/w/d)
- Data Warehouse Entwickler (w/m/d)
- Data Engineer (m/w/d) im Rahmen der Arbeitnehmerüberlassung
- Technischer Business Analyst mit Sicherheiten KnowHow (m/w/d)
- Data Analytics & Projektmanagement (m/w/d)
- Data Engineer/ Analyst (m/w/d) Aufbau Datenplattform in Stuttgart und Remote
- Data Analytics Platform Development with AI and GCP
- NeoXam DataHub Experte
- Retail & Pricing Analyst (m/w/d)
- Specialist Commercial Analytics & Performance (m/w/d)
- 100% Remote - Data Engineer (f/m/d) with Databricks Know-How
- Business Intelligence Entwickler
- Data Engineer NiFi (m/w/d)
Tipp
Konferenzraum in Hamburg
Für das nächste Kunden- oder Teammeeting in Hamburg: vollausgestattet mit Beamer, Whiteboard und Videokonferenz – ab 49 €/h, direkt am Gänsemarkt.
Konferenzraum mieten