Senior AWS Data Engineer (m/w/d)
🏛 Ausgeschrieben von Westhouse Consulting GmbHWir suchen einen erfahrenen Senior AWS Data Engineer für ein Vollzeit-Projekt im Bereich cloudnative Datentechnologie. Die Position ist remote mit Standort in Deutschland und umfasst ca. 200 Projekttage, davon 12 Tage vor Ort.
In dieser Rolle entwickeln und automatisieren Sie produktionsreife Datenpipelines auf einer AWS-basierten Datenplattform. Sie sind verantwortlich für die Entwicklung von ETL-/ELT-Strecken sowie Datenmodellen mit SQL, Python und Spark/PySpark. Dabei nutzen Sie AWS-Managed-Services für Ingestion, Transformation, Orchestrierung und Bereitstellung von Daten. Ein weiterer Schwerpunkt liegt auf der Sicherstellung von Datenqualität und der Bereitstellung analysierbarer Daten für Dashboards und Data-Science-Anwendungsfälle.
Sie arbeiten im agilen Team und setzen moderne Softwareentwicklungs- sowie CI/CD-Praktiken um.
Erforderliche Qualifikationen: - Mindestens 5 Jahre Erfahrung in ETL-Entwicklung und Datenmodellierung mit SQL und Python, davon mindestens 3 Jahre mit AWS-Cloud-Technologien - Mindestens 3 Jahre Erfahrung in Data Exploration, Datenanalyse und Datenqualitätsmanagement - Mindestens 3 Jahre Erfahrung in Softwareentwicklung mit Versionsverwaltung, CI/CD und automatisierten Tests - Projekterfahrung mit Power BI und AWS Glue Data Quality
Wünschenswert sind Erfahrungen mit serverlosen Cloud-Datenplattformen, Data-Science-Verfahren, Docker-Containern sowie Kenntnisse in Transport-/Logistikdaten. Product-Owner-Aufgaben können teilweise übernommen werden.
Anforderungen
- Rollenfamilie
- Daten / KI
- Berufserfahrung
- mindestens 5 Jahre
- Sprachen
- Deutsch (gut)
Rahmenbedingungen
- Abrechnung
- Nach Aufwand
- Remote
- Onshore aus Deutschland
Projekt
- Projektart
- Weiterentwicklung
- Vermittlung
- Über Vermittler
Skills erklärt
- AWS
- Amazon Web Services, Cloud-Plattform für Bereitstellung von Rechenleistung, Speicher, Datenbanken und weiteren IT-Services.
- Data Engineering
- Data Engineering umfasst den Aufbau und die Verwaltung von Dateninfrastrukturen, Pipelines und Systemen zur Verarbeitung großer Datenmengen für Analysen und Anwendungen.
- ETL/ELT
- Datenverarbeitungsprozesse zum Extrahieren von Daten aus Quellen, Transformieren in das gewünschte Format und Laden in Zielsysteme (ETL) oder Laden vor der Transformation (ELT).
- SQL
- Programmiersprache zur Abfrage und Verwaltung von Daten in Datenbanken.
- Python
- Universelle Programmiersprache für Webentwicklung, Datenanalyse, Automatisierung und künstliche Intelligenz.
- PySpark
- Ein Python-Framework zur verteilten Datenverarbeitung großer Datenmengen auf Clustern, basierend auf Apache Spark.
- AWS Glue
- Cloud-Service von Amazon Web Services zur automatisierten Datenintegration, Bereinigung und Vorbereitung von Daten aus verschiedenen Quellen.
- AWS Glue Data Quality
- AWS-Service zur Überprüfung und Validierung von Datenqualität in ETL-Prozessen. Stellt sicher, dass Daten vollständig, korrekt und konsistent sind, bevor sie weiterverarbeitet werden.
- Data modeling
- Methode zur strukturierten Darstellung und Organisation von Daten in Datenbanken oder Informationssystemen, um Beziehungen und Abhängigkeiten abzubilden.
- Data Quality
- Bewertung und Verbesserung der Genauigkeit, Vollständigkeit und Konsistenz von Daten; wird in Datenmanagement und Business Intelligence eingesetzt.
- Data Stewardship
- Verantwortung für die Verwaltung, Qualität und Governance von Daten in einer Organisation.
- Power BI
- Ein Business-Intelligence-Tool von Microsoft zur Visualisierung und Analyse von Daten durch interaktive Dashboards und Berichte.
- CI/CD
- Automatisierte Prozesse für kontinuierliche Integration von Code-Änderungen und kontinuierliche Bereitstellung von Software-Updates.
- Git
- Versionskontrollsystem zur Verwaltung von Codeänderungen, das Zusammenarbeit mehrerer Entwickler und Nachverfolgung von Änderungen ermöglicht.
- Agile
- Iterative Projektmanagement-Methode, die Flexibilität, regelmäßiges Feedback und inkrementelle Lieferung von Ergebnissen betont.
- Softwareentwicklung
- Prozess der Planung, Programmierung, Testung und Wartung von Softwareanwendungen und -systemen.
Als IT-Freelancer automatisch auf Projekte wie dieses bewerben
Nexus ist die KI-gestützte Plattform für IT-Freelancer, die täglich neue Projektausschreibungen analysiert und passgenaue Bewerbungstexte generiert – vollautomatisch, in Sekunden. Kein manuelles Schreiben mehr: Nexus liest die Ausschreibung, erkennt die gefragten Skills und erstellt einen individuellen Bewerbungstext, den du per Klick versendest.
- ✓ Projektausschreibungen direkt von Anbietern aus dem DACH-Raum
- ✓ KI-Bewerbungstext in unter 30 Sekunden – individuell auf jedes Projekt zugeschnitten
- ✓ Automatischer Versand per E-Mail + Anlage in Pipedrive
- ✓ Kostenlos starten – keine Kreditkarte erforderlich
Häufige Fragen zu Nexus
- Was ist Nexus und für wen ist es geeignet?
- Nexus richtet sich an selbstständige IT-Freelancer, die regelmäßig auf Projektausschreibungen antworten. Die Plattform automatisiert den gesamten Bewerbungsprozess – von der Analyse der Ausschreibung bis zum Versand der Bewerbung.
- Wie schreibt Nexus den Bewerbungstext?
- Nexus analysiert die Projektbeschreibung mit Claude (Anthropic) und gleicht die Anforderungen mit deinem hinterlegten Profil ab. Der generierte Text ist individuell, professionell und direkt versendbar – du kannst ihn vor dem Absenden noch anpassen.
- Welche Projektplattformen werden unterstützt?
- Nexus erhält Projekte direkt von Projektanbietern aus dem DACH-Raum – neue Ausschreibungen erscheinen automatisch in deiner Pipeline, ohne dass du Plattformen manuell durchsuchen musst.
- Kostet Nexus etwas?
- Der Einstieg ist dauerhaft kostenlos. Für professionelle Nutzung mit erweiterten Funktionen gibt es kostenpflichtige Pläne – ohne versteckte Kosten oder automatische Verlängerung.
Passende Freelancer
Profile die zu den Skills dieses Projekts passen
Enterprise Architect und AI Platform Strategist mit über 25 Jahren Erfahrung in der Entwicklung, Architektur und Skalierung komplexer Softwareplattformen sowie der Integration moderner AI-Technologien in Enterprise-Umgebungen.
- Senior Backend Developer68 €/h
20+ Jahre Java, 15+ Jahre PHP, 10+ Jahre Frontend – Senior Fullstack-Entwickler mit umfassender Expertise in modernen Web- und Cloud-Technologien.
Nie wieder Bewerbungen schreiben.
Nexus matcht deine Skills und schreibt Bewerbungen automatisch.
Kostenlos registrieren →Keine Kreditkarte erforderlich
Kostenloser CV-Check
Wie gut passt dein AWS-Profil zum Markt?
- ✓ Market Fit gegen 535 AWS-Ausschreibungen
- ✓ Welche Skills dir fehlen und was sie bringen
- ✓ Dein Stundensatz im Vergleich
Kostenlos · anonym gespeichert · von FreelancerJury
Marktgeschwindigkeit
Projekte dieser Skills werden nach durchschnittlich 9,5 Tagen geschlossen.
Stundensatz vs. Markt
Kein Stundensatz für dieses Projekt hinterlegt.
Ø 93 €/h (für diese Skills)
Tipp
Zeiterfassung & Projektverwaltung
Projekte, Stunden und Rechnungen in einer App. Flow ist die schlanke Lösung für IT-Freelancer und Agenturen – kostenlos starten.
Flow ausprobierenÄhnliche Projekte
- Senior/Lead Databricks Engineer
- Data Architect (AWS Glue, Data Platform, PostgreSQL) (m/w/d) 90% remote
- Data Engineer (AWS, Python, SQL) (m/w/d) 90% remote
- Data Engineer (AWS, SQL, Python) (m/w/d) 90% remote
- Senior Databricks Data Engineer (m/w/d) mit GenAI-Erfahrung Remote und München
- Entwicklung und Optimierung cloudbasierter Data Products auf Google Cloud Platform
- Senior Business Analyst – Data & Reporting Transformation (m/w/d)
- Business Analyst (Data & Operations)
- Data Scientist (AWS SageMaker, GraphStorm, PySpark) (m/w/d) 90% remote(abgelaufen)
- Senior Data Engineer – SAP BW to BigQuery Migration(abgelaufen)
Tipp
Konferenzraum in Hamburg
Für das nächste Kunden- oder Teammeeting in Hamburg: vollausgestattet mit Beamer, Whiteboard und Videokonferenz – ab 49 €/h, direkt am Gänsemarkt.
Konferenzraum mieten