Data Architect (Airflow, GitLab CI/CD, AWS)
🏛 Ausgeschrieben von mund consulting AGFür ein Projekt im Energiesektor suchen wir einen erfahrenen Data Architect (m/w/d) zur Konzeption und Umsetzung moderner Datenarchitekturen. Die Position ist vollständig remote und bietet die Möglichkeit, an zukunftsweisenden Dateninfrastrukturen zu arbeiten.
Aufgaben: Sie analysieren und konzipieren Datenarchitekturen, Datenmodelle sowie Datenintegrations- und Migrationskonzepte. Dabei entwickeln Sie Data-Governance-Strategien für Datenplattformen, Data Warehouses und Data Lakes. Ein Schwerpunkt liegt auf der Automatisierung der Dateninfrastruktur mittels Airflow und GitLab CI/CD sowie der Implementierung im AWS-Umfeld. Sie dokumentieren alle Architekturentscheidungen und stellen sicher, dass Lösungen den Qualitätsstandards entsprechen.
Anforderungen: - Nachgewiesene Expertise in der Konzeption von Datenarchitekturen und automatisierten Datenerfassungsprozessen - Fundierte Kenntnisse in Big-Data-Services (Hadoop, Spark, AWS EMR) - Erfahrung mit AWS-Umgebungen und ITIL-konformer Operationalisierung - Schwerpunkt auf Datensicherheit, Datenintegrität und Compliance - AWS Certified Data Analytics und ITIL Foundation Certificate erforderlich - Verhandlungssichere Deutschkenntnisse - Idealerweise 8+ Jahre Erfahrung in relevanten Datenarchitektur-Projekten
Methoden & Tools: Scrum, MS Teams, JIRA, Confluence, Airflow, GitLab CI/CD, AWS und verwandte Technologien.
Diese Rolle bietet die Chance, komplexe Datenherausforderungen zu lösen und nachhaltige Lösungen in einem dynamischen Umfeld zu gestalten.
Skills erklärt
- Airflow
- Open-Source-Plattform zur Planung, Überwachung und Automatisierung von Datenverarbeitungs-Workflows.
- GitLab CI/CD
- Integrierte Plattform in GitLab für kontinuierliche Integration und kontinuierliche Bereitstellung von Softwareprojekten mit automatisierten Tests und Deployments.
- AWS
- Amazon Web Services, Cloud-Plattform für Bereitstellung von Rechenleistung, Speicher, Datenbanken und weiteren IT-Services.
- Hadoop
- Open-Source-Framework für verteilte Verarbeitung großer Datenmengen auf Clustern von Computern.
- Spark
- Apache Spark ist ein Framework zur verteilten Datenverarbeitung großer Datenmengen; wird verwendet um Daten schnell zu analysieren und zu transformieren.
- AWS EMR
- Amazon-Service zur Verarbeitung großer Datenmengen mit Open-Source-Tools wie Hadoop und Spark in der Cloud.
- Data Governance
- Rahmenwerk für Regeln und Verantwortlichkeiten im Umgang mit Daten; wird implementiert, um Datenqualität, Sicherheit und Compliance zu gewährleisten.
- Datenarchitektur
- Strukturelle Gestaltung von Datensystemen, einschließlich Datenmodelle, Speicherung und Zugriffsmuster; definiert, wie Daten organisiert und verwaltet werden.
- Datenmodellierung
- Strukturierung und Darstellung von Datenbeziehungen in Datenbanken oder Informationssystemen; Grundlage für effiziente Datenverwaltung.
- Datenintegration
- Prozess der Zusammenführung von Daten aus verschiedenen Quellen in ein einheitliches System oder Format.
- Datenmigration
- Prozess zum Übertragen von Daten von einem System in ein anderes; wird durchgeführt bei Systemwechseln oder Konsolidierungen.
- Data Warehouse
- Zentrales Datenspeichersystem, das große Mengen strukturierter Daten aus verschiedenen Quellen sammelt und für Analysen bereitstellt.
- Data Lake
- Ein zentrales Speichersystem, das große Mengen an Rohdaten in verschiedenen Formaten sammelt und speichert, um sie später für Analysen und Auswertungen zu nutzen.
- ITIL Foundation
- Zertifizierung, die grundlegende Kenntnisse des ITIL-Frameworks (Best Practices für IT-Service-Management) nachweist.
- AWS Certified Data Analytics
- Zertifizierung von Amazon Web Services, die Fachkompetenz in Datenanalyse und Big-Data-Verarbeitung auf der AWS-Plattform bescheinigt.
- Scrum
- Agile Projektmanagement-Methode, die Arbeit in kurzen Zyklen (Sprints) organisiert und regelmäßige Abstimmungen vorsieht.
- Jira
- Projektmanagement- und Issue-Tracking-Tool von Atlassian; wird verwendet, um Aufgaben zu planen, zu verfolgen und Workflows zu organisieren.
- Confluence
- Atlassian-Softwaretool zur Erstellung, Verwaltung und gemeinsamen Bearbeitung von Dokumentationen und Wikis im Team.
- MS Teams
- Kommunikations- und Kollaborationsplattform von Microsoft für Messaging, Videokonferenzen und Dateiaustausch; wird eingesetzt für Teamkommunikation und Remote-Zusammenarbeit.
- Datensicherheit
- Maßnahmen und Praktiken zum Schutz von Daten vor unbefugtem Zugriff, Verlust oder Beschädigung. Wird in IT-Systemen, Netzwerken und Prozessen implementiert.
- Datenintegrität
- Sicherstellung, dass Daten vollständig, korrekt und unverändert bleiben, von der Erfassung bis zur Nutzung.
Als IT-Freelancer automatisch auf Projekte wie dieses bewerben
Nexus ist die KI-gestützte Plattform für IT-Freelancer, die täglich neue Projektausschreibungen analysiert und passgenaue Bewerbungstexte generiert – vollautomatisch, in Sekunden. Kein manuelles Schreiben mehr: Nexus liest die Ausschreibung, erkennt die gefragten Skills und erstellt einen individuellen Bewerbungstext, den du per Klick versendest.
- ✓ Projektausschreibungen direkt von Anbietern aus dem DACH-Raum
- ✓ KI-Bewerbungstext in unter 30 Sekunden – individuell auf jedes Projekt zugeschnitten
- ✓ Automatischer Versand per E-Mail + Anlage in Pipedrive
- ✓ Kostenlos starten – keine Kreditkarte erforderlich
Häufige Fragen zu Nexus
- Was ist Nexus und für wen ist es geeignet?
- Nexus richtet sich an selbstständige IT-Freelancer, die regelmäßig auf Projektausschreibungen antworten. Die Plattform automatisiert den gesamten Bewerbungsprozess – von der Analyse der Ausschreibung bis zum Versand der Bewerbung.
- Wie schreibt Nexus den Bewerbungstext?
- Nexus analysiert die Projektbeschreibung mit Claude (Anthropic) und gleicht die Anforderungen mit deinem hinterlegten Profil ab. Der generierte Text ist individuell, professionell und direkt versendbar – du kannst ihn vor dem Absenden noch anpassen.
- Welche Projektplattformen werden unterstützt?
- Nexus erhält Projekte direkt von Projektanbietern aus dem DACH-Raum – neue Ausschreibungen erscheinen automatisch in deiner Pipeline, ohne dass du Plattformen manuell durchsuchen musst.
- Kostet Nexus etwas?
- Der Einstieg ist dauerhaft kostenlos. Für professionelle Nutzung mit erweiterten Funktionen gibt es kostenpflichtige Pläne – ohne versteckte Kosten oder automatische Verlängerung.
Passende Freelancer
Profile die zu den Skills dieses Projekts passen
Enterprise Architect und AI Platform Strategist mit über 25 Jahren Erfahrung in der Entwicklung, Architektur und Skalierung komplexer Softwareplattformen sowie der Integration moderner AI-Technologien in Enterprise-Umgebungen.
- Senior Backend Developer68 €/h
20+ Jahre Java, 15+ Jahre PHP, 10+ Jahre Frontend – Senior Fullstack-Entwickler mit umfassender Expertise in modernen Web- und Cloud-Technologien.
Nie wieder Bewerbungen schreiben.
Nexus matcht deine Skills und schreibt Bewerbungen automatisch.
Kostenlos registrieren →Keine Kreditkarte erforderlich
Kostenloser CV-Check
Wie gut passt dein AWS-Profil zum Markt?
- ✓ Market Fit gegen 535 AWS-Ausschreibungen
- ✓ Welche Skills dir fehlen und was sie bringen
- ✓ Dein Stundensatz im Vergleich
Kostenlos · anonym gespeichert · von FreelancerJury
Marktgeschwindigkeit
Projekte dieser Skills werden nach durchschnittlich 8,9 Tagen geschlossen.
Stundensatz vs. Markt
Kein Stundensatz für dieses Projekt hinterlegt.
Ø 89 €/h (für diese Skills)
Tipp
Zeiterfassung & Projektverwaltung
Projekte, Stunden und Rechnungen in einer App. Flow ist die schlanke Lösung für IT-Freelancer und Agenturen – kostenlos starten.
Flow ausprobierenÄhnliche Projekte
- Business Intelligence Developer / Qlik Sense (w/m/d)
- Data Architect mit AWS/Big-Data-Erfahrung (m/w/d) - 100% Remote
- Data Scientist Life Science (m/w/d)
- GCP Data Engineer
- AIMI DISA Data Engineer (m/w/d)
- Data Engineer (Python, Microsoft SQL Server, AWS) (m/w/d) 95% remote
- Data Steward / Scientific Expert
- Data Warehouse Consultant (m/w/x)
- Data Engineer mit Schwerpunkt Python/Azure für Remote-Projekt(abgelaufen)
- Data Engineer – Snowflake & Databricks(abgelaufen)
Tipp
Konferenzraum in Hamburg
Für das nächste Kunden- oder Teammeeting in Hamburg: vollausgestattet mit Beamer, Whiteboard und Videokonferenz – ab 49 €/h, direkt am Gänsemarkt.
Konferenzraum mieten