Senior Data Engineer Kubernetes (m/w/d)
🏛 Ausgeschrieben von APRIORI - business solutions AGFür ein international tätiges Unternehmen aus der Elektronik- und Kommunikationstechnik-Branche suchen wir einen erfahrenen Senior Data Engineer mit Kubernetes-Spezialisierung am Standort Dresden.
Das Unternehmen ist ein führender Technologiekonzern, der spezialisierte elektronische Systeme, Kommunikationslösungen sowie Mess- und Sicherheitstechnik entwickelt und sich durch zukunftsweisende Ingenieursleistungen und höchste Qualitätsstandards auszeichnet.
Ihre Aufgaben umfassen die Konzeption und Entwicklung einer On-Premises-Datenplattform sowie die Integration plattformbezogener Services. Sie entwickeln und implementieren Komponenten für Datenorchestrierung, Deployment und Plattformautomatisierung. Darüber hinaus realisieren Sie Batch- und Low-Latency-Streaming-Datenpipelines, integrieren Workloads auf Kubernetes und binden S3-kompatible Storage-Lösungen an. Sie evaluieren Datenkataloge und Systeme zur Datenversionierung und erstellen Proof of Concepts mit modernen Entwicklungswerkzeugen. Eine enge Zusammenarbeit mit Lead-Architekten sowie Infrastruktur- und Security-Teams ist essentiell.
Wir erwarten ein erfolgreich abgeschlossenes Studium der Informatik oder eine vergleichbare technische Qualifikation sowie 8–10 Jahre Berufserfahrung als Senior Data Engineer. Mehrjährige praktische Erfahrung mit Kubernetes-Infrastrukturen und fundierte Linux-Kenntnisse sind erforderlich. Sie sollten umfassendes Verständnis moderner Datenplattform-Architekturen mitbringen und sehr gute Programmierkenntnisse in Python, Golang, SQL, Bash oder Java haben. Vertrautheit mit Tools wie Apache Iceberg, Dagster, Spark, Kafka, Flink, Airflow oder NATS.io sowie GitOps-Workflows ist notwendig. Analytisches Denkvermögen, Lösungsorientierung und agile Arbeitsweise runden das Profil ab. Verhandlungssichere Deutsch- und Englischkenntnisse sind erforderlich.
Das Unternehmen bietet ein hochmodernes technologisches Arbeitsumfeld mit Fokus auf innovative On-Premises- und Edge-Datenarchitekturen, Zusammenarbeit in einem professionellen, interdisziplinären Expertenteam mit flachen Kommunikationswegen sowie eine von Vielfalt und gegenseitiger Wertschätzung geprägte Unternehmenskultur.
Anforderungen
- Rollenfamilie
- Daten / KI
- Berufserfahrung
- mindestens 8 Jahre
- Sprachen
- Deutsch (verhandlungssicher), Englisch (verhandlungssicher)
Rahmenbedingungen
- Gesuchte Personen
- 1
Projekt
- Vermittlung
- Über Vermittler
- Endkunde
- Konzern
Skills erklärt
- Kubernetes
- Open-Source-Plattform zur automatisierten Verwaltung, Skalierung und Orchestrierung von containerisierten Anwendungen.
- Linux
- Freies Betriebssystem, das als Basis für Server, Desktops und eingebettete Systeme verwendet wird.
- Python
- Universelle Programmiersprache für Webentwicklung, Datenanalyse, Automatisierung und künstliche Intelligenz.
- GoLang
- Programmiersprache von Google, die für effiziente und gleichzeitige Verarbeitung sowie für Backend- und Cloud-Anwendungen entwickelt wurde.
- SQL (MPP)
- SQL-Abfragesprache optimiert für Massively Parallel Processing, um große Datenmengen verteilt auf mehreren Servern schnell zu verarbeiten.
- Bash
- Bash ist eine Kommandozeilen-Shell und Skriptsprache für Unix/Linux-Systeme; sie wird verwendet, um Befehle auszuführen und Automatisierungsaufgaben zu programmieren.
- Java
- Programmiersprache, die plattformunabhängig läuft und häufig für Unternehmensanwendungen, Web-Services und Android-Apps verwendet wird.
- Apache Iceberg
- Open-Source-Tabellenformat für große Datenmengen, das Versionskontrolle und effiziente Abfragen ermöglicht und in Data-Lakes eingesetzt wird.
- Dagster
- Open-Source-Framework zur Orchestrierung und Verwaltung von Daten-Pipelines und ETL-Prozessen.
- Spark
- Apache Spark ist ein Framework zur verteilten Datenverarbeitung großer Datenmengen; wird verwendet um Daten schnell zu analysieren und zu transformieren.
- Kafka
- Verteilte Streaming-Plattform zur Verarbeitung großer Datenmengen in Echtzeit zwischen verschiedenen Systemen.
- Flink
- Open-Source-Framework für verteilte Datenverarbeitung in Echtzeit, das große Datenmengen schnell verarbeitet und analysiert.
- Airflow
- Open-Source-Plattform zur Planung, Überwachung und Automatisierung von Datenverarbeitungs-Workflows.
- Risingwave
- Open-Source Stream-Processing-System zur Verarbeitung und Analyse von kontinuierlichen Datenströmen in Echtzeit.
- NATS.io
- Open-Source-Messaging-System für asynchrone Kommunikation zwischen verteilten Anwendungen und Microservices.
- GitOps
- Methode zur Infrastruktur- und Anwendungsverwaltung, bei der Git als zentrale Quelle für Konfigurationen und Deployments dient.
- Datenplattform-Architekturen
- Grundkonzepte für den Aufbau von Systemen zur Speicherung, Verarbeitung und Bereitstellung großer Datenmengen.
- Kappa-Architektur
- Datenarchitektur-Ansatz, der Datenverarbeitung hauptsächlich über Streaming-Pipelines durchführt statt separater Batch- und Streaming-Systeme.
- Medallion-Architektur
- Datenlake-Architektur mit drei Schichten (Bronze, Silber, Gold); strukturiert Daten vom rohen Zustand über bereinigt bis zu geschäftsreifer Form.
- Batch-Datenpipelines
- Automatisierte Prozesse zur Verarbeitung großer Datenmengen in zeitlich definierten Blöcken (Batches) statt in Echtzeit.
- Streaming-Datenpipelines
- Automatisierte Prozesse zur kontinuierlichen Verarbeitung von Datenströmen in Echtzeit oder nahezu Echtzeit.
- S3-kompatible Storage-Lösungen
- Speichersysteme, die dem Amazon-S3-Standard entsprechen; werden eingesetzt für flexible und skalierbare Datenspeicherung in der Cloud oder On-Premise.
- Datenkatalog-Integration
- Technische Anbindung eines Datenkatalogs (Verzeichnis von Datenquellen und deren Metadaten) in bestehende IT-Systeme. Ermöglicht zentrale Verwaltung und Auffindbarkeit von Daten.
- Datenversionierung
- Verwaltung verschiedener Versionen von Daten oder Datensätzen, um Änderungen nachzuverfolgbar zu machen und frühere Zustände wiederherstellen zu können.
Als IT-Freelancer automatisch auf Projekte wie dieses bewerben
Nexus ist die KI-gestützte Plattform für IT-Freelancer, die täglich neue Projektausschreibungen analysiert und passgenaue Bewerbungstexte generiert – vollautomatisch, in Sekunden. Kein manuelles Schreiben mehr: Nexus liest die Ausschreibung, erkennt die gefragten Skills und erstellt einen individuellen Bewerbungstext, den du per Klick versendest.
- ✓ Projektausschreibungen direkt von Anbietern aus dem DACH-Raum
- ✓ KI-Bewerbungstext in unter 30 Sekunden – individuell auf jedes Projekt zugeschnitten
- ✓ Automatischer Versand per E-Mail + Anlage in Pipedrive
- ✓ Kostenlos starten – keine Kreditkarte erforderlich
Häufige Fragen zu Nexus
- Was ist Nexus und für wen ist es geeignet?
- Nexus richtet sich an selbstständige IT-Freelancer, die regelmäßig auf Projektausschreibungen antworten. Die Plattform automatisiert den gesamten Bewerbungsprozess – von der Analyse der Ausschreibung bis zum Versand der Bewerbung.
- Wie schreibt Nexus den Bewerbungstext?
- Nexus analysiert die Projektbeschreibung mit Claude (Anthropic) und gleicht die Anforderungen mit deinem hinterlegten Profil ab. Der generierte Text ist individuell, professionell und direkt versendbar – du kannst ihn vor dem Absenden noch anpassen.
- Welche Projektplattformen werden unterstützt?
- Nexus erhält Projekte direkt von Projektanbietern aus dem DACH-Raum – neue Ausschreibungen erscheinen automatisch in deiner Pipeline, ohne dass du Plattformen manuell durchsuchen musst.
- Kostet Nexus etwas?
- Der Einstieg ist dauerhaft kostenlos. Für professionelle Nutzung mit erweiterten Funktionen gibt es kostenpflichtige Pläne – ohne versteckte Kosten oder automatische Verlängerung.
Passende Freelancer
Profile die zu den Skills dieses Projekts passen
Enterprise Architect und AI Platform Strategist mit über 25 Jahren Erfahrung in der Entwicklung, Architektur und Skalierung komplexer Softwareplattformen sowie der Integration moderner AI-Technologien in Enterprise-Umgebungen.
- Senior Backend Developer68 €/h
20+ Jahre Java, 15+ Jahre PHP, 10+ Jahre Frontend – Senior Fullstack-Entwickler mit umfassender Expertise in modernen Web- und Cloud-Technologien.
AI Automation Engineer mit Fokus auf agentische Workflows, LLM-Integration, Fullstack-Entwicklung und intelligente Prozessautomatisierung.
Nie wieder Bewerbungen schreiben.
Nexus matcht deine Skills und schreibt Bewerbungen automatisch.
Kostenlos registrieren →Keine Kreditkarte erforderlich
Kostenloser CV-Check
Wie gut passt dein Kubernetes-Profil zum Markt?
- ✓ Market Fit gegen 765 Kubernetes-Ausschreibungen
- ✓ Welche Skills dir fehlen und was sie bringen
- ✓ Dein Stundensatz im Vergleich
Kostenlos · anonym gespeichert · von FreelancerJury
Marktgeschwindigkeit
Projekte dieser Skills werden nach durchschnittlich 9 Tagen geschlossen.
Stundensatz vs. Markt
Kein Stundensatz für dieses Projekt hinterlegt.
Ø 98 €/h (für diese Skills)
Tipp
Zeiterfassung & Projektverwaltung
Projekte, Stunden und Rechnungen in einer App. Flow ist die schlanke Lösung für IT-Freelancer und Agenturen – kostenlos starten.
Flow ausprobierenÄhnliche Projekte
- Customer Data Platform Specialist with Zeotap
- Data Engineer mit Python Kenntnissen (m/w/d)
- Sr. Data Engineer
- BI-/MicroStrategy-Berater (m/w/d)
- Data Scientist Produktion (m/w/d)
- Senior Data Analyst/Architect – MS Fabric & Power BI (m/w/d)
- Senior Data Engineer/ DBT Experte mit Zertifikat (m/w/d)
- Expert - Python and Dataiku (m/f/d)
- Oracle Datenbankentwickler (Migration Host 4.0)(abgelaufen)
- Senior Data Engineer / BI Architect – Microsoft Fabric, Power BI, dbt & Snowflake(abgelaufen)
Tipp
Konferenzraum in Hamburg
Für das nächste Kunden- oder Teammeeting in Hamburg: vollausgestattet mit Beamer, Whiteboard und Videokonferenz – ab 49 €/h, direkt am Gänsemarkt.
Konferenzraum mieten