Data & AI Engineer (Remote)
🏛 Ausgeschrieben von protipFür ein innovatives Remote-Projekt suchen wir einen erfahrenen Data & AI Engineer, der datengetriebene KI-Lösungen von der Entwicklung bis in den produktiven Betrieb umsetzt.
In dieser Rolle entwickeln Sie robuste Data-Lakehouse-Architekturen und Feature Stores für einen führenden Omnichannel-Händler. Sie konzipieren und implementieren skalierbare ETL/ELT-Pipelines (z. B. Medallion-Architektur) zur Integration von E-Commerce-, ERP- und Store-Daten. Ein Schwerpunkt liegt auf der Operationalisierung von Machine-Learning-Modellen mit modernem MLOps – von Training und Deployment bis zu Monitoring und Retraining.
Darüber hinaus entwickeln Sie innovative Agentic-AI- und RAG-Lösungen zur Automatisierung zentraler Geschäftsprozesse. Sie stellen Data Products mit hohen Qualitätsstandards bereit und automatisieren die Infrastruktur durch CI/CD und Infrastructure-as-Code.
Gefordert werden mehrjährige Praxiserfahrung im Data Engineering, nachgewiesene Expertise im produktiven Betrieb von ML-Modellen sowie fundierte Programmierkenntnisse in Python und SQL. Erfahrung mit Spark/PySpark, skalierbaren Systemarchitekturen und APIs ist essentiell. Fließende Deutsch- und Englischkenntnisse sind erforderlich.
Vorteilhaft sind praktische Erfahrungen mit Microsoft Azure (Azure OpenAI, AI Search, Data Factory) oder Databricks (Delta Lake, Unity Catalog, MLflow) sowie Kenntnisse in Agentic-AI-Entwicklung (LLM-Orchestrierung) und E-Commerce-Branchenerfahrung.
Das Projekt startet am 01.11.2026 mit einer Laufzeit von 5 Monaten (Vollzeit, bis zu 100% remote). Verhandlungen in Deutsch und Englisch erforderlich.
Skills erklärt
- Data Engineering
- Data Engineering umfasst den Aufbau und die Verwaltung von Dateninfrastrukturen, Pipelines und Systemen zur Verarbeitung großer Datenmengen für Analysen und Anwendungen.
- ETL/ELT
- Datenverarbeitungsprozesse zum Extrahieren von Daten aus Quellen, Transformieren in das gewünschte Format und Laden in Zielsysteme (ETL) oder Laden vor der Transformation (ELT).
- Data Lakes
- Zentrale Speichersysteme für große Mengen unstrukturierter und strukturierter Daten; werden für Datenanalyse und Business Intelligence genutzt.
- Data Warehouses
- Zentrale Datenbanksysteme, die große Mengen strukturierter Daten aus verschiedenen Quellen sammeln und für Analysen und Berichte bereitstellen.
- Machine Learning
- Teilgebiet der künstlichen Intelligenz, bei dem Systeme aus Daten lernen und Muster erkennen, um Vorhersagen zu treffen oder Entscheidungen zu automatisieren.
- MLOps
- Praktiken und Tools zur Verwaltung von Machine-Learning-Modellen in Produktion, ähnlich wie DevOps für klassische Software – umfasst Training, Deployment, Monitoring und Wartung von KI-Systemen.
- Python
- Universelle Programmiersprache für Webentwicklung, Datenanalyse, Automatisierung und künstliche Intelligenz.
- SQL
- Programmiersprache zur Abfrage und Verwaltung von Daten in Datenbanken.
- Spark
- Apache Spark ist ein Framework zur verteilten Datenverarbeitung großer Datenmengen; wird verwendet um Daten schnell zu analysieren und zu transformieren.
- PySpark
- Ein Python-Framework zur verteilten Datenverarbeitung großer Datenmengen auf Clustern, basierend auf Apache Spark.
- CI/CD
- Automatisierte Prozesse für kontinuierliche Integration von Code-Änderungen und kontinuierliche Bereitstellung von Software-Updates.
- IaC
- Infrastructure as Code - Verwaltung von IT-Infrastruktur durch Code und Automatisierung statt manueller Konfiguration.
- APIs
- Schnittstellen, die es verschiedenen Softwareanwendungen ermöglichen, miteinander zu kommunizieren und Daten auszutauschen.
- Systemarchitekturen
- Entwurf und Struktur von IT-Systemen, einschließlich der Anordnung von Komponenten, Schichten und deren Zusammenspiel.
- Microsoft Azure
- Cloud-Plattform von Microsoft für das Hosten von Anwendungen, Speicherung von Daten und IT-Infrastruktur über das Internet.
- Data Factory
- Azure-Service zur Orchestrierung und Automatisierung von Datenintegration und ETL-Prozessen (Datenverschiebung und -transformation).
- Databricks
- Plattform für Datenverarbeitung und Machine Learning basierend auf Apache Spark; wird für Big-Data-Analysen und kollaborative Datenarbeit eingesetzt.
- Delta Lake
- Open-Source-Speicherformat, das strukturierte Daten mit Transaktionsfähigkeit und Versionskontrolle verwaltet und häufig in Big-Data-Umgebungen eingesetzt wird.
- Unity Catalog
- Datenverwaltungs-Feature in der Databricks-Plattform zur zentralisierten Kontrolle von Daten-Assets und Zugriffsrechten.
- MLflow
- Open-Source-Framework zur Verwaltung des Machine-Learning-Lebenszyklus, einschließlich Experiment-Tracking und Modell-Deployment.
- Agentic AI
- Künstliche Intelligenz-Systeme, die eigenständig Aufgaben planen und ausführen können, ohne ständige menschliche Anleitung.
- LangChain
- Framework zur Entwicklung von Anwendungen mit großen Sprachmodellen (LLMs), das die Integration und Verkettung verschiedener KI-Komponenten vereinfacht.
- LangGraph
- Framework zur Orchestrierung von Workflows mit Large Language Models, das die Verwaltung von Agenten und deren Entscheidungspfaden ermöglicht.
- RAG
- Technik, bei der ein KI-Modell externe Datenquellen abfragt, um seine Antworten mit aktuellen oder spezifischen Informationen zu ergänzen.
Als IT-Freelancer automatisch auf Projekte wie dieses bewerben
Nexus ist die KI-gestützte Plattform für IT-Freelancer, die täglich neue Projektausschreibungen analysiert und passgenaue Bewerbungstexte generiert – vollautomatisch, in Sekunden. Kein manuelles Schreiben mehr: Nexus liest die Ausschreibung, erkennt die gefragten Skills und erstellt einen individuellen Bewerbungstext, den du per Klick versendest.
- ✓ Projektausschreibungen direkt von Anbietern aus dem DACH-Raum
- ✓ KI-Bewerbungstext in unter 30 Sekunden – individuell auf jedes Projekt zugeschnitten
- ✓ Automatischer Versand per E-Mail + Anlage in Pipedrive
- ✓ Kostenlos starten – keine Kreditkarte erforderlich
Häufige Fragen zu Nexus
- Was ist Nexus und für wen ist es geeignet?
- Nexus richtet sich an selbstständige IT-Freelancer, die regelmäßig auf Projektausschreibungen antworten. Die Plattform automatisiert den gesamten Bewerbungsprozess – von der Analyse der Ausschreibung bis zum Versand der Bewerbung.
- Wie schreibt Nexus den Bewerbungstext?
- Nexus analysiert die Projektbeschreibung mit Claude (Anthropic) und gleicht die Anforderungen mit deinem hinterlegten Profil ab. Der generierte Text ist individuell, professionell und direkt versendbar – du kannst ihn vor dem Absenden noch anpassen.
- Welche Projektplattformen werden unterstützt?
- Nexus erhält Projekte direkt von Projektanbietern aus dem DACH-Raum – neue Ausschreibungen erscheinen automatisch in deiner Pipeline, ohne dass du Plattformen manuell durchsuchen musst.
- Kostet Nexus etwas?
- Der Einstieg ist dauerhaft kostenlos. Für professionelle Nutzung mit erweiterten Funktionen gibt es kostenpflichtige Pläne – ohne versteckte Kosten oder automatische Verlängerung.
Nie wieder Bewerbungen schreiben.
Nexus matcht deine Skills und schreibt Bewerbungen automatisch.
Kostenlos registrieren →Keine Kreditkarte erforderlich
Marktgeschwindigkeit
Projekte dieser Skills werden nach durchschnittlich 3,3 Tagen geschlossen.
Stundensatz vs. Markt
Kein Stundensatz für dieses Projekt hinterlegt.
Ø 94 €/h (für diese Skills)
Tipp
Zeiterfassung & Projektverwaltung
Projekte, Stunden und Rechnungen in einer App. Flow ist die schlanke Lösung für IT-Freelancer und Agenturen – kostenlos starten.
Flow ausprobierenÄhnliche Projekte
- Robotics Architect, Perception
- Robotics Architect, Perception
- Technical Lead, AI Compiler
- Technical Product Manager
- VP of Machine Learning Research
- Lead ML Engineer
- Applied AI Developer
- Product Owner (m/w/d) Datenanalyse und KI
- KI-basierte Optimierungsberatung und Implementierung
- AI/LLM-Spezialist für Prozessautomatisierung und AI-Lösungen
- Data AI Engineer mit Kenntnissen in Python und SQL (m/w/d)
- Technical Lead, Machine Learning
- Solution Architekt Senior (GenAI, AI, Data-Architekturen) (m/w/d)
- AI & Data Engineer
- KI Trainer (m/w/d)
Tipp
Konferenzraum in Hamburg
Für das nächste Kunden- oder Teammeeting in Hamburg: vollausgestattet mit Beamer, Whiteboard und Videokonferenz – ab 49 €/h, direkt am Gänsemarkt.
Konferenzraum mieten