Fabric Schulung – Lakehouse-Architektur und Datenintegration
🏛 Ausgeschrieben von Pulsar Computer Consulting GmbHGesucht wird eine umfassende Schulung zu Microsoft Fabric mit Fokus auf moderne Datenarchitektur und praktische Implementierung. Die Schulung richtet sich an eine Person und wird bundesweit remote durchgeführt.
Inhalte der Schulung:
Lakehouse-Architektur & Storage: Tiefgreifende Einführung in OneLake, Vergleich von Datenformaten (Parquet, Avro, Delta Lake, Apache Iceberg) und deren Anwendung in Fabric. Behandlung weiterer Formate wie JSON, XML und GeoJSON im Fabric-Kontext.
Datenmodellierung: Einführung in Data Vault-Konzepte (Hubs, Links, Satelliten) mit praktischer Anwendung in Fabric. Diskussion von Anwendungsfällen und Best Practices.
Batch vs. Streaming: Konzeptioneller Vergleich und Entscheidungskriterien. Streaming-Lösungen in Fabric mit Eventhouses und KQL-Datenbanken. Integration von Azure Event Hubs für Echtzeit-Ingestion. Praktischer Aufbau einer End-to-End-Pipeline.
Lifecycle & Data Management: Versionierung von Daten und Schemas (Delta Time Travel, Schema Evolution). Aufbau von Dev/Test/Prod-Umgebungen mit Deployment Pipelines. Testing-Strategien für Datenpipelines.
Infrastruktur & Betrieb: Infrastructure-as-Code mit Terraform, Kostenmanagement und Performance-Optimierung von Spark-Jobs, Sicherheitskonzepte (Workspace-Rollen, Permissions), Monitoring mit Azure Monitor und Log Analytics.
Die Schulung ist stark praxisorientiert mit umfangreichen Hands-On-Übungen. Dauer: 3–5 Tage, kurzfristiger Start möglich.
Anforderungen
- Rollenfamilie
- Beratung
- Sprachen
- Deutsch (gut)
Rahmenbedingungen
- Gesuchte Personen
- 1
Projekt
- Vermittlung
- Über Vermittler
Skills erklärt
- Microsoft Fabric
- Integrierte Datenplattform von Microsoft für Analytics, Data Engineering und Business Intelligence; vereint verschiedene Datentools in einer Umgebung.
- Lakehouse-Architektur
- Hybrid-Ansatz, der Datenbank- und Data-Lake-Konzepte kombiniert, um strukturierte und unstrukturierte Daten zentral zu speichern und zu analysieren.
- Delta Lake
- Open-Source-Speicherformat, das strukturierte Daten mit Transaktionsfähigkeit und Versionskontrolle verwaltet und häufig in Big-Data-Umgebungen eingesetzt wird.
- Parquet
- Spaltenorientiertes Dateiformat für effiziente Speicherung und Verarbeitung großer Datenmengen in Big-Data-Systemen.
- Avro
- Serialisierungsformat und RPC-Framework von Apache zur effizienten Datenspeicherung und Übertragung zwischen Systemen.
- Apache Iceberg
- Open-Source-Tabellenformat für große Datenmengen, das Versionskontrolle und effiziente Abfragen ermöglicht und in Data-Lakes eingesetzt wird.
- JSON
- JSON ist ein textbasiertes Datenformat zur strukturierten Speicherung und zum Austausch von Daten zwischen Anwendungen, das leicht lesbar und weit verbreitet ist.
- XML
- Textbasiertes Datenformat zur strukturierten Speicherung und zum Austausch von Informationen zwischen Systemen.
- GeoJSON
- Datenformat zur Darstellung geografischer Strukturen (Punkte, Linien, Flächen) in JSON-Notation für Kartendienste und Geodaten.
- Data Vault
- Datenmodellierungsmethode zur strukturierten Speicherung von Rohdaten in Data Warehouses mit Fokus auf Flexibilität und Nachverfolgbarkeit.
- Dimensionales Modellieren
- Methode zur strukturierten Organisation von Daten in Data Warehouses, bei der Fakten und Dimensionen getrennt werden, um Abfragen zu beschleunigen.
- Batch Processing
- Verarbeitung großer Datenmengen in zeitgesteuerten Blöcken ohne direkte Benutzerinteraktion; wird für regelmäßige Massenoperationen wie Abrechnungen oder Datenimporte eingesetzt.
- Streaming
- Technologie zur kontinuierlichen Übertragung von Audio- oder Videodaten über das Internet, ohne dass die gesamte Datei vorher heruntergeladen werden muss.
- Event Hubs
- Plattform-Service (z.B. Azure Event Hubs) zur Erfassung und Verarbeitung großer Mengen von Ereignisdaten in Echtzeit.
- KQL
- Kusto Query Language; eine Abfragesprache zur Suche und Analyse von großen Datenmengen, insbesondere in Microsoft-Produkten wie Azure Monitor.
- Azure Event Hubs
- Cloud-Service von Microsoft zur Erfassung, Verarbeitung und Weiterleitung großer Mengen von Ereignisdaten in Echtzeit.
- Pub/Sub
- Messaging-Muster, bei dem Produzenten Nachrichten veröffentlichen und Konsumenten diese abonnieren, ohne direkt miteinander verbunden zu sein.
- Datenpipelines
- Automatisierte Prozesse zur Erfassung, Verarbeitung, Transformation und Bereitstellung von Daten zwischen verschiedenen Systemen.
- Schema evolution
- Verwaltung von Änderungen an der Struktur von Datenbanken oder Datenformaten, ohne dass bestehende Anwendungen oder Daten beschädigt werden.
- Delta Time Travel
- Funktion in Datenbanksystemen, die es ermöglicht, Datenänderungen nachzuverfolgen und auf frühere Versionen von Datensätzen zuzugreifen.
- Dev/Test/Prod Umgebungen
- Separate IT-Infrastrukturen für Entwicklung, Testen und produktiven Betrieb, um Änderungen zu isolieren und Stabilität zu gewährleisten.
- Deployment-Pipelines
- Automatisierte Prozessabläufe zur Bereitstellung von Softwareanwendungen von der Entwicklung bis zur Produktionsumgebung.
- Unit Testing
- Testmethode, bei der einzelne Komponenten oder Funktionen eines Programms isoliert getestet werden, um Fehler früh zu erkennen.
- Integration Testing
- Testverfahren, das die Zusammenarbeit mehrerer Softwarekomponenten oder Systeme überprüft.
- Terraform
- Infrastructure-as-Code-Tool zur automatisierten Bereitstellung und Verwaltung von Cloud-Infrastruktur über Konfigurationsdateien.
- Azure Resource Manager
- Verwaltungs- und Orchestrierungsdienst von Microsoft Azure zur Bereitstellung und Verwaltung von Cloud-Ressourcen.
- Fabric Capacities
- Reservierte Rechenressourcen in Microsoft Fabric, die Speicher und Verarbeitungsleistung für Analytics-Workloads bereitstellen.
- CU-Monitoring
- Überwachungssystem zur Kontrolle von Compute Units oder ähnlichen Ressourcenmetriken in Cloud- oder IT-Systemen.
- Spark
- Apache Spark ist ein Framework zur verteilten Datenverarbeitung großer Datenmengen; wird verwendet um Daten schnell zu analysieren und zu transformieren.
- Workspace-Rollen
- Berechtigungssystem, das verschiedenen Nutzern unterschiedliche Zugriffsrechte und Funktionen in gemeinsamen digitalen Arbeitsbereichen zuweist.
- Row-Level Security
- Sicherheitsmechanismus in Datenbanken, der Zugriff auf einzelne Datensätze basierend auf Benutzerrechten beschränkt; wird für Datenschutz und Zugriffskontrolle verwendet.
- OneSecurity
- Möglicherweise ein unternehmensinternes oder proprietäres Sicherheitsframework oder -plattform zur zentralisierten Verwaltung von Sicherheitsrichtlinien.
- Azure Monitor
- Überwachungsdienst der Microsoft-Cloud-Plattform Azure; wird zur Beobachtung von Systemleistung, Verfügbarkeit und Fehlerdiagnose eingesetzt.
- Log Analytics
- Analyse von Protokolldateien (Logs) aus Systemen und Anwendungen, um Fehler, Sicherheitsvorfälle oder Performance-Probleme zu identifizieren.
Als IT-Freelancer automatisch auf Projekte wie dieses bewerben
Nexus ist die KI-gestützte Plattform für IT-Freelancer, die täglich neue Projektausschreibungen analysiert und passgenaue Bewerbungstexte generiert – vollautomatisch, in Sekunden. Kein manuelles Schreiben mehr: Nexus liest die Ausschreibung, erkennt die gefragten Skills und erstellt einen individuellen Bewerbungstext, den du per Klick versendest.
- ✓ Projektausschreibungen direkt von Anbietern aus dem DACH-Raum
- ✓ KI-Bewerbungstext in unter 30 Sekunden – individuell auf jedes Projekt zugeschnitten
- ✓ Automatischer Versand per E-Mail + Anlage in Pipedrive
- ✓ Kostenlos starten – keine Kreditkarte erforderlich
Häufige Fragen zu Nexus
- Was ist Nexus und für wen ist es geeignet?
- Nexus richtet sich an selbstständige IT-Freelancer, die regelmäßig auf Projektausschreibungen antworten. Die Plattform automatisiert den gesamten Bewerbungsprozess – von der Analyse der Ausschreibung bis zum Versand der Bewerbung.
- Wie schreibt Nexus den Bewerbungstext?
- Nexus analysiert die Projektbeschreibung mit Claude (Anthropic) und gleicht die Anforderungen mit deinem hinterlegten Profil ab. Der generierte Text ist individuell, professionell und direkt versendbar – du kannst ihn vor dem Absenden noch anpassen.
- Welche Projektplattformen werden unterstützt?
- Nexus erhält Projekte direkt von Projektanbietern aus dem DACH-Raum – neue Ausschreibungen erscheinen automatisch in deiner Pipeline, ohne dass du Plattformen manuell durchsuchen musst.
- Kostet Nexus etwas?
- Der Einstieg ist dauerhaft kostenlos. Für professionelle Nutzung mit erweiterten Funktionen gibt es kostenpflichtige Pläne – ohne versteckte Kosten oder automatische Verlängerung.
Nie wieder Bewerbungen schreiben.
Nexus matcht deine Skills und schreibt Bewerbungen automatisch.
Kostenlos registrieren →Keine Kreditkarte erforderlich
Kostenloser CV-Check
Wie gut passt dein JSON-Profil zum Markt?
- ✓ Market Fit gegen 115 JSON-Ausschreibungen
- ✓ Welche Skills dir fehlen und was sie bringen
- ✓ Dein Stundensatz im Vergleich
Kostenlos · anonym gespeichert · von FreelancerJury
Marktgeschwindigkeit
Projekte dieser Skills werden nach durchschnittlich 7,8 Tagen geschlossen.
Stundensatz vs. Markt
Kein Stundensatz für dieses Projekt hinterlegt.
Ø 311 €/h (Gesamtmarkt)
Tipp
Zeiterfassung & Projektverwaltung
Projekte, Stunden und Rechnungen in einer App. Flow ist die schlanke Lösung für IT-Freelancer und Agenturen – kostenlos starten.
Flow ausprobierenÄhnliche Projekte
- Softwareentwickler (m/w/d) für GENESIS - Weiterentwicklung und neuer Webclient
- Technical Product Owner (m/w/d) Cloud Services
- Senior .NET Architect – WPF, Blazor, RabbitMQ & Azure DevOps
- Fullstack / App Entwickler (m/w/d) - für ein Projekt in der App- und Web-Entwicklung
- Senior Java Backend Engineer – Spring Boot (m/w/d)
- Softwareentwickler (m/w/d) Industrielle KI – C# & Python
- Senior Software Engineer Smart Factory IoT/KI (m/w/d)
- Senior Mobile Engineer (m/w/d)
- Runtime Software Engineer for AI Accelerator Hardware(abgelaufen)
- Backend Entwickler Java / Spring Boot (m/w/d)(abgelaufen)
Tipp
Konferenzraum in Hamburg
Für das nächste Kunden- oder Teammeeting in Hamburg: vollausgestattet mit Beamer, Whiteboard und Videokonferenz – ab 49 €/h, direkt am Gänsemarkt.
Konferenzraum mieten