Über uns
Herzlich Willkommen bei der Power Platform User Group Cologne,
wir wollen euch hier eine Austauschplattform rund um die Microsoft Produkte
- Power Apps
- Power Automate
- Power BI
- Power Virtual Agents
- Power Pages
bieten. Für alle Interessierten, Experten und die, die es werden wollen bieten wir Möglichkeiten zum regelmäßigen Austausch, vernetzen und lernen.
Bei Fragen nutzt gerne unser Feedback Formular oder wendet euch an Philipp Lenz oder Marvin Bangert über LinkedIn.
-----------------------------------------
Welcome to the Power Platform User Group Cologne,
we want to offer you an exchange platform for everything to do with Microsoft products:
- Power Apps
- Power Automate
- Power BI
- Power Virtual Agents
- Power Pages
- Fabric
For all interested, experts and those who want to become one, we offer opportunities for regular exchange, networking, and learning.
If you have any questions, please use our feedback form or contact Philipp Lenz or Marvin Bangert via LinkedIn.
Kommende Veranstaltungen
1
Stop copy-pasting your pipelines – Metadata-Driven Orchestration in der Praxis
·OnlineOnlineEine Lakehouse-Plattform startet mit einem ERP-System. Über die Jahre kommen neun weitere Quellsysteme dazu und jedes Mal kopiert man die Pipeline-Dateien und passt sie an. Funktioniert. Bis man überall Lineage-Spalten braucht. Oder Multithreading. Dann heißt ein Feature plötzlich zehn Änderungen in zehn Dateien, und irgendwann reicht’s.
In diesem Deep Dive zeige ich, wie ich genau diese Plattform umgebaut habe: Pipelines werden in YAML beschrieben, ein generischer Executor übernimmt Parallelisierung, Retries und Failure Handling, und eine neue Quelle ist eine Konfigurationsänderung statt einer Kopie. Wir gehen gemeinsam durch das YAML-Schema, das Lakehouse-Layout, das Logging und die Entscheidungen dahinter: was sich bewährt hat, was nicht, und was ich heute anders machen würde. Dazu eine Live-Demo, in der eine neue Quelle in wenigen Minuten angebunden wird.
Die Konzepte sind plattformunabhängig, die Beispiele kommen aus Microsoft Fabric und Databricks. Den Code gibt’s als Open-Source-Paket (pipetree). Am Ende bleibt Zeit für Fragen und Diskussion, bringt gern eure eigenen Orchestrierungs-Schmerzen mit.David ist Azure Cloud Architect bei glueckkanja. Er baut und betreibt Azure-Infrastruktur für Kunden und berät über den gesamten Stack der Datenplattform, von der Anbindung der Quellsysteme über Architektur und Modellierung bis zum Einsatz von AI auf diesen Daten. Dahinter stecken rund sieben Jahre Data Warehousing, BI und inzwischen vor allem Lakehouses auf Fabric und Databricks. Das Thema des Vortrags kommt aus einem echten Projekt: eine Plattform, die auf zehn Quellsysteme gewachsen war, indem man Dateien kopiert hat, bis das nicht mehr ging. Was beim Umbau entstanden ist, hat er als Open-Source-Paket (pipetree) veröffentlicht und schreibt darüber in seinem Blog „Data Dave”.
11 Teilnehmer
Vergangene Veranstaltungen
94
