Data Warehouse Entwickler – Data Warehouse Cloud Migration
DIE AUFGABE
Im Rahmen des 9-monatigen Projekts wurde die BI-Plattform erfolgreich nach Snowflake migriert.
Zu den Hauptaufgaben zählten die Anbindung der Datenquellen sowie die Modellierung des Core Data Warehouse (DWH) in Vaultspeed.
Das Projektmanagement sowie die Code-Versionierung wurden in Azure DevOps durchgeführt.
Des Weiteren wurde die Business-Logik implementiert und die Datenbereitstellung für die Frontends mithilfe von Matillion realisiert.
Die Ablaufsteuerung wurde durch die Erweiterung der generierten Flexible Management Components (FMCs) aus Vaultspeed mittels Apache Airflow umgesetzt.
DIE HERAUSFORDERUNGEN
Die Migration der BI-Plattform zu Snowflake war mit einigen Herausforderungen verbunden.
Die Anbindung verschiedener Datenquellen und die Modellierung des Core Data Warehouse in Vaultspeed erforderten eine sorgfältige Planung und präzise Implementierung. Es war von entscheidender Bedeutung, das Projektmanagement und die Code-Versionierung in Azure DevOps nahtlos in den gesamten Workflow zu integrieren, um eine effiziente Zusammenarbeit zu gewährleisten.
Die Implementierung der Business-Logik und die Datenbereitstellung für die Frontends mittels Matillion stellten eine komplexe Aufgabe dar, die eine enge Abstimmung mit den Fachabteilungen erforderte. Des Weiteren stellte die Erweiterung der generierten Flexible Management Components (FMCs) aus Vaultspeed durch Apache Airflow für die Ablaufsteuerung eine technische Herausforderung dar, die durch die Auswahl und Integration geeigneter Technologien gelöst wurde.
Die eingesetzten Technologien – Snowflake, Vaultspeed, Matillion, Apache Airflow und Azure DevOps – waren maßgeblich am Projekterfolg beteiligt.
IHR UNTERNEHMEN PLANT AUCH DIE MIGRATION EINES DATA WAREHOUSE IN DIE CLOUD?
Sie benötigen aber noch weiteres Know-How? Dann nehmen Sie Kontakt mit uns auf. Gerne beraten wir Sie und finden gemeinsam die passende Lösung für Ihre Herausforderungen bei der Entwicklung einer neuen Data Warehouse Automation Lösung.
Datenschutz ist uns wichtig. Ihre E-Mail wird nur für die Beantwortung Ihrer Anfrage genutzt. Weitere Informationen finden Sie in unserer Datenschutzerklärung.
