Der Klient
Die dm-drogerie markt GmbH ist ein führender europäischer Drogerie-Einzelhändler. Das Projekt wurde mit der Technologie-Tochtergesellschaft dmTECH GmbH realisiert.
Die Herausforderung
Automatisierte Erfassung, Bereinigung und Bereitstellung komplexer Projekt- und ERP-Ressourcendaten für das unternehmensweite Berichtswesen.
Unsere Lösung
-
Data Warehouse
Modellierung eines skalierbaren Snowflake Data Warehouses auf der Google Cloud Platform (GCP) nach modernen Medallion-Architekturprinzipien.
-
Datenintegration & Virtualisierung
Implementierung einer hocheffizienten Schnittstelle zur Datenquelle Planisware mittels Denodo Virtualisierungsebenen.
-
ETL-Framework
Entwicklung robuster Datenpipelines mit Apache Airflow und Snowpark Python (SCD- und CDC-Logiken).
-
CI/CD
Aufbau einer modernen CI/CD-Infrastruktur auf GitLab- und Terraform-Basis zur automatisierten Bereitstellung auf Kubernetes-Clustern (AKS).
Ergebnisse
Die messbaren Ergebnisse
- Ladezeiten
- Eine dramatische Verkürzung der ETL-Ladezeiten von ehemals 160 Minuten auf nur noch 10 Minuten durch gezieltes Pipeline-Tuning.
- Reporting
- Bereitstellung von Near-Real-Time-Daten für MicroStrategy-Berichte.
- Breitenwirkung
- Die geschaffene Datenarchitektur dient als zuverlässige Grundlage für strategische und operative Entscheidungen in über 500 dm-Filialen.