Der Klient
Die Encavis AG ist ein führender, börsennotierter Betreiber von Solarparks und Onshore-Windkraftanlagen in Europa.
Die Herausforderung
Kontinuierliche, verzögerungsfreie Erfassung, Speicherung und Auswertung hochfrequenter IoT-Sensordaten zahlreicher europäischer Erzeugungsanlagen.
Unsere Lösung
-
IoT-Data-Lakehouse
Aufbau einer hochmodernen, gemischten Data-Lakehouse-Architektur unter Nutzung von Snowflake zur Erfassung strukturierter und unstrukturierter Zeitreihendaten.
-
Echtzeit-Ingestion
Implementierung kontinuierlicher Datenströme mittels Snowpipe direkt in die Datenplattform.
-
Multithreading-Pipelines
Entwicklung maßgeschneiderter Ingestions-Skripte in Python unter Nutzung von Prefect und dbt zur performanten Orchestrierung paralleler Datenprozesse.
Ergebnisse
Die messbaren Ergebnisse
- Optimierung
- Erhebliche Performance-Steigerung in der Verarbeitung komplexer, zeitkritischer Sensordaten durch Multithreading-Datenverarbeitung.
- Entscheidungsfähigkeit
- Die Schaffung stabiler Echtzeit-Datenströme ermöglicht dem Betreiber die fehlerfreie Durchführung direkter Ad-hoc-Analysen und Ertragsüberwachungen.