Data Engineering
Die Herausforderung
Das Team der TIQ Solutions entwickelt eine webbasierte Graphdatenapplikation zur Exploration und Analyse von großen Datenmengen. Das Entwicklungsziel ist neben der Visualisierung der Graphen auch die Möglichkeit der Selektion des Graphen durch Operationen, wie Filterung, Gruppierung, Aggregation oder Sampling.
- Anwendungsfall
FuE-Projekt
Visuelle Analyse sehr großer Graphdaten
- Technologie
- Gradoop
- Flink
- Websocket
- Angular
- WebGL
Der Lösungsweg
- Evaluierung erweiterbarer Visualisierungstechnologien
- Realisierung einer Schnittstelle zwischen Graphdarstellung und verteiltem Verarbeitungsframework
- Entwicklung von Filter- und Pruning-Mechanismen innerhalb des Web-Servers
Das Ergebnis
- Parallelisierte Graphverarbeitung
- Erkennen von Mustern in Graphen und deren Aggregation
- intuitive, grafische Bedienoberfläche
- Layouting von Graphen (Client- and Backend-seitig)
- Nutzen der Gradoop-Infrastruktur (parallelisierte Verarbeitung, Advanced Analytics Operatoren)
- Self-Service BI durch eigenständiges Erstellen von fachlich getriebenen Sichten auf Graphen