Daten eine große Menge an Daten abbauen

Question

Ich speichere eine große Menge von Reporting-Elementen in einer MySQL-Datenbank. Diese Elemente werden auf einfache Weise gespeichert:

KindOfEvent;FromCountry;FromGroupOfUser;FromUser;CreationDate 

Alle diese Berichtselemente sollten die Anzeige von Diagrammen aus verschiedenen Blickwinkeln ermöglichen. Ich habe versucht, SQL-Anfragen dafür zu verwenden, aber es ist sehr langsam für Benutzer. Da dieses Diagramm von nicht technischen Benutzern verwendet wird, benötige ich ein Tool, um das Ergebnis vorzuarbeiten. Ich bin sehr neu in all diesen Data-Mining-, Reporting- und Olap-Konzepten. Wenn Sie einen pragmatischen Ansatz kennen, der nicht so zeitaufwendig ist, oder ein Werkzeug dafür, würde es helfen!

Answer 1

Sie könnten OLAP cubes auf Ihre MySQL-Daten einrichten. Das mehrdimensionale Modell unterstützt Ihre Benutzer bei der Navigation und Analyse der Daten über Excel- oder Web-Dashboards. Eine Sache, die spezifisch für icCube ist, ist die Fähigkeit, jede Javascript-Diagrammbibliothek zu integrieren und das Dashboard in Ihre eigenen Seiten einzubetten.

Answer 2

Ich bin kein DB-Experte, aber wenn Sie Grafiken verarbeiten möchten, können Sie Neo4J (Java Graph Processing Framework) oder SNAP (C++ Graph Processing Framework) oder Mitarbeiter-Cloud Computing verwenden, wenn dies möglich ist. Ich würde entweder Hadoop (MapReduce) oder Giraph (Cloud Graph Processing) empfehlen. Für die Anzeige von Graphen können Sie die Werkzeuge verwenden, die Ihnen zur Verfügung stehen. Natürlich hängt die "beste" Technologie von der Datengröße ab. Wenn keines der oben genannten Probleme auftritt, versuchen Sie, etwas zu finden, das auf der Wiki-Seite funktioniert: http://en.wikipedia.org/wiki/Graph_database

InforGrid (http://infogrid.org/trac/) sieht aus wie Sie möglicherweise.

Answer 3

Ich bin nicht vertraut mit DB, aber ich denke MySQL ist weit mehr als genug für Ihre Probleme. Gut gestaltete Index oder Transaktion wird den Abfrageprozess beschleunigen.