Wie verbessert man die XML-Ladezeit von PHP?

Question

Lassen Sie meinen Lurker-Status fallen, um endlich eine Frage zu stellen ...

Ich muss wissen, wie ich die Leistung eines PHP-Skripts verbessern kann, das seine Daten aus XML-Dateien bezieht.

Einige Hintergrundinformationen:

• Ich habe kartiert bereits den Engpass zu CPU - aber wollen die Leistung des Skript zu optimieren, bevor ein Hit auf dem Prozessor Kosten nehmen. Der CPU-aufwendigste Teil des Skripts ist das Laden von XML.

• Der Grund, warum ich XML zum Speichern von Objektdaten verwende, da die Daten über eine Flash-Oberfläche des Browsers zugänglich sein müssen und wir einen schnellen Benutzerzugriff in diesem Bereich bereitstellen möchten. Das Projekt befindet sich jedoch noch in einem frühen Stadium, und wenn Best Practice wäre, XML ganz aufzugeben, wäre das auch eine gute Antwort.

• Viele Daten: Derzeit für ungefähr 100k Objekte, wenn auch in der Regel kleine, plotten - und sie müssen ALLE mit vielleicht ein paar seltenen Ausnahmen in das Skript aufgenommen werden. Der Datensatz wird nur mit der Zeit wachsen.

• Häufige Läufe: Im Idealfall würden wir das Skript ~ 50k Mal pro Stunde ausführen; realistisch würden wir uns mit ~ 1k/h Läufen zufrieden geben. Dies, gekoppelt mit der Datengröße, macht eine Leistungsoptimierung absolut notwendig.

• Es wurde bereits ein Optimierungsschritt durchgeführt, bei dem mehrere Läufe mit denselben Daten durchgeführt werden, anstatt sie für jeden Lauf zu laden, aber es dauert immer noch zu lange. Die Läufe sollten im Allgemeinen "frische" Daten mit den von den Benutzern vorgenommenen Änderungen verwenden.

Answer 1

Nur um zu verdeutlichen: Sind die Daten, die Sie laden, aus XML-Dateien zur Verarbeitung in ihrem aktuellen Zustand und werden sie vor dem Senden an die Flash-Anwendung modifiziert?

Es sieht so aus, als wäre es besser, wenn Sie eine Datenbank verwenden, um Ihre Daten zu speichern und XML nach Bedarf auszugeben, anstatt es zuerst in XML zu lesen. Wenn das Erstellen der XML-Dateien langsam wird, können Sie die Dateien im Cache speichern, während sie generiert werden, um eine redundante Generierung derselben Datei zu vermeiden.

Answer 2

Wenn die XML relativ statisch bleibt, können Sie es als PHP-Array-Cache könnte, so etwas wie dieses:

<xml><foo>bar</foo></xml> 

in einer Datei als

<?php return array('foo' => 'bar'); 

zwischengespeichert wird, sollte es sein schneller für PHP, um einfach die Arrayed-Version des XML zu integrieren.

Answer 3

~ 1k/Stunde, 3600 Sekunden pro Stunde, mehr als 3 läuft eine zweite (geschweige denn die 50k/Stunde) ...

Es gibt viele Fragen. Einige davon sind:

• Muss Ihr PHP-Skript alle Datensätze der Datenquelle für jeden einzelnen Lauf lesen/verarbeiten? Wenn nicht, welche Art von Teilmenge benötigt es (~ Größe, Kriterien, ...)
• Gleiche Frage für die Flash-Anwendung + Wer sendet die Daten? Das PHP-Skript? "Direct" Anfrage für die vollständige, statische XML-Datei?
• Welche Operationen werden an der Datenquelle ausgeführt?
• Benötigen Sie eine Art Nebenläufigkeitsmechanismus?
• ...

Und nur weil Sie XML-Daten in den Flash-Kunden liefern wollen, dass es nicht unbedingt bedeuten, dass Sie XML-Daten auf dem Server gespeichert werden müssen. Wenn z.B. Die Clients brauchen nur eine winzige kleine Teilmenge der verfügbaren Datensätze, es ist wahrscheinlich viel schneller, die Daten nicht als XML zu speichern, sondern etwas, das eher für Geschwindigkeit und "Durchsuchbarkeit" geeignet ist und dann vielleicht die XML-Ausgabe der Untermenge on-the-fly erzeugt unterstützt durch Caching, abhängig davon, welche Daten der Client anfordert und wie/wie stark sich die Daten ändern.

edit: Angenommen, Sie benötigen wirklich den gesamten Datensatz und benötigen eine fortlaufende Simulation. Dann sollten Sie einen kontinuierlichen Prozess in Betracht ziehen, der das vollständige "Weltmodell" im Gedächtnis behält und mit diesem Modell bei jedem Lauf (Welt-Tick) arbeitet. Auf diese Weise müssten Sie die Daten nicht für jeden Tick laden. Aber ein solcher Prozess wird normalerweise in etwas anderem als PHP geschrieben.