verwirrt über den Vorteil von MongoDB Gridfs

Question

MongoDB Gridfs sagt der große Vorteil ist, dass große Datei in Stücke aufgeteilt, und dann müssen Sie nicht die gesamte Datei in den Speicher laden, wenn Sie nur einen Teil der Datei sehen wollen. Aber meine Verwirrung ist, dass, obwohl ich eine große Datei von der lokalen Festplatte öffne, ich einfach skip() API verwenden kann, um nur einen Teil der Datei zu laden, die ich wollte. Ich muss nicht die gesamte Datei laden. Wie kommt es, dass MongoDB sagt, dass das der Vorteil ist?

Answer 1

Auch wenn die Methode cursor.skip() nicht die gesamte Datei zurückgibt, muss sie in den Speicher geladen werden. Es erfordert, dass der Server vom Anfang der Auflistung oder des Index ausgeht, um die Position "Offset" oder "Skip" zu erhalten, bevor mit der Rückgabe der Ergebnisse begonnen wird (wirkt sich nicht sehr auf die Größe der Sammlung aus). Mit zunehmendem Offset wird cursor.skip() langsamer und CPU-intensiver. Bei größeren Sammlungen kann cursor.skip() IO gebunden werden.

Anstatt jedoch eine Datei in einem einzelnen Dokument zu speichern, teilt GridFS die Datei in Teile oder Chunks auf und speichert jeden Chunk als separates Dokument. So ermöglicht der Benutzer den Zugriff auf Informationen aus beliebigen Abschnitten von Dateien, z. B. "überspringen" in der Mitte der Datei (mit ID oder Dateiname) ohne CPU-intensiv.

Offizielle Dokumentationen: 1. Skip 2. GridFS.

Update:

Worüber Peter Brittain vorschlägt:

Es gibt viele Dinge zu berücksichtigen (Infrastruktur, vorausgesetzt Nutzungsstatistiken, die Dateigröße etc.), während man zwischen Dateisystem und GridFS wählen.

Zum Beispiel: Wenn Sie Millionen von Dateien haben, GridFS zu Griff neigt es besser, auch müssen Sie die Dateisystemeinschränkungen wie die maximale Anzahl von Dateien/Verzeichnis usw.

Vielleicht möchten Sie prüfen, betrachten Durch diesen Artikel gehen: Why use GridFS over ordinary Filesystem Storage?