Ich las auf einem Artikel mit dem Titel "Hands-on Cassandra", dass Tokyo Cabinet ist nicht gut für große Datenmengen. Warum? Wie viele Bytes muss TC speichern, bevor es schlecht funktioniert? Ist es möglich, einen angenäherten Wert zu bestimmen?Was ist die maximale Größe, die das Tokyo Cabinet gut funktioniert?
Basierend auf this article gibt es eine bestätigte Leistungsverschlechterung nach 500 GB.
Basierend auf diesem großen Vergleich von NoSQL-Datenbanken beginnen die Probleme in TC bei> 20 mm Zeilen.
Einer der möglichen Gründe für die Größenabhängigkeit ist die Tatsache, dass TC mit Hilfe von Hashes implementiert wird, und irgendwann kommt es zu Hash-Schlüssel-Kollisionen, die die Performance ruinieren. Standardmäßig ist der Schlüsselbereich nicht so groß wie möglich (Sie müssen den Parameter "bnum" anpassen - Anzahl der Elemente des Bucket-Arrays)
Basierend auf verschiedenen Vergleichen scheint MongoDB der empfohlene Ansatz zu sein für große Datensätze.