Hat LevelDB eine maximale Länge für Schlüssel?

Question

Hat LevelDB ein Limit für die Schlüssellänge?

Ich möchte Daten mit URLs als Schlüssel speichern. so können diese URLs sehr sehr lang sein i.g. http://veryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryveryloooooooooooooooong-url.com

Answer 1

In LevelDB gibt es keine Schlüssellängenbeschränkung. Keys sind beliebige Byte-Arrays beliebiger Länge. Sie können eine lange URL verwenden, die Sie in Ihrer Frage angegeben haben.

Sie hier erwähnen, dass die Schlüssel sind Byte-Arrays ... https://code.google.com/p/leveldb/

Als Test eingefügt ich einige Dokumente mit Schlüsseln, die eine Million Zeichen lang waren. Es hat gut funktioniert.

Answer 2

Es gibt keine theoretische Begrenzung für die Schlüssellänge, aber die Datenbank ist möglicherweise nicht sehr effizient mit langen Schlüsseln und kurzen Datensätzen. Oben in den SST-Dateien befindet sich ein Index, der die Schlüssel und die Offsets in der Datei enthält. Die Schlüssel in diesen Indexblöcken sind binär zerhackt, um nach Zeilen zu suchen.

Nur ein Gedanke - Sie möchten vielleicht die URLs sanieren, bevor Sie sie als rohe Schlüssel verwenden. B. den Domänennamen und den Fall des Protokolls kanonisch machen, die Reihenfolge der Abfrageparameter kanonisieren usw.