Redis dequeue Rate 10x langsamer über das Netzwerk

Question

Ich war Enqueue testen und entschleunigen Rate von Redis über das Netzwerk, das 1Gbps LAN-Geschwindigkeit hat, und beide Maschinen hat 1Gbps Ethernet-Karte. Redis Version: 3.2.11

lpush 1L Elemente mit 1 Byte pro Element mit Python-Client. Die Auslagerung von Gegenständen mit Hilfe von rpop dauerte etwa 55 Sekunden über das Netzwerk, das nur 1800 Ausschnitte entfernt ist. Während die gleiche Operation innerhalb von 5 Sekunden abgeschlossen ist, entziehe ich mich von lokal, was ungefähr 20.000 Dequeues beträgt.

Enqueue-Raten sind fast der Dequeue-Rate.

Dies ist mit Office-Netzwerk getan, wenn nicht viel Verwendung gibt es. Das Gleiche gilt auch für Produktionsumgebungen!

Ein Rückgang von weniger als 3x über das Netzwerk wird akzeptiert. Etwa 10x sieht aus, als würde ich etwas falsch machen.

Bitte schlagen Sie vor, wenn ich Konfigurationsänderungen auf Server- oder Client-Seite vornehmen muss.

Vielen Dank im Voraus.

Answer 1

Redis ist generell I/O-gebunden, nicht CPU-gebunden. Es kann Netzwerkgrenzbandbreiten treffen. Angesichts der geringen Größe Ihrer Nachrichten kann der größte Teil der Bandbreite vom TCP-Overhead eingenommen werden.

Auf einem lokalen Computer sind Sie an die Speicherbandbreite gebunden, die viel schneller ist als Ihre 1-Gbit/s-Netzwerkbandbreite. Sie können den Netzwerkdurchsatz wahrscheinlich erhöhen, indem Sie die Menge an Daten erhöhen, die Sie gleichzeitig greifen.