gevent urllib ist langsam

Question

Ich habe eine Reihe von Demos eines TCP-Servers erstellt, aber meine gevent Beispiele sind deutlich langsamer. Ich teste wirklich keine Leistung, aber im Moment macht etwas die gevent-Version 5 mal langsamer.

Ich bin sicher, muss sein, wie ich gevent kompiliert, aber kann das Problem nicht lösen. Ich benutze OSX Leopard mit Fink kompilierten Python 2.6 und 2.7. Ich habe sowohl das stabile gevent und gevent 1.0b1 ausprobiert und es verhält sich genauso. Das Echo dauert 5 Sekunden, um zu antworten, wobei die anderen Beispiele < 1sec dauern. Wenn ich den Urllib-Aufruf entferne, verschwindet das Problem.

Ich habe alle den Code in https://github.com/djay/geventechodemo

die Beispiele auszuführen Ich verwende zc.buildout so

$ python2.7 bootstrap.py 
$ bin/buildout 

zu bauen, um GEVENT Beispiel auszuführen:

$ bin/py geventecho3.py & 
[1] 80790 
waiting for connection... 
$ telnet localhost 8080 
Trying 127.0.0.1... 
...connected from: ('127.0.0.1', 56588) 
Connected to localhost. 
Escape character is '^]'. 
hello 
echo: avast 

Diese dauert 3-4 Sekunden, um auf meinem System zu antworten.

jedoch das Gewinde Beispiel

$ bin/py threadecho2.py 

oder das verdrillte Beispiel

$ bin/py twistedecho2.py 

weniger als 1 s. Irgendeine Idee, was ich falsch mache?

Answer 1

Die Antwort war, dass der Standard-DNS-Resolver wie in dieser Konversation beschrieben geändert wurde.

https://groups.google.com/forum/#!topic/gevent/5uNfkdgzWVc

Einstellung GEVENT_RESOLVER = Gewinde als die erwartete Geschwindigkeit arbeiten

Answer 2

Gerade versucht, dass auf Windows XP. Reagiert nicht sofort, ist aber viel schneller als 3 Sekunden. Mockt einen Kunden auf, um das genaue Timing zu messen.

PS Building Libevent unter Windows ist nicht einwandfrei! Musste mit includes spielen und einen Bug im eigentlichen Code beheben. Ich bleibe bei Linux für Libevent/Gevent in der Zukunft;)

Answer 3

urllib unterstützt http 1.1 Verbindung Wiederverwendung nicht. Jedes Mal, wenn Sie die Seite abrufen, wird eine neue TCP-Verbindung erstellt und ein neuer TCP-Handshake wird ausgeführt. urllib ist und wird immer langsam mit oder ohne gevent sein.