Optimale Rate, Pastebin zu kratzen, ohne Zugriff auf die API?

Wie der Titel sagt, versuche ich herauszufinden, die optimale Rate, um Pastebin zu kratzen, ohne von ihrer Archivseite blockiert zu werden. Hat jemand anderes das herausgefunden?Optimale Rate, Pastebin zu kratzen, ohne Zugriff auf die API?

Quelle

2016-07-29 Ryan Rushton

Ich habe keine Ahnung, ob das ist, was Sie meinen, aber die http://pastebin.com/api_scraping_faq API-Dokumentation sagt "Wir empfehlen, nicht mehr als 1 Anfrage pro Sekunde zu machen." Alles, was größer als das sollte in Ordnung sein

Quelle

2017-03-02 23:01:39 DudeDudeDude

Ich denke, du meinst - alles weniger als 1 Anfrage pro Sekunde - obwohl es impliziert werden könnte bedeuten - alles mehr als 1 Sekunde zwischen Anfragen. –

In seinem Titel erwähnt der Autor, dass er keinen API-Zugang hat. – serk

@serk Ich bin mir darüber im Klaren, dass der Verweis darauf möglicherweise nützlich sein kann, wenn ihre Site die gleichen Bedingungen verwendet, um alle Anfragen standortweit zu begrenzen. guter Punkt, egal – DudeDudeDude

Optimale Rate, Pastebin zu kratzen, ohne Zugriff auf die API?

Antwort

Verwandte Themen