2017-08-29 1 views
1

Ich versuche, die Video-Links auf der Webseite zu kratzen, https://www.tokopedia.com/chocoapple/ready-stock-bnib-iphone-128gb-7-plus-jet-black-garansi-apple-1-tahun-10?src=topads Es gibt Links, die durch "webyclip" generiert werden Dienst, der die Daten lädt, nachdem die Seite geladen wurde. Ich möchte die aktualisierte HTML-Quelle der Seite, nachdem alle JavaScripts und AJAX geladen sind (ähnlich, wenn wir "Element überprüfen" in einem Browser). Wie man es durch das chromedp Paket (https://github.com/knq/chromedp) erreicht. Es ist ein kopfloser Browser für GoLang. Bitte helfen Sie. Ich bin ein Neuling im Web-Verschrottung.Chromedp-Paket: Wie aktualisierte HTML-Quelle der Webseite, die Inhalte dynamisch geladen hat mit Hilfe von verchromt

EDIT: Es ist nicht ähnlich zu der anderen Frage in dem Link erwähnt. Dies ist spezifisch für das verchromte Paket. Der eine in den Kommentaren fragt nach, wie/was benutzt werden soll, um dynamische Inhalte zu scrappen.

+0

@TimCooper: Diese Frage bezieht sich speziell auf das verchromte Paket. –

Antwort

0

Nach vielen Versuchen, schließlich habe ich den Weg gefunden und meine Abfrage gelöst. Sie können mein GitHub Repository für diese Abfrage überprüfen. Danke.

Verwandte Themen