Einfache Login-Funktion für XBMC (Python) Problem

Question

Ich versuche Abschnitte einer Javascript-Kalender-Seite durch Python (Xbmc/Kodi) zu kratzen. Bis jetzt konnte ich statische HTML-Variablen abkratzen, aber nicht die JavaScript-generierten Abschnitte.

Die Variablen im Abrufen sind <strong class="item-title">**this**</strong> , <span class="item-daterange">**this**</span> and <div class="item-location">**this**</div>, beachten Sie, dass sie in separaten Abschnitten der HTML-Quelle sind, und durch JavaScript gerendert. Alle von ihnen abgekratzten Variablen sollten an einen String angehängt und angezeigt werden.

response = net.http_GET('my URL') 
    link = response.content 
    match=re.compile('<strong class="gcf-item-title">(.+?)</strong>').findall(link) 
    for name in match: 
     name = name 
     print name 

Aus dem oben mit regex kann ich nur eine von diesen Variablen kratzen und da ich eine String-Liste muß zusammen alle Variablen angezeigt werden, wie das getan werden kann?

Ich bekomme, dass die Seite vor gerendert werden muss, damit die Javascript-Variablen geschabt werden Aber da ich xbmc verwende, bin ich nicht sicher, wie ich zusätzliche Python-Bibliotheken wie dryscrape importieren kann, um dies zu erledigen. Download Dryscrape gibt mir eine setup.py, init .py Datei zusammen mit einigen anderen, aber wie kann ich alle zusammen verwenden?

Danke.

Answer 1

Sie haben Fragen zu den Schritten zum Scrappen von JavaScript, zur Verwendung von Python auf XBMC/Kodi oder zur Installation von Paketen, die mit einer setup.py Datei geliefert werden?

Nur basierend oben auf Ihrer RegEx, wenn Sie Ihre Eingaben sind immer wie<strong class="item-title">**this**</strong> Sie kein Spiel, da Ihr re Muster erhalten, ist für Elemente mit class = "GCF-item-Titel.

Verwenden oder verwenden Sie BeautifulSoup? Wenn Sie nicht verwenden, aber können, sollten Sie - es ist das Leben im Hinblick auf das Scraping von Websites ändern.