Python BS4 Modul

-2

import requests 
from bs4 import BeautifulSoup 

''' 
It's a web crawler working in ebay, collecting every single item data 
''' 

def ebay_spider(max_pages): 
    page = 1 
    while page <= max_pages: 
     url = 'http://www.ebay.co.uk/sch/Apple-Laptops/111422/i.html?_pgn=' \ 
       + str(page) 
     source_code = requests.get(url) 

     plain_text = source_code.text 
     soup = BeautifulSoup(plain_text) 
     for link in soup.findAll('a', {'class': 'vip'}): 
      href = 'http://www.ebay.co.uk' + link.get('href') 
      title = link.string 
    get_single_item_data(href) 
    page += 1 


def get_single_item_data(item_url): 
    source_code = requests.get(item_url) 
    plain_text = source_code.text 
    soup = BeautifulSoup(plain_text) 
    for item_name in soup.findAll('h1', {'id': "itemTitle"}): 
     print(item_name.string) 

ebay_spider(3)

Blockquote And the error say that : http://imgur.com/403a6N8
I tried to fix it but it seems not to work, so any tips/answers how to fix it?Python BS4 Modul

EDIT: Sorry everyone for faulty title and tag, everything was fixed.

Quelle

2016-08-22 Auginis

haben Sie versucht, was es Ihnen sagt? 'supp = BeautifulSoup (reiner_text," html.parser ", markup_type = markup_type)'. Und bitte posten Textversion des Fehlers, nicht ein unlesbares Bild. –

Das hat nichts mit dem Modul 'requests' zu tun. – DeepSpace

@ Jean-François Fabre sorry Kumpel für schlechtes Bild, aber Sie haben Fehler richtig eingelesen. Aber das Problem ist, dass ich diese Zeile in meinen Code eingefügt habe und ein Fehler erscheint, der besagt: SyntaxError: ungültiges Zeichen in Bezeichner. Aus irgendeinem seltsamen Grund kann ich nicht herausfinden, was damit nicht stimmt. Und hier ist der vorherige Fehler, welcher Beitrag war über: http://pastebin.com/HNL1ENG0 – Auginis

Wenn Sie versuchen, ein Objekt in BeatifulSoup Linie zu machen, stattdessen tun dies:

soup = BeautifulSoup(plain_text)

Dieses:

soup = BeautifulSoup(plain_text, 'html.parser')

Hinweis: Ihr Problem bezieht sich auf BS4 Modul keine Anfragen.

Quelle

2016-08-22 18:57:50 dannyxn

Entschuldigung, mein Herr, tut mir leid für fehlerhafte Titel und Tag (meine schlechte) und danke für die Antwort, aber dann schreibe ich diese Zeile sagt: SyntaxError: ungültiges Zeichen in Bezeichner. imgur.com/a/8NBDi – Auginis

Wenn Sie keinen markup_type angeben möchten, tun Sie dies: supple = BeautifulSoup (plain_text, 'html.parser') statt dies: supple = BeautifulSoup (plain_text, 'html.parser', markup_type = markup_ty pe). Und wenn meine Antwort nützlich war, markieren Sie sie als nützlich. – dannyxn

Ich habe meine Antwort an Ihre Bedürfnisse angepasst. Ich verweise Sie zu schauen: https://www.crummy.com/software/BeautifulSoup/bs4/doc/. – dannyxn

Dies ist auf die Anforderungen Modul völlig unabhängig. Wie Jean-Francois gesagt hat, tu, was es dir sagt und ziehe weiter.

soup = BeautifulSoup(plain_text,"html.parser",markup_type=markup_ty‌pe)

Quelle

2016-08-22 18:56:35

Entschuldigung, mein Herr, tut mir leid für fehlerhafte Titel und Tag (meine schlechte) nd danke für die Antwort, aber dann schreibe ich diese Zeile heißt es: SyntaxError : ungültiges Zeichen im Bezeichner http://imgur.com/a/8NBDi – Auginis

Python BS4 Modul

Antwort

Verwandte Themen