AttributError: 'NavigableString' Objekt hat kein Attribut und Index außerhalb des Bereichs

-1

könnte anybony helfen, weil ich zwei Tage kämpfe, um grundlegende Informationen über das Produkt (Produktname, Bild, Bewertung, Preis) in dem hier bereitgestellten Link zu erhalten . dies ist mein Code, und ich bin hierAttributError: 'NavigableString' Objekt hat kein Attribut und Index außerhalb des Bereichs

import urllib.request 
from bs4 import BeautifulSoup 
from random import randint 
from bs4.dammit import EncodingDetector 
import re 
import sys 


url='https://fr.aliexpress.com/category/205000316/men-clothing-accessories.html' 
headers = {} 
headers['User-Agent'] = "Mozilla/5.0 (X11; Ubuntu; Linux i686; rv:48.0) Gecko/20100101 Firefox/48.0,Mozilla/5.0 (Windows NT 6.3; rv:36.0) Gecko/20100101 Firefox/36.0',Mozilla/5.0 (Macintosh; Intel Mac OS X 10_10; rv:33.0) Gecko/20100101 Firefox/33.0',Mozilla/5.0 (compatible, MSIE 11, Windows NT 6.3; Trident/7.0; rv:11.0) like Gecko',Mozilla/5.0 (Windows NT 6.1; WOW64; Trident/7.0; EN; rv:11.0) like Gecko',Mozilla/5.0 (compatible; MSIE 10.0; Windows NT 6.1; WOW64; Trident/6.0)',Mozilla/5.0 (compatible; MSIE 10.0; Windows NT 6.1; Trident/5.0)',Mozilla/5.0 (Macintosh; Intel Mac OS X 10_9_3) AppleWebKit/537.75.14 (KHTML, like Gecko) Version/7.0.3 Safari/7046A194A'" 

req = urllib.request.Request(url, headers = headers) 
html = urllib.request.urlopen(req).read() 

soup = BeautifulSoup(html.decode('utf8', 'ignore'), "html.parser") 


# retrive infos such product name, price , rating 
Prod=soup.find_all('ul', class_='util-clearfix son-list') 

for item in Prod: 
    print(item.contents[0].find_all("span",{"class:","star star-s "[0].text) 
    print(item.contents[0].find_all("span",{"class:","star star-s "[0].text) 
    print(item.contents[0].find_all("span",{"class:","star star-s "[0].text)

Quelle

2017-12-17 Ilyas

warum hast du ge t dreimal das gleiche Element? Vielleicht benutzen Sie die zweite "for" -Schleife zuerst "for". – furas

es scheint, als ob Sie einen gleichen Index wieder und wieder drucken sollte wahrscheinlich dynamische Index wie Inhalt [i] – vladko

Ihr erster Fehler in Python ist, dass die Prod tatsächlich die Liste der Produkte übereinstimmt - das ul Element, während Sie die inneren li Elemente benötigen - jeweils einen Produktbehälter darstellt.

Dann, wenn Sie es ändern, um Produkte zu lokalisieren - iterieren Sie über die Produktbehälter und suchen Sie nach inneren Elementen, die einen Namen, eine Bewertung und andere gewünschte Informationen enthalten. Dafür würden Sie Browser-Entwickler-Tools müssen verstehen, was HTML-Elemente, die Daten repräsentieren Sie extrahieren müssen:

products = soup.select('ul.son-list li.list-item') 
for product in products: 
    name = product.select_one("a.product").get_text() 
    stars_element = product.select_one(".star") 
    rating = stars_element["title"].split(": ")[1].strip().split(" ", 1)[0] if stars_element else "Unknown rating" 

    print(name, rating)

Drucke:

Lurker Requin Peau Soft Shell V4 Tactique Militaire Veste Hommes Imperméable Coupe-Vent Chaud Manteau À Capuchon de Camouflage C... 4.8 
HEYGUYS coton t chemises hommes new summer street wear hanche hop T-SHIRTS 2017 marque de mode fermeture éclair sur la manche t-... 4.8 
2017 Nutella Motif Hommes et Femmes Hoodies Couples Casual Style 3D Impression Personnalité Automne Hiver Sweats À Capuche Survê... 4.8 
...

Quelle

2017-12-17 03:01:23 alecxe

Hallo danke das funktioniert perfekt, aber bitte erklären Sie diese Zeile Bewertung = stars_element ["Titel"]. Split (":") [1] .strip(). Split ("", 1) [0] if stars_element else "Unbekannte Bewertung" – Ilyas

@Ilyas es ist nur eine Möglichkeit, den numerischen Wert aus dem Attribut "title" zu entfernen. – alecxe

danke eine Menge Alecxe, aber wenn ich diese Liste in SQLite einfügen möchte, wie kann ich tun, haben Sie eine Idee, aber ich habe versucht, aber keinen Erfolg – Ilyas

Produktname, Bild, Preis:

import urllib.request 
from bs4 import BeautifulSoup 

url='https://fr.aliexpress.com/category/205000316/men-clothing-accessories.html' 

headers = {} 
headers['User-Agent'] = "Mozilla/5.0 (X11; Ubuntu; Linux i686; rv:48.0) Gecko/20100101 Firefox/48.0,Mozilla/5.0 (Windows NT 6.3; rv:36.0) Gecko/20100101 Firefox/36.0',Mozilla/5.0 (Macintosh; Intel Mac OS X 10_10; rv:33.0) Gecko/20100101 Firefox/33.0',Mozilla/5.0 (compatible, MSIE 11, Windows NT 6.3; Trident/7.0; rv:11.0) like Gecko',Mozilla/5.0 (Windows NT 6.1; WOW64; Trident/7.0; EN; rv:11.0) like Gecko',Mozilla/5.0 (compatible; MSIE 10.0; Windows NT 6.1; WOW64; Trident/6.0)',Mozilla/5.0 (compatible; MSIE 10.0; Windows NT 6.1; Trident/5.0)',Mozilla/5.0 (Macintosh; Intel Mac OS X 10_9_3) AppleWebKit/537.75.14 (KHTML, like Gecko) Version/7.0.3 Safari/7046A194A'" 

req = urllib.request.Request(url, headers = headers) 
html = urllib.request.urlopen(req).read() 

soup = BeautifulSoup(html.decode('utf8', 'ignore'), "html.parser") 

products = soup.find_all('div', class_='item') 

for item in products: 
    print(' item:', item.find(class_='info').find("a").text) 
    print('price:', item.find(class_="price").find(class_='value').text) 
    print('image:', item.find(class_="pic").find("img")['src']) 
    print('--')

Ergebnis:

item: Rocksir punisher t chemises pour hommes t-shirt Coton de mode marque t shirt hommes Casual Manches Courtes le punisher T-shirt h... 
price: € 12,05 - 12,92 
image: //ae01.alicdn.com/kf/HTB1ByVZSpXXXXcxaXXXq6xXFXXXW/New-Design-Male-Novelty-Men-T-shirt-Fashion-Cotton-O-neck-Hip-Hop-T-shirt-.jpg_220x220.jpg 
-- 
item: DIFFELEMENT 2017 Nouveau style long Manteau Hommes marque vêtements mode Long Vestes Manteaux marque-vêtements hommes Pardessus ... 
price: € 44,82 
image: //ae01.alicdn.com/kf/HTB12IqMXEAKL1JjSZFkq6y8cFXa2/DIFFELEMENT-2017-New-style-long-Coat-Men-brand-clothing-fashion-Long-Jackets-Coats-brand-clothing-mens.jpg_220x220.jpg 
--

Quelle

2017-12-17 03:18:48 furas

AttributError: 'NavigableString' Objekt hat kein Attribut und Index außerhalb des Bereichs

Antwort

Verwandte Themen