Scrape the Stack Überlauf Benutzerdaten

Question

Wenn ich div.text verwende, druckt es alle Daten, aber wenn ich diese Daten in eine CSV-Datei schreiben möchte, geht es nur eine obere Daten.

Answer 1

Ich denke, das ist, wie Sie Ihren Schaber sich verhalten wollte. Führen Sie es aus und finden Sie eine CSV-Datei mit Daten ausgefüllt.

import requests 
from bs4 import BeautifulSoup 
import csv 

response = requests.get('https://stackoverflow.com/users').text 
soup = BeautifulSoup(response, 'lxml') 
for items in soup.select('.user-details'): 
    name = items.select("a")[0].text 
    location = items.select(".user-location")[0].text 
    reputation = items.select(".reputation-score")[0].text 
    print(name,location,reputation) 

    with open('stackdata.csv','a',newline='') as csv_file: 
     writer = csv.writer(csv_file) 
     writer.writerow([name,location,reputation])