Python und beautifulsoup - Scrape Text

Question

import requests 
from bs4 import BeautifulSoup 

url = 'https://www.brightscope.com/401k-rating/240370/Abengoa-Bioenergy-Company-Llc/244317/Abengoa-Bioenergy-Us-401K-Savings-Plan/' 
thepage = requests.get(url) 
urlsoup = BeautifulSoup(thepage.text, "html.parser") 

plandata = urlsoup.find(class_="plans-section").text 

print(plandata) 

I;. Versuche nur die Klasse der Bewertungszahl zu kratzen, aber wenn ich diesen Code verwenden, ich habe nichts zurück :(

1. Wie kratzen ich nur die Klasse von Bewertungszahl?
2. Wie konnte ich mehrere Klassen (dies ist der wichtigste Teil) und legte sie in eine Liste das ist lesbar?

Mein Gedanke wäre Schleife jede Seite abgeschabt und hängen sie sie kratzen eine CSV-Datei mit einer neuen Zeile.

Beispiel unten;

Rating #1, Company Name1, etc, etc, etc 

Rating #2, Company Name2, etc, etc, etc 

Ich komme einfach nicht über den Buckel, dies herauszufinden. Danke für jede Hilfe!

Bearbeiten - Die Klasse "Pläne-Abschnitt" enthält die Daten, die ich will, aber es scheint zu zwei Div-Tags unter es aufgeteilt werden. Ich möchte die Daten in der Klasse "Daten-Text überdurchschnittlich" abkratzen. Das Problem ist, dass jede Seite nur den gleichen "Daten-Text" hat und was nach den Änderungen auf jedem Abschnitt/Seite kommt. Welche Möglichkeiten gibt es für mich?

Answer 1

import requests 
from bs4 import BeautifulSoup 


url = 'https://www.brightscope.com/401k-rating/141759/Aj-Kirkwood-Associates-Inc/143902/Aj-Kirkwood-Associates-Inc-401K-Profit-Sharing-Plan/' 
thepage = requests.get(url) 
urlsoup = BeautifulSoup(thepage.text, "html.parser") 

rate = urlsoup.find(class_='rating-number').text 
name = urlsoup.find(class_="name").text 
print(rate, name) 

aus:

59 A.J. Kirkwood & Associates, Inc. 

Verwendung re Filter alle die Klassen enthalten bestimmten Text entsprechen:

If you pass in a regular expression object, Beautiful Soup will filter against that regular expression using its search() method. 

in Ihnen Fall:

import re 
soup.find_all(class_=re.compile(r'data-text.+')) 

Answer 2

Was möchten Sie gerade aus der Seite herausholen? Wenn Sie div nach Klasse suchen, sollte dies helfen.

urlsoup.findAll("div", { "class" :"rating-number"})