beautifulsoup CSS Select - finde ein Tag, in dem ein bestimmtes Attribut (Stil für ex) nicht vorhanden ist

Question

Mein erstes hier auf SO. Danke, dass du uns so lange geholfen hast. Kommen gerade zu Punkt:

Szenario: ich auf einem bestehenden Programm arbeite, die den CSS-Selektor als String aus einer Konfigurationsdatei liest das Programm dynamisch und in der Lage zu machen, jede Website verschrotten nur durch eine Änderung der Konfiguration Wert des CSS-Selektors.

Problem: Ich versuche, eine Website zu kratzen, welche Elemente als eine der zwei Optionen unten rendert:

Option1:

......... 
<div class="price"> 
    <span class="price" style="color:red;margin-right:0.1in"> 
    <del>$299</del> 
    </span> 
    <span class="price"> 
    $195 
    </span> 
</div> 

soup = soup.select("span.price") - this doesn't work as I need second span tag or last span tag :(

Option2:

......... 
<div class="price"> 
    <span class="price"> 
    $199 
    </span> 
</div> 

soup = soup.select("span.price") - this works great! 

Frage: In den beiden oben genannten Op Ich möchte in der Lage sein, das letzte Span-Tag ($ 195 oder $ 199) zu bekommen und kümmern sich nicht um die $ 299. Im Grunde möchte ich nur den endgültigen Verkaufspreis und nicht den ursprünglichen Preis extrahieren.

So sind die zwei Möglichkeiten, wie ich schon jetzt wissen, sind:

1) erhalten Sie immer die letzte Span-Tag 2) immer die span-Tag bekommen, die nicht style-Attribut

Nun hat, ich weiß, die nicht bediener, last-of-type sind nicht vorhanden in bs4 (nur nth-of-type ist verfügbar) so bin ich hier fest. Irgendwelche Vorschläge sind hilfreich.

Bearbeiten: - Da dies ein bestehendes Programm ist, kann ich supp.find_all() oder eine andere Methode außer supp.select() verwenden. Leider :(

Dank

Answer 1

Sie können ohne Stil-Attribut für den span-Tag suchen:.

prices = soup.select('span.price') 
no_style = [price for price in prices if 'style' not in price.attrs] 
>> [<span class="price">$199</span>] 

Answer 2

Dies könnte eine gute Zeit sein, eine Funktion zu verwenden In diesem Fall BeautifulSoup gibt span_with_style jeden Tag und die Funktion prüft, ob name ist der Tag span und es hat das Attribut style. Wenn dies wahr ist, dann BeautifulSoup hängt den Tag auf seine Liste der Ergebnisse.

HTML = '''\ 
<div class='price'> 
    <span class='price' style='color: red; margin-right: 0.1in'> 
     <del>$299</del> 
    </span> 
    <span class='price'> 
     $195 
    </span> 
</div>''' 
from bs4 import BeautifulSoup 
soup = BeautifulSoup(HTML, 'lxml') 

for item in soup.find_all(lambda tag: tag.name=='span' and tag.has_attr('style')): 
    print (item) 

Answer 3

Der Code innerhalb der select-Funktion muss sich ändern:

def select(soup, the_variable_you_pass): 
    soup.find('div', attrs={'class': 'price'}).find_all(the_variable_you_pass)[-1]