Parsing Spalten mit BeautifulSoup und Speichern als JSON

Question

Ich möchte Parsen die Afk., Aantal und Zetels Spalten auf der Website: http://www.nlverkiezingen.com/TK2012.html, dass ich schließlich als JSON-Datei speichern kann.

Bevor Sie es als JSON-Datei speichern, muss ich die Elemente analysieren.

hatte ich

from bs4 import BeautifulSoup 
import urllib 

jaren = [str("2010"), str("2012")] 

for Jaargetal in jaren: 
    r = urllib.urlopen("http://www.nlverkiezingen.com/TK" + Jaargetal +".html").read() 
    soup = BeautifulSoup(r, "html.parser") 
    tables = soup.find_all("table") 

    for table in tables: 
     header = soup.find_all("h1")[0].getText() 
     print header 

     trs = table.find_all("tr")[0].getText() 
     print '\n' 
     for tr in table.find_all("tr"): 
       print "|".join([x.get_text().replace('\n','') for x in tr.find_all('td')]) 

Ive

tryed

from bs4 import BeautifulSoup 
import urllib 

jaren = [str("2010"), str("2012")] 

for Jaargetal in jaren: 
    r = urllib.urlopen("http://www.nlverkiezingen.com/TK" + Jaargetal +".html").read() 
    soup = BeautifulSoup(r, "html.parser") 
    tables = soup.find_all("table") 

    for table in tables: 
     header = soup.find_all("h1")[0].getText() 
     print header 

     for tr in table.find_all("tr"): 
      firstTd = tr.find("td") 
      if firstTd and firstTd.has_attr("class") and "l" in firstTd['class']: 
       tds = tr.find_all("td") 

       for tr in table.find_all("tr"): 
        print "|".join([x.get_text().replace('\n','') for x in tr.find_all('td')]) 
        break 

Was mache ich falsch oder was ich zu tun habe, bin ich auf dem richtigen Weg?

Answer 1

Eine Option, um nur die gewünschten Spalten zu extrahieren, wäre, Indizes der Spalten zu überprüfen. Definieren Sie die Spaltenindizes Sie interessiert sind:

DESIRED_COLUMNS = {1, 2, 5} # it is a set 

Und dann verwenden enumerate() mit find_all():

"|".join([x.get_text().replace('\n', '') 
      for index, x in enumerate(tr.find_all('td')) 
      if index in DESIRED_COLUMNS])