Web Scraping - nicht in der Lage Telefonnummern Der Versuch, mit Python und BeautifulSoup

Question

drucken Daten zu kratzen von real-estate agent page für Projekt

konnte ich sowohl Name und Job Description für alle bekommen, aber nur eine geringe Anzahl von Telefonnummern.

Dies ist mein Code:

from urllib.request import urlopen as uReq 
from bs4 import BeautifulSoup as soup 

my_url = 'https://www.raywhite.com/contact/?type=People&target=people&suburb=Sydney%2C+NSW+2000&radius=5&firstname=&lastname=&_so=people' 

# opening connection 
uClient = uReq(my_url) 
page_html = uClient.read() 
uClient.close() 

    page_soup = soup(page_html, "html.parser") 

containers = page_soup.findAll("div",{"class":"card horizontal-split vcard"}) 

for container in containers: 
    agent_name = container.findAll("li", {"class":"agent-name"}) 
    name = agent_name[0].text 

    agent_role = container.findAll("li", {"class":"agent-role"}) 
    role = agent_role[0].text 

    phone = container.find("a").text 

    print("name: " + name) 
    print("role: " + role) 
    print("phone: " + phone) 

Dies ist eine Probe des ersten Paares ist, die gedruckt wurden nur die ersten beiden Agenten ihre Telefonnummern aufgelistet haben:

name: Mark Constantine 
role: Principal 
phone: 0418 222 643 
name: Dawn Veloskey 
role: Operations Manager 
phone: 0418 449 600 
name: Yvonne Lau 
role: Sales 
phone: 

name: Anthony Cavallaro 
role: Managing Director | Selling Principal 
phone: 

name: Ciara OConnor 
role: Sales Executive 
phone: 

name: Michael Buium 
role: Commercial Sales Manager and Auctioneer 
phone: 

name: Albert Hui 
role: Senior Commercial Property Manager 
phone: 

name: Jessie Yee 
role: Associate Director, Commercial Leasing & Management 
phone: 

nicht sicher, warum andere Telefonnummern werden nicht gedruckt, irgendwelche Vorschläge werden sehr geschätzt.

Answer 1

Das ist, weil die ersten beiden keine Fotos haben, sonst ist das Foto das erste "a" -Tag.

ersetzen:

phone = container.find("a").text 

mit:

filterfn = lambda x: 'href' in x.attrs and x['href'].startswith("tel") 
phones = map(lambda x: x.text,filter(filterfn,container.findAll("a"))) 

for phone in phones: 
    print("phone number: " + phone)