Python: Selen webscraping Skript funktioniert nicht durch Modul

Question

immer wenn ich das folgende Skript durch Shell laufen seine Arbeit, aber wenn ich das gleiche Skript über Python-Modul oder pycharm läuft es funktioniert nicht, es nicht die Daten abrufen. Kann mir bitte jemand helfen?

from selenium import webdriver 
from selenium.webdriver.common.keys import Keys 
browser = webdriver.Firefox() 
site = browser.get("https://www.flipkart.com/") 
searchInput = browser.find_element_by_class_name("LM6RPg") 
searchInput.send_keys('Laptop') 
searchInput.send_keys(Keys.ENTER) 
titleResults = browser.find_elements_by_xpath("//div[@class='_3wU53n']") 
for title in titleResults: 
    print(title.text) 

Answer 1

Sie sollten implicitly_wait nach browser = webdriver.Firefox() gesetzt, denn wenn man in der Schale laufen die Seite Zeit vollständig geladen haben und wenn Sie es wie ein Modul laufen Sie sind nicht für die Seite wartet auf alle laden, so soll es sein :

browser = webdriver.Firefox() 
browser.implicitly_wait(10) 

Dies ist für maximal 10 Sekunden warten, wird das Element zu finden, bevor eine Ausnahme ausgelöst wird.

Alternativen sind:

browser.explicitly_wait(10) 

die 10 Sekunden warten und danach wird das Element

oder

sleep(5) 

vor der Suche nach Element nach einem Klick auf eine Schaltfläche suchen. Sie können die Sekunden einstellen, um zu sehen, welche passt. Und vergessen Sie nicht zu importieren sleep von time Modul: from time import sleep

Lassen Sie mich wissen, wenn dies Ihnen hilft. Hier

Answer 2

ist die Antwort auf Ihre Frage:

from selenium import webdriver 
    from selenium.webdriver.firefox.firefox_binary import FirefoxBinary 
    from selenium.webdriver.common.desired_capabilities import DesiredCapabilities 
    from selenium.webdriver.common.keys import Keys 
    from selenium.webdriver.support import expected_conditions as EC 
    from selenium.webdriver.common.by import By 
    from selenium.webdriver.support.ui import WebDriverWait 

    binary = FirefoxBinary('C:\\Program Files\\Mozilla Firefox\\firefox.exe') 
    caps = DesiredCapabilities().FIREFOX 
    caps["marionette"] = True 
    browser = webdriver.Firefox(capabilities=caps, firefox_binary=binary, executable_path="C:\\Utility\\BrowserDrivers\\geckodriver.exe") 

    site = browser.get("https://www.flipkart.com/") 
    searchInput = browser.find_element_by_xpath("//input[@class='LM6RPg']") 
    searchInput.send_keys('Laptop') 
    searchInput.send_keys(Keys.ENTER) 
    WebDriverWait(browser, 10).until(EC.element_to_be_clickable((By.XPATH, "//div[@id='container']//div[text()='Dell Inspiron Core i3 6th Gen - (4 GB/1 TB HDD/Windows 10 Home) 3467 Notebook']"))) 
    titleResults = browser.find_elements_by_xpath("//div[@class='_3wU53n']") 
    for title in titleResults: 
     print(title.text) 

Lassen Sie mich wissen, ob dies Ihre Frage beantwortet.