硒提取问题：Waits/Not 查找元素

Question

在 chrome 和 firefox 中，一切都很好，直到我需要提取文本。我收到此错误：

h3 = next(element for element in h3s if element.is_displayed())
StopIteration

我什至添加了一个流利的等待。

browser = webdriver.Firefox()
browser.get('https://www.voilanorbert.com/')
inputElement = browser.find_element_by_id("form-search-name")
inputElement.send_keys(leadslist[i][0])
inputElement = browser.find_element_by_id("form-search-domain")
inputElement.send_keys(leadslist[i][1])
searchbutton = browser.find_element_by_name("search")
searchbutton.click()

wait = WebDriverWait(browser, 20)
wait.until(EC.visibility_of_element_located((By.CSS_SELECTOR, "div.results")))
wait2 = WebDriverWait(browser, 3000, poll_frequency=100, ignored_exceptions=[ElementNotVisibleException])
wait2.until(EC.presence_of_all_elements_located((By.CSS_SELECTOR, "h3.one")))
h3s = browser.find_elements_by_css_selector('h3.one')
h3 = next(element for element in h3s if element.is_displayed())
result = h3.text

我认为这是因为它实际上并没有提取任何东西，所以它只是一个空列表。一些可能会有所帮助的图片：这是之前的图：

这是后图：

我需要提取 "result" class 的 "text-center displayed" class 中的内容。

Answer 1

答案很简单，您只需要在等待搜索结果时使用不同的选择器即可。下面的方法 (C#) 工作得很好，它会减少几行代码。

一个 "result DIV" 在搜索完成后可见。它是唯一带有 "text-center displayed" class 的元素，因此这就是您选择器的全部需求。一旦显示了这样的 DIV，您就知道在何处精确定位 H3 元素（它是上述 DIV 的子元素）。因此，只需等待以下元素在您单击搜索按钮后变得可见即可：

        IWebElement headerResult = w.Until(ExpectedConditions.ElementIsVisible(By.CssSelector("div[class=\"text-center displayed\"] h3")));
        string result = headerResult.Text;

硒提取问题：Waits/Not 查找元素

Selenium Extraction Problems: Waits/Not Finding Elements

css

python

selenium

web-scraping