Python selenium 三種等待方式詳解


本文摘自:http://blog.csdn.net/huilan_same/article/details/52544521

發現太多人不會用等待了,博主今天實在是忍不住要給大家講講等待的必要性。

很多人在群里問,這個下拉框定位不到、那個彈出框定位不到…各種定位不到,其實大多數情況下就是兩種問題:1 有frame,2 沒有加等待。殊不知,你的代碼運行速度是什么量級的,而瀏覽器加載渲染速度又是什么量級的,就好比閃電俠和凹凸曼約好去打怪獸,然后閃電俠打完回來之后問凹凸曼你為啥還在穿鞋沒出門?凹凸曼分分中內心一萬只羊駝飛過,欺負哥速度慢,哥不跟你玩了,拋個異常撂挑子了。

那么怎么才能照顧到凹凸曼緩慢的加載速度呢?只有一個辦法,那就是等嘍。說到等,又有三種等法,且聽博主一一道來:

1. 強制等待

第一種也是最簡單粗暴的一種辦法就是強制等待sleep(xx),強制讓閃電俠等xx時間,不管凹凸曼能不能跟上速度,還是已經提前到了,都必須等xx時間。

看代碼:

 1 # -*- coding: utf-8 -*-
 2 from selenium import webdriver
 3 from time import sleep
 4 
 5 driver = webdriver.Firefox()
 6 driver.get('https://huilansame.github.io')
 7 
 8 sleep(3)  # 強制等待3秒再執行下一步
 9 
10 print driver.current_url
11 driver.quit()

隱形等待是設置了一個最長等待時間,如果在規定時間內網頁加載完成,則執行下一步,否則一直等到時間截止,然后執行下一步。注意這里有一個弊端,那就是程序會一直等待整個頁面加載完成,也就是一般情況下你看到瀏覽器標簽欄那個小圈不再轉,才會執行下一步,但有時候頁面想要的元素早就在加載完成了,但是因為個別js之類的東西特別慢,我仍得等到頁面全部完成才能執行下一步,我想等我要的元素出來之后就下一步怎么辦?有辦法,這就要看selenium提供的另一種等待方式——顯性等待wait了。

需要特別說明的是:隱性等待對整個driver的周期都起作用,所以只要設置一次即可,我曾看到有人把隱性等待當成了sleep在用,走哪兒都來一下…

3. 顯性等待

第三種辦法就是顯性等待,WebDriverWait,配合該類的until()和until_not()方法,就能夠根據判斷條件而進行靈活地等待了。它主要的意思就是:程序每隔xx秒看一眼,如果條件成立了,則執行下一步,否則繼續等待,直到超過設置的最長時間,然后拋出TimeoutException。

先看個代碼示例:

 1 # -*- coding: utf-8 -*-
 2 from selenium import webdriver
 3 from selenium.webdriver.support.wait import WebDriverWait
 4 from selenium.webdriver.support import expected_conditions as EC
 5 from selenium.webdriver.common.by import By
 6 
 7 driver = webdriver.Firefox()
 8 driver.implicitly_wait(10)  # 隱性等待和顯性等待可以同時用,但要注意:等待的最長時間取兩者之中的大者
 9 driver.get('https://huilansame.github.io')
10 locator = (By.LINK_TEXT, 'CSDN')
11 
12 try:
13     WebDriverWait(driver, 20, 0.5).until(EC.presence_of_element_located(locator))
14     print driver.find_element_by_link_text('CSDN').get_attribute('href')
15 finally:
16     driver.close()

 

上例中,我們設置了隱性等待和顯性等待,在其他操作中,隱性等待起決定性作用,在WebDriverWait..中顯性等待起主要作用,但要注意的是:最長的等待時間取決於兩者之間的大者,此例中為20,如果隱性等待時間 > 顯性等待時間,則該句代碼的最長等待時間等於隱性等待時間。

我們主要用到了WebDriverWait類與expected_conditions模塊,下面博主帶大家細看一下這兩個模塊:

WebDriverWait

wait模塊的WebDriverWait類是顯性等待類,先看下它有哪些參數與方法:

 1 selenium.webdriver.support.wait.WebDriverWait(類)
 2 
 3 __init__
 4     driver: 傳入WebDriver實例,即我們上例中的driver
 5     timeout: 超時時間,等待的最長時間(同時要考慮隱性等待時間)
 6     poll_frequency: 調用until或until_not中的方法的間隔時間,默認是0.5秒
 7     ignored_exceptions: 忽略的異常,如果在調用until或until_not的過程中拋出這個元組中的異常,
 8             則不中斷代碼,繼續等待,如果拋出的是這個元組外的異常,則中斷代碼,拋出異常。默認只有NoSuchElementException。
 9 
10 until
11     method: 在等待期間,每隔一段時間調用這個傳入的方法,直到返回值不是False
12     message: 如果超時,拋出TimeoutException,將message傳入異常
13 
14 until_not 與until相反,until是當某元素出現或什么條件成立則繼續執行,
15         until_not是當某元素消失或什么條件不成立則繼續執行,參數也相同,不再贅述。
16     method
17     message

 

看了以上內容基本上很清楚了,調用方法如下:

WebDriverWait(driver, 超時時長, 調用頻率, 忽略異常).until(可執行方法, 超時時返回的信息)

 

這里需要特別注意的是until或until_not中的可執行方法method參數,很多人傳入了WebElement對象,如下:

WebDriverWait(driver, 10).until(driver.find_element_by_id('kw'))  # 錯誤

 

這是錯誤的用法,這里的參數一定要是可以調用的,即這個對象一定有 __call__() 方法,否則會拋出異常:

TypeError: 'xxx' object is not callable

 

在這里,你可以用selenium提供的 expected_conditions 模塊中的各種條件,也可以用WebElement的is_displayed() 、is_enabled()is_selected() 方法,或者用自己封裝的方法都可以,那么接下來我們看一下selenium提供的條件有哪些:

expected_conditions

expected_conditions是selenium的一個模塊,其中包含一系列可用於判斷的條件:

 1 selenium.webdriver.support.expected_conditions(模塊)
 2 
 3 這兩個條件類驗證title,驗證傳入的參數title是否等於或包含於driver.title
 4 title_is
 5 title_contains
 6 
 7 這兩個人條件驗證元素是否出現,傳入的參數都是元組類型的locator,如(By.ID, 'kw')
 8 顧名思義,一個只要一個符合條件的元素加載出來就通過;另一個必須所有符合條件的元素都加載出來才行
 9 presence_of_element_located
10 presence_of_all_elements_located
11 
12 這三個條件驗證元素是否可見,前兩個傳入參數是元組類型的locator,第三個傳入WebElement
13 第一個和第三個其實質是一樣的
14 visibility_of_element_located
15 invisibility_of_element_located
16 visibility_of
17 
18 這兩個人條件判斷某段文本是否出現在某元素中,一個判斷元素的text,一個判斷元素的value
19 text_to_be_present_in_element
20 text_to_be_present_in_element_value
21 
22 這個條件判斷frame是否可切入,可傳入locator元組或者直接傳入定位方式:id、name、index或WebElement
23 frame_to_be_available_and_switch_to_it
24 
25 這個條件判斷是否有alert出現
26 alert_is_present
27 
28 這個條件判斷元素是否可點擊,傳入locator
29 element_to_be_clickable
30 
31 這四個條件判斷元素是否被選中,第一個條件傳入WebElement對象,第二個傳入locator元組
32 第三個傳入WebElement對象以及狀態,相等返回True,否則返回False
33 第四個傳入locator以及狀態,相等返回True,否則返回False
34 element_to_be_selected
35 element_located_to_be_selected
36 element_selection_state_to_be
37 element_located_selection_state_to_be
38 
39 最后一個條件判斷一個元素是否仍在DOM中,傳入WebElement對象,可以判斷頁面是否刷新了
40 staleness_of

 

上面是所有17個condition,與until、until_not組合能夠實現很多判斷,如果能自己靈活封裝,將會大大提高腳本的穩定性。

今天就分享這些內容,有什么問題可以留言給我交流,希望能幫助到有需要的同學。


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM