主頁 > 後端開發 > Python之Selenium如何正確運用?案例詳解

Python之Selenium如何正確運用?案例詳解

2020-09-30 08:17:35 後端開發

 

Selenium是一個自動化測驗工具,利用它可以驅動瀏覽器執行特定的動作,如點擊、下拉等操作,同時還可以獲取瀏覽器當前呈現的頁面的源代碼,做到可見即可爬,對于一些JavaScript動態渲染的頁面來說,此種抓取方式非常有效,本節中,就讓我們來感受一下它的強大之處吧,

1. 準備作業

本節以Chrome為例來講解Selenium的用法,在開始之前,請確保已經正確安裝好了Chrome瀏覽器并配置好了ChromeDriver,另外,還需要正確安裝好Python的Selenium庫,詳細的安裝和配置程序可以參考第1章,

2. 基本使用

準備作業做好之后,首先來大體看一下Selenium有一些怎樣的功能,示例如下:

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver.support.wait import WebDriverWait
browser = webdriver.Chrome()
try:
    browser.get('https://www.baidu.com')
    input = browser.find_element_by_id('kw')
    input.send_keys('Python')
    input.send_keys(Keys.ENTER)
    wait = WebDriverWait(browser, 10)
    wait.until(EC.presence_of_element_located((By.ID, 'content_left')))
    print(browser.current_url)
    print(browser.get_cookies())
    print(browser.page_source)
finally:
    browser.close()
另外注意:光理論是不夠的,這里順便送大家一套2020最新python入門到高級專案實戰視頻教程,可以去小編的Python交流.裙 :七衣衣九七七巴而五(數字的諧音)轉換下可以找到了,還可以跟老司機交流討教!

運行代碼后發現,會自動彈出一個Chrome瀏覽器,瀏覽器首先會跳轉到百度,然后在搜索框中輸入Python,接著跳轉到搜索結果頁,如圖7-1所示,

b3cb1965ce1f097cc44e233a436948f.png

                                                                       圖7-1 運行結果

搜索結果加載出來后,控制臺分別會輸出當前的URL、當前的Cookies和網頁源代碼:

https://www.baidu.com/s?ie=utf-8&f=8&rsv_bp=0&rsv_idx=1&tn=baidu&wd=Python&rsv_pq=c94d0df9000a72d0&rsv_t= 
07099xvun1ZmC0bf6eQvygJ43IUTTUOl5FCJVPgwG2YREs70GplJjH2F%2BCQ&rqlang=cn&rsv_enter=1&rsv_sug3=6&rsv_sug2=
0&inputT=87&rsv_sug4=87
[{'secure': False, 'value': 'B490B5EBF6F3CD402E515D22BCDA1598', 'domain': '.baidu.com', 'path': '/', 'httpOnly': 
False, 'name': 'BDORZ', 'expiry': 1491688071.707553}, {'secure': False, 'value': '22473_1441_21084_17001', 
'domain': '.baidu.com', 'path': '/', 'httpOnly': False, 'name': 'H_PS_PSSID'}, {'secure': False, 'value': 
'12883875381399993259_00_0_I_R_2_0303_C02F_N_I_I_0', 'domain': '.www.baidu.com', 'path': '/', 'httpOnly': False, 
'name': '__bsi', 'expiry': 1491601676.69722}]
<!DOCTYPE html><!--STATUS OK-->...</html>

源代碼過長,在此省略,可以看到,我們得到的當前URL、Cookies和源代碼都是瀏覽器中的真實內容,

所以說,如果用Selenium來驅動瀏覽器加載網頁的話,就可以直接拿到JavaScript渲染的結果了,不用擔心使用的是什么加密系統,

下面來詳細了解一下Selenium的用法,

3. 宣告瀏覽器物件

Selenium支持非常多的瀏覽器,如Chrome、Firefox、Edge等,還有Android、BlackBerry等手機端的瀏覽器,另外,也支持無界面瀏覽器PhantomJS,

此外,我們可以用如下方式初始化:

from selenium import webdriver
browser = webdriver.Chrome()
browser = webdriver.Firefox()
browser = webdriver.Edge()
browser = webdriver.PhantomJS()
browser = webdriver.Safari()

這樣就完成了瀏覽器物件的初始化并將其賦值為browser物件,接下來,我們要做的就是呼叫browser物件,讓其執行各個動作以模擬瀏覽器操作,

4. 訪問頁面

我們可以用get()方法來請求網頁,引數傳入鏈接URL即可,比如,這里用get()方法訪問淘寶,然后列印出源代碼,代碼如下:

from selenium import webdriver
browser = webdriver.Chrome()
browser.get('https://www.taobao.com')
print(browser.page_source)
browser.close()

運行后發現,彈出了Chrome瀏覽器并且自動訪問了淘寶,然后控制臺輸出了淘寶頁面的源代碼,隨后瀏覽器關閉,

通過這幾行簡單的代碼,我們可以實作瀏覽器的驅動并獲取網頁原始碼,非常便捷,

5. 查找節點

Selenium可以驅動瀏覽器完成各種操作,比如填充表單、模擬點擊等,比如,我們想要完成向某個輸入框輸入文字的操作,總需要知道這個輸入框在哪里吧?而Selenium提供了一系列查找節點的方法,我們可以用這些方法來獲取想要的節點,以便下一步執行一些動作或者提取資訊,

單個節點

比如,想要從淘寶頁面中提取搜索框這個節點,首先要觀察它的源代碼,如圖7-2所示,

e055c15af6b4ab289adaa56ebd7780d.png

                                                                        圖7-2 源代碼

可以發現,它的id是q,name也是q,此外,還有許多其他屬性,此時我們就可以用多種方式獲取它了,比如,find_element_by_name()是根據name值獲取,find_element_by_id()是根據id獲取,另外,還有根據XPath、CSS選擇器等獲取的方式,

我們用代碼實作一下:

from selenium import webdriver
browser = webdriver.Chrome()
browser.get('https://www.taobao.com')
input_first = browser.find_element_by_id('q')
input_second = browser.find_element_by_css_selector('#q')
input_third = browser.find_element_by_xpath('//*[@id="q"]')
print(input_first, input_second, input_third)
browser.close()

這里我們使用3種方式獲取輸入框,分別是根據ID、CSS選擇器和XPath獲取,它們回傳的結果完全一致,運行結果如下:

<selenium.webdriver.remote.webelement.WebElement (session="5e53d9e1c8646e44c14c1c2880d424af", element="0.564956309
6161541-1")> 
<selenium.webdriver.remote.webelement.WebElement (session="5e53d9e1c8646e44c14c1c2880d424af", element="0.564956309
6161541-1")> 
<selenium.webdriver.remote.webelement.WebElement (session="5e53d9e1c8646e44c14c1c2880d424af", element="0.564956309
6161541-1")>

可以看到,這3個節點都是WebElement型別,是完全一致的,

這里列出所有獲取單個節點的方法:

find_element_by_id
find_element_by_name
find_element_by_xpath
find_element_by_link_text
find_element_by_partial_link_text
find_element_by_tag_name
find_element_by_class_name
find_element_by_css_selector

另外,Selenium還提供了通用方法find_element(),它需要傳入兩個引數:查找方式By和值,實際上,它就是find_element_by_id()這種方法的通用函式版本,比如find_element_by_id(id)就等價于find_element(By.ID, id),二者得到的結果完全一致,我們用代碼實作一下:

from selenium import webdriver
from selenium.webdriver.common.by import By
 
browser = webdriver.Chrome()
browser.get('https://www.taobao.com')
input_first = browser.find_element(By.ID, 'q')
print(input_first)
browser.close()

實際上,這種查找方式的功能和上面列舉的查找函式完全一致,不過引數更加靈活,

多個節點

如果查找的目標在網頁中只有一個,那么完全可以用find_element()方法,但如果有多個節點,再用find_element()方法查找,就只能得到第一個節點了,如果要查找所有滿足條件的節點,需要用find_elements()這樣的方法,注意,在這個方法的名稱中,element多了一個s,注意區分,

比如,要查找淘寶左側導航條的所有條目,如圖7-3所示,

b9fa336dbd8eee827b298f18468f49c.png

                                                                                            圖7-3 導航欄

就可以這樣來實作:

from selenium import webdriver
browser = webdriver.Chrome()
browser.get('https://www.taobao.com')
lis = browser.find_elements_by_css_selector('.service-bd li')
print(lis)
browser.close()

運行結果如下:

[<selenium.webdriver.remote.webelement.WebElement (session="c26290835d4457ebf7d96bfab3740d19", element="0.0922104
4033125603-1")>, <selenium.webdriver.remote.webelement.WebElement (session="c26290835d4457ebf7d96bfab3740d19", 
element="0.09221044033125603-2")>, <selenium.webdriver.remote.webelement.WebElement (session="c26290835d4457ebf7d
96bfab3740d19", element="0.09221044033125603-3")>...<selenium.webdriver.remote.webelement.WebElement 
(session="c26290835d4457ebf7d96bfab3740d19", element="0.09221044033125603-16")>]

這里簡化了輸出結果,中間部分省略,

可以看到,得到的內容變成了串列型別,串列中的每個節點都是WebElement型別,

也就是說,如果我們用find_element()方法,只能獲取匹配的第一個節點,結果是WebElement型別,如果用find_elements()方法,則結果是串列型別,串列中的每個節點是WebElement型別,

這里列出所有獲取多個節點的方法:

find_elements_by_id
find_elements_by_name
find_elements_by_xpath
find_elements_by_link_text
find_elements_by_partial_link_text
find_elements_by_tag_name
find_elements_by_class_name
find_elements_by_css_selector

當然,我們也可以直接用find_elements()方法來選擇,這時可以這樣寫:

lis = browser.find_elements(By.CSS_SELECTOR, '.service-bd li')

結果是完全一致的,

6. 節點互動

Selenium可以驅動瀏覽器來執行一些操作,也就是說可以讓瀏覽器模擬執行一些動作,比較常見的用法有:輸入文字時用send_keys()方法,清空文字時用clear()方法,點擊按鈕時用click()方法,示例如下:

from selenium import webdriver
import time
browser = webdriver.Chrome()
browser.get('https://www.taobao.com')
input = browser.find_element_by_id('q')
input.send_keys('iPhone')
time.sleep(1)
input.clear()
input.send_keys('iPad')
button = browser.find_element_by_class_name('btn-search')
button.click()

這里首先驅動瀏覽器打開淘寶,然后用find_element_by_id()方法獲取輸入框,然后用send_keys()方法輸入iPhone文字,等待一秒后用clear()方法清空輸入框,再次呼叫send_keys()方法輸入iPad文字,之后再用find_element_by_class_name()方法獲取搜索按鈕,最后呼叫click()方法完成搜索動作,

通過上面的方法,我們就完成了一些常見節點的動作操作,更多的操作可以參見官方檔案的互動動作介紹:http://selenium-python.readthedocs.io/api.html#module-selenium.webdriver.remote.webelement,

7. 動作鏈

在上面的實體中,一些互動動作都是針對某個節點執行的,比如,對于輸入框,我們就呼叫它的輸入文字和清空文字方法;對于按鈕,就呼叫它的點擊方法,其實,還有另外一些操作,它們沒有特定的執行物件,比如滑鼠拖曳、鍵盤按鍵等,這些動作用另一種方式來執行,那就是動作鏈,

比如,現在實作一個節點的拖曳操作,將某個節點從一處拖曳到另外一處,可以這樣實作:

from selenium import webdriver
from selenium.webdriver import ActionChains
browser = webdriver.Chrome()
url = 'http://www.runoob.com/try/try.php?filename=jqueryui-api-droppable'
browser.get(url)
browser.switch_to.frame('iframeResult')
source = browser.find_element_by_css_selector('#draggable')
target = browser.find_element_by_css_selector('#droppable')
actions = ActionChains(browser)
actions.drag_and_drop(source, target)
actions.perform()

首先,打開網頁中的一個拖曳實體,然后依次選中要拖曳的節點和拖曳到的目標節點,接著宣告ActionChains物件并將其賦值為actions變數,然后通過呼叫actions變數的drag_and_drop()方法,再呼叫perform()方法執行動作,此時就完成了拖曳操作,如圖7-4和圖7-5所示,

fded6cc73bd601b343cf27b65be782f.png

                                                                   圖7-4 拖曳前的頁面

8e3fe70cb00b8510049b18e7934fea5.png

                                                                     圖7-5 拖曳后的頁面

更多的動作鏈操作可以參考官方檔案:http://selenium-python.readthedocs.io/api.html#module-selenium.webdriver.common.action_chains,

8. 執行JavaScript

對于某些操作,Selenium API并沒有提供,比如,下拉進度條,它可以直接模擬運行JavaScript,此時使用execute_script()方法即可實作,代碼如下:

from selenium import webdriver
browser = webdriver.Chrome()
browser.get('https://www.zhihu.com/explore')
browser.execute_script('window.scrollTo(0, document.body.scrollHeight)')
browser.execute_script('alert("To Bottom")')

這里就利用execute_script()方法將進度條下拉到最底部,然后彈出alert提示框,

所以說有了這個方法,基本上API沒有提供的所有功能都可以用執行JavaScript的方式來實作了,

9. 獲取節點資訊

前面說過,通過page_source屬性可以獲取網頁的源代碼,接著就可以使用決議庫(如正則運算式、Beautiful Soup、pyquery等)來提取資訊了,

不過,既然Selenium已經提供了選擇節點的方法,回傳的是WebElement型別,那么它也有相關的方法和屬性來直接提取節點資訊,如屬性、文本等,這樣的話,我們就可以不用通過決議源代碼來提取資訊了,非常方便,

接下來,就看看通過怎樣的方式來獲取節點資訊吧,

獲取屬性

我們可以使用get_attribute()方法來獲取節點的屬性,但是其前提是先選中這個節點,示例如下:

from selenium import webdriver
from selenium.webdriver import ActionChains
browser = webdriver.Chrome()
url = 'https://www.zhihu.com/explore'
browser.get(url)
logo = browser.find_element_by_id('zh-top-link-logo')
print(logo)
print(logo.get_attribute('class'))

運行之后,程式便會驅動瀏覽器打開知乎頁面,然后獲取知乎的logo節點,最后列印出它的class,

控制臺的輸出結果如下:

<selenium.webdriver.remote.webelement.WebElement (session="e08c0f28d7f44d75ccd50df6bb676104", element="0.723639066
0048155-1")>
zu-top-link-logo

通過get_attribute()方法,然后傳入想要獲取的屬性名,就可以得到它的值了,

獲取文本值

每個WebElement節點都有text屬性,直接呼叫這個屬性就可以得到節點內部的文本資訊,這相當于Beautiful Soup的get_text()方法、pyquery的text()方法,示例如下:

from selenium import webdriver
browser = webdriver.Chrome()
url = 'https://www.zhihu.com/explore'
browser.get(url)
input = browser.find_element_by_class_name('zu-top-add-question')
print(input.text)

這里依然先打開知乎頁面,然后獲取“提問”按鈕這個節點,再將其文本值列印出來,

控制臺的輸出結果如下:

提問

獲取id、位置、標簽名和大小

另外,WebElement節點還有一些其他屬性,比如id屬性可以獲取節點id,location屬性可以獲取該節點在頁面中的相對位置,tag_name屬性可以獲取標簽名稱,size屬性可以獲取節點的大小,也就是寬高,這些屬性有時候還是很有用的,示例如下:

from selenium import webdriver
browser = webdriver.Chrome()
url = 'https://www.zhihu.com/explore'
browser.get(url)
input = browser.find_element_by_class_name('zu-top-add-question')
print(input.id)
print(input.location)
print(input.tag_name)
print(input.size)

這里首先獲得“提問”按鈕這個節點,然后呼叫其id、location、tag_name、size屬性來獲取對應的屬性值,

10. 切換Frame

我們知道網頁中有一種節點叫作iframe,也就是子Frame,相當于頁面的子頁面,它的結構和外部網頁的結構完全一致,Selenium打開頁面后,它默認是在父級Frame里面操作,而此時如果頁面中還有子Frame,它是不能獲取到子Frame里面的節點的,這時就需要使用switch_to.frame()方法來切換Frame,示例如下:

import time
from selenium import webdriver
from selenium.common.exceptions import NoSuchElementException
browser = webdriver.Chrome()
url = 'http://www.runoob.com/try/try.php?filename=jqueryui-api-droppable'
browser.get(url)
browser.switch_to.frame('iframeResult')
try:
    logo = browser.find_element_by_class_name('logo')
except NoSuchElementException:
    print('NO LOGO')
browser.switch_to.parent_frame()
logo = browser.find_element_by_class_name('logo')
print(logo)
print(logo.text)

控制臺的輸出如下:

NO LOGO
<selenium.webdriver.remote.webelement.WebElement (session="4bb8ac03ced4ecbdefef03ffdc0e4ccd", element="0.1379261132
0464965-2")>
RUNOOB.COM

這里還是以前面演示動作鏈操作的網頁為實體,首先通過switch_to.frame()方法切換到子Frame里面,然后嘗試獲取父級Frame里的logo節點(這是不能找到的),如果找不到的話,就會拋出NoSuchElementException例外,例外被捕捉之后,就會輸出NO LOGO,接下來,重新切換回父級Frame,然后再次重新獲取節點,發現此時可以成功獲取了,

所以,當頁面中包含子Frame時,如果想獲取子Frame中的節點,需要先呼叫switch_to.frame()方法切換到對應的Frame,然后再進行操作,

11. 延時等待

在Selenium中,get()方法會在網頁框架加載結束后結束執行,此時如果獲取page_source,可能并不是瀏覽器完全加載完成的頁面,如果某些頁面有額外的Ajax請求,我們在網頁源代碼中也不一定能成功獲取到,所以,這里需要延時等待一定時間,確保節點已經加載出來,

這里等待的方式有兩種:一種是隱式等待,一種是顯式等待,

隱式等待

當使用隱式等待執行測驗的時候,如果Selenium沒有在DOM中找到節點,將繼續等待,超出設定時間后,則拋出找不到節點的例外,換句話說,當查找節點而節點并沒有立即出現的時候,隱式等待將等待一段時間再查找DOM,默認的時間是0,示例如下:

from selenium import webdriver
browser = webdriver.Chrome()
browser.implicitly_wait(10)
browser.get('https://www.zhihu.com/explore')
input = browser.find_element_by_class_name('zu-top-add-question')
print(input)

這里我們用implicitly_wait()方法實作了隱式等待,

顯式等待

隱式等待的效果其實并沒有那么好,因為我們只規定了一個固定時間,而頁面的加載時間會受到網路條件的影響,

這里還有一種更合適的顯式等待方法,它指定要查找的節點,然后指定一個最長等待時間,如果在規定時間內加載出來了這個節點,就回傳查找的節點;如果到了規定時間依然沒有加載出該節點,則拋出超時例外,示例如下:

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
browser = webdriver.Chrome()
browser.get('https://www.taobao.com/')
wait = WebDriverWait(browser, 10)
input = wait.until(EC.presence_of_element_located((By.ID, 'q')))
button = wait.until(EC.element_to_be_clickable((By.CSS_SELECTOR, '.btn-search')))
print(input, button)

這里首先引入WebDriverWait這個物件,指定最長等待時間,然后呼叫它的until()方法,傳入要等待條件expected_conditions,比如,這里傳入了presence_of_element_located這個條件,代表節點出現的意思,其引數是節點的定位元組,也就是ID為q的節點搜索框,

這樣可以做到的效果就是,在10秒內如果ID為q的節點(即搜索框)成功加載出來,就回傳該節點;如果超過10秒還沒有加載出來,就拋出例外,

對于按鈕,可以更改一下等待條件,比如改為element_to_be_clickable,也就是可點擊,所以查找按鈕時查找CSS選擇器為.btn-search的按鈕,如果10秒內它是可點擊的,也就是成功加載出來了,就回傳這個按鈕節點;如果超過10秒還不可點擊,也就是沒有加載出來,就拋出例外,

運行代碼,在網速較佳的情況下是可以成功加載出來的,

控制臺的輸出如下:

<selenium.webdriver.remote.webelement.WebElement (session="07dd2fbc2d5b1ce40e82b9754aba8fa8", element="0.564264629
4074107-1")>
<selenium.webdriver.remote.webelement.WebElement (session="07dd2fbc2d5b1ce40e82b9754aba8fa8", element="0.564264629
4074107-2")>

可以看到,控制臺成功輸出了兩個節點,它們都是WebElement型別,

如果網路有問題,10秒內沒有成功加載,那就拋出TimeoutException例外,此時控制臺的輸出如下:

TimeoutException Traceback (most recent call last)
<ipython-input-4-f3d73973b223> in <module>()
      7 browser.get('https://www.taobao.com/')
      8 wait = WebDriverWait(browser, 10)
----> 9 input = wait.until(EC.presence_of_element_located((By.ID, 'q')))

關于等待條件,其實還有很多,比如判斷標題內容,判斷某個節點內是否出現了某文字等,表7-1列出了所有的等待條件,

                                                           表7-1 等待條件及其含義

b9c54f7f3725721f7eb8fafbac5459d.png

關于更多等待條件的引數及用法,可以參考官方檔案:http://selenium-python.readthedocs.io/api.html#module-selenium.webdriver.support.expected_conditions,

12. 前進和后退

平常使用瀏覽器時都有前進和后退功能,Selenium也可以完成這個操作,它使用back()方法后退,使用forward()方法前進,示例如下:

import time
from selenium import webdriver
browser = webdriver.Chrome()
browser.get('https://www.baidu.com/')
browser.get('https://www.taobao.com/')
browser.get('https://www.python.org/')
browser.back()
time.sleep(1)
browser.forward()
browser.close()

這里我們連續訪問3個頁面,然后呼叫back()方法回到第二個頁面,接下來再呼叫forward()方法又可以前進到第三個頁面,

13. Cookies

使用Selenium,還可以方便地對Cookies進行操作,例如獲取、添加、洗掉Cookies等,示例如下:

from selenium import webdriver
browser = webdriver.Chrome()
browser.get('https://www.zhihu.com/explore')
print(browser.get_cookies())
browser.add_cookie({'name': 'name', 'domain': 'www.zhihu.com', 'value': 'germey'})
print(browser.get_cookies())
browser.delete_all_cookies()
print(browser.get_cookies())

首先,我們訪問了知乎,加載完成后,瀏覽器實際上已經生成Cookies了,接著,呼叫get_cookies()方法獲取所有的Cookies,然后,我們添加一個Cookie,這里傳入一個字典,有name、domain和value等內容,接下來,再次獲取所有的Cookies,可以發現,結果就多了這一項新加的Cookie,最后,呼叫delete_all_cookies()方法洗掉所有的Cookies,再重新獲取,發現結果就為空了,

控制臺的輸出如下:

[{'secure': False, 'value': '"NGM0ZTM5NDAwMWEyNDQwNDk5ODlkZWY3OTkxY2I0NDY=|1491604091|236e34290a6f407bfbb517888
849ea509ac366d0"', 'domain': '.zhihu.com', 'path': '/', 'httpOnly': False, 'name': 'l_cap_id', 'expiry': 
1494196091.403418}]
[{'secure': False, 'value': 'germey', 'domain': '.www.zhihu.com', 'path': '/', 'httpOnly': False, 'name': 
'name'}, 
{'secure': False, 'value': '"NGM0ZTM5NDAwMWEyNDQwNDk5ODlkZWY3OTkxY2I0NDY=|1491604091|236e34290a6f407bfbb517888849
ea509ac366d0"', 'domain': '.zhihu.com', 'path': '/', 'httpOnly': False, 'name': 'l_cap_id', 'expiry': 
1494196091.403418}]
[]

14. 選項卡管理

在訪問網頁的時候,會開啟一個個選項卡,在Selenium中,我們也可以對選項卡進行操作,示例如下:

import time
from selenium import webdriver
browser = webdriver.Chrome()
browser.get('https://www.baidu.com')
browser.execute_script('window.open()')
print(browser.window_handles)
browser.switch_to_window(browser.window_handles[1])
browser.get('https://www.taobao.com')
time.sleep(1)
browser.switch_to_window(browser.window_handles[0])
browser.get('https://python.org')

控制臺的輸出如下:

['CDwindow-4f58e3a7-7167-4587-bedf-9cd8c867f435', 'CDwindow-6e05f076-6d77-453a-a36c-32baacc447df']

首先訪問了百度,然后呼叫了execute_script()方法,這里傳入window.open()這個JavaScript陳述句新開啟一個選項卡,接下來,我們想切換到該選項卡,這里呼叫window_handles屬性獲取當前開啟的所有選項卡,回傳的是選項卡的代號串列,要想切換選項卡,只需要呼叫switch_to_window()方法即可,其中引數是選項卡的代號,這里我們將第二個選項卡代號傳入,即跳轉到第二個選項卡,接下來在第二個選項卡下打開一個新頁面,然后切換回第一個選項卡重新呼叫switch_to_window()方法,再執行其他操作即可,

15. 例外處理

在使用Selenium的程序中,難免會遇到一些例外,例如超時、節點未找到等錯誤,一旦出現此類錯誤,程式便不會繼續運行了,這里我們可以使用try except陳述句來捕獲各種例外,

首先,演示一下節點未找到的例外,示例如下:

from selenium import webdriver
browser = webdriver.Chrome()
browser.get('https://www.baidu.com')
browser.find_element_by_id('hello')

這里首先打開百度頁面,然后嘗試選擇一個并不存在的節點,此時就會遇到例外,

運行之后控制臺的輸出如下:

NoSuchElementException Traceback (most recent call last)
<ipython-input-23-978945848a1b> in <module>()
      3 browser = webdriver.Chrome()
      4 browser.get('https://www.baidu.com')
----> 5 browser.find_element_by_id('hello')

可以看到,這里拋出了NoSuchElementException例外,這通常是節點未找到的例外,為了防止程式遇到例外而中斷,我們需要捕獲這些例外,示例如下:

from selenium import webdriver
from selenium.common.exceptions import TimeoutException, NoSuchElementException
browser = webdriver.Chrome()
try:
    browser.get('https://www.baidu.com')
except TimeoutException:
    print('Time Out')
try:
    browser.find_element_by_id('hello')
except NoSuchElementException:
    print('No Element')
finally:
    browser.close()

這里我們使用try except來捕獲各類例外,比如,我們對find_element_by_id()查找節點的方法捕獲NoSuchElementException例外,這樣一旦出現這樣的錯誤,就進行例外處理,程式也不會中斷了,

控制臺的輸出如下:

No Element

懂了吧?最后注意:光理論是不夠的,這里順便送大家一套2020最新python入門到高級專案實戰視頻教程,可以去小編的Python交流.裙 :七衣衣九七七巴而五(數字的諧音)轉換下可以找到了,還可以跟老司機交流討教!
本文的文字及圖片來源于網路加上自己的想法,僅供學習、交流使用,不具有任何商業用途,著作權歸原作者所有,如有問題請及時聯系我們以作處理,

轉載請註明出處,本文鏈接:https://www.uj5u.com/houduan/141416.html

標籤:Python

上一篇:幫助你更好的理解Spring回圈依賴

下一篇:Python爬蟲是如何遍歷檔案樹呢?一招教你

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 【C++】Microsoft C++、C 和匯編程式檔案

    ......

    uj5u.com 2020-09-10 00:57:23 more
  • 例外宣告

    相比于斷言適用于排除邏輯上不可能存在的狀態,例外通常是用于邏輯上可能發生的錯誤。 例外宣告 Item 1:當函式不可能拋出例外或不能接受拋出例外時,使用noexcept 理由 如果不打算拋出例外的話,程式就會認為無法處理這種錯誤,并且應當盡早終止,如此可以有效地阻止例外的傳播與擴散。 示例 //不可 ......

    uj5u.com 2020-09-10 00:57:27 more
  • Codeforces 1400E Clear the Multiset(貪心 + 分治)

    鏈接:https://codeforces.com/problemset/problem/1400/E 來源:Codeforces 思路:給你一個陣列,現在你可以進行兩種操作,操作1:將一段沒有 0 的區間進行減一的操作,操作2:將 i 位置上的元素歸零。最終問:將這個陣列的全部元素歸零后操作的最少 ......

    uj5u.com 2020-09-10 00:57:30 more
  • UVA11610 【Reverse Prime】

    本人看到此題沒有翻譯,就附帶了一個自己的翻譯版本 思考 這一題,它的第一個要求是找出所有 $7$ 位反向質數及其質因數的個數。 我們應該需要質數篩篩選1~$10^{7}$的所有數,這里就不慢慢介紹了。但是,重讀題,我們突然發現反向質數都是 $7$ 位,而將它反過來后的數字卻是 $6$ 位數,這就說明 ......

    uj5u.com 2020-09-10 00:57:36 more
  • 統計區間素數數量

    1 #pragma GCC optimize(2) 2 #include <bits/stdc++.h> 3 using namespace std; 4 bool isprime[1000000010]; 5 vector<int> prime; 6 inline int getlist(int ......

    uj5u.com 2020-09-10 00:57:47 more
  • C/C++編程筆記:C++中的 const 變數詳解,教你正確認識const用法

    1、C中的const 1、區域const變數存放在堆疊區中,會分配記憶體(也就是說可以通過地址間接修改變數的值)。測驗代碼如下: 運行結果: 2、全域const變數存放在只讀資料段(不能通過地址修改,會發生寫入錯誤), 默認為外部聯編,可以給其他源檔案使用(需要用extern關鍵字修飾) 運行結果: ......

    uj5u.com 2020-09-10 00:58:04 more
  • 【C++犯錯記錄】VS2019 MFC添加資源不懂如何修改資源宏ID

    1. 首先在資源視圖中,添加資源 2. 點擊新添加的資源,復制自動生成的ID 3. 在解決方案資源管理器中找到Resource.h檔案,編輯,使用整個專案搜索和替換的方式快速替換 宏宣告 4. Ctrl+Shift+F 全域搜索,點擊查找全部,然后逐個替換 5. 為什么使用搜索替換而不使用屬性視窗直 ......

    uj5u.com 2020-09-10 00:59:11 more
  • 【C++犯錯記錄】VS2019 MFC不懂的批量添加資源

    1. 打開資源頭檔案Resource.h,在其中預先定義好宏 ID(不清楚其實ID值應該設定多少,可以先新建一個相同的資源項,再在這個資源的ID值的基礎上遞增即可) 2. 在資源視圖中選中專案資源,按F7編輯資源檔案,按 ID 型別 相對路徑的形式添加 資源。(別忘了先把檔案拷貝到專案中的res檔案 ......

    uj5u.com 2020-09-10 01:00:19 more
  • C/C++編程筆記:關于C++的參考型別,專供新手入門使用

    今天要講的是C++中我最喜歡的一個用法——參考,也叫別名。 參考就是給一個變數名取一個變數名,方便我們間接地使用這個變數。我們可以給一個變數創建N個參考,這N + 1個變數共享了同一塊記憶體區域。(參考型別的變數會占用記憶體空間,占用的記憶體空間的大小和指標型別的大小是相同的。雖然參考是一個物件的別名,但 ......

    uj5u.com 2020-09-10 01:00:22 more
  • 【C/C++編程筆記】從頭開始學習C ++:初學者完整指南

    眾所周知,C ++的學習曲線陡峭,但是花時間學習這種語言將為您的職業帶來奇跡,并使您與其他開發人員區分開。您會更輕松地學習新語言,形成真正的解決問題的技能,并在編程的基礎上打下堅實的基礎。 C ++將幫助您養成良好的編程習慣(即清晰一致的編碼風格,在撰寫代碼時注釋代碼,并限制類內部的可見性),并且由 ......

    uj5u.com 2020-09-10 01:00:41 more
最新发布
  • Rust中的智能指標:Box<T> Rc<T> Arc<T> Cell<T> RefCell<T> Weak

    Rust中的智能指標是什么 智能指標(smart pointers)是一類資料結構,是擁有資料所有權和額外功能的指標。是指標的進一步發展 指標(pointer)是一個包含記憶體地址的變數的通用概念。這個地址參考,或 ” 指向”(points at)一些其 他資料 。參考以 & 符號為標志并借用了他們所 ......

    uj5u.com 2023-04-20 07:24:10 more
  • Java的值傳遞和參考傳遞

    值傳遞不會改變本身,參考傳遞(如果傳遞的值需要實體化到堆里)如果發生修改了會改變本身。 1.基本資料型別都是值傳遞 package com.example.basic; public class Test { public static void main(String[] args) { int ......

    uj5u.com 2023-04-20 07:24:04 more
  • [2]SpinalHDL教程——Scala簡單入門

    第一個 Scala 程式 shell里面輸入 $ scala scala> 1 + 1 res0: Int = 2 scala> println("Hello World!") Hello World! 檔案形式 object HelloWorld { /* 這是我的第一個 Scala 程式 * 以 ......

    uj5u.com 2023-04-20 07:23:58 more
  • 理解函式指標和回呼函式

    理解 函式指標 指向函式的指標。比如: 理解函式指標的偽代碼 void (*p)(int type, char *data); // 定義一個函式指標p void func(int type, char *data); // 宣告一個函式func p = func; // 將指標p指向函式func ......

    uj5u.com 2023-04-20 07:23:52 more
  • Django筆記二十五之資料庫函式之日期函式

    本文首發于公眾號:Hunter后端 原文鏈接:Django筆記二十五之資料庫函式之日期函式 日期函式主要介紹兩個大類,Extract() 和 Trunc() Extract() 函式作用是提取日期,比如我們可以提取一個日期欄位的年份,月份,日等資料 Trunc() 的作用則是截取,比如 2022-0 ......

    uj5u.com 2023-04-20 07:23:45 more
  • 一天吃透JVM面試八股文

    什么是JVM? JVM,全稱Java Virtual Machine(Java虛擬機),是通過在實際的計算機上仿真模擬各種計算機功能來實作的。由一套位元組碼指令集、一組暫存器、一個堆疊、一個垃圾回收堆和一個存盤方法域等組成。JVM屏蔽了與作業系統平臺相關的資訊,使得Java程式只需要生成在Java虛擬機 ......

    uj5u.com 2023-04-20 07:23:31 more
  • 使用Java接入小程式訂閱訊息!

    更新完微信服務號的模板訊息之后,我又趕緊把微信小程式的訂閱訊息給實作了!之前我一直以為微信小程式也是要企業才能申請,沒想到小程式個人就能申請。 訊息推送平臺🔥推送下發【郵件】【短信】【微信服務號】【微信小程式】【企業微信】【釘釘】等訊息型別。 https://gitee.com/zhongfuch ......

    uj5u.com 2023-04-20 07:22:59 more
  • java -- 緩沖流、轉換流、序列化流

    緩沖流 緩沖流, 也叫高效流, 按照資料型別分類: 位元組緩沖流:BufferedInputStream,BufferedOutputStream 字符緩沖流:BufferedReader,BufferedWriter 緩沖流的基本原理,是在創建流物件時,會創建一個內置的默認大小的緩沖區陣列,通過緩沖 ......

    uj5u.com 2023-04-20 07:22:49 more
  • Java-SpringBoot-Range請求頭設定實作視頻分段傳輸

    老實說,人太懶了,現在基本都不喜歡寫筆記了,但是網上有關Range請求頭的文章都太水了 下面是抄的一段StackOverflow的代碼...自己大修改過的,寫的注釋挺全的,應該直接看得懂,就不解釋了 寫的不好...只是希望能給視頻網站開發的新手一點點幫助吧. 業務場景:視頻分段傳輸、視頻多段傳輸(理 ......

    uj5u.com 2023-04-20 07:22:42 more
  • Windows 10開發教程_編程入門自學教程_菜鳥教程-免費教程分享

    教程簡介 Windows 10開發入門教程 - 從簡單的步驟了解Windows 10開發,從基本到高級概念,包括簡介,UWP,第一個應用程式,商店,XAML控制元件,資料系結,XAML性能,自適應設計,自適應UI,自適應代碼,檔案管理,SQLite資料庫,應用程式到應用程式通信,應用程式本地化,應用程式 ......

    uj5u.com 2023-04-20 07:22:35 more