前言
本文的文字及圖片來源于網路,僅供學習、交流使用,不具有任何商業用途,著作權歸原作者所有,如有問題請及時聯系我們以作處理，
作者｜ About_two
來源｜python翻車魚
Selenium介紹
Selenium是一個Web的自動化測驗工具，最初是為網站自動化測驗而開發的，Selenium 可以直接運行在瀏覽器上，它支持所有主流的瀏覽器（包括PhantomJS這些無界面的瀏覽器（2018年開發者說暫停開發，chromedriver也可以實作同樣的功能）），可以接收指令，讓瀏覽器自動加載頁面，獲取需要的資料，甚至頁面截屏，
安裝
pip install selenium
二、Chromedriver的介紹
Chromedriver 也是一個能夠被selenium驅動的瀏覽器，但是和PhantomJS（網上有很多這個的介紹）的區別在于它是有界面的，Chromedriver下載你需要先查看自己的Chrome瀏覽器的版本，然后選擇對應的Chromedriver，
- 下載地址：
- https://npm.taobao.org/mirrors/chromedriver
----- Windows 下安裝方式
chromedriver_win32.zip : 版本 ChromeDriver v2.32 (2017-08-30)
（支持 Chrome v59-61）
1. 解壓 chromedriver_win32.zip
2. 將 chromedriver.exe 移動到 Python安裝目錄下
（其實放哪都可以，但是需要配環境變數，放Python安裝目錄下省事）
注意：Chromedriver和電腦上的chrome版本有對應關系，建議使用最新的Chromedriver版本并且更新chrome瀏覽器到最新版
三、Selenium的基本使用
是否開啟無頭模式（即是否需要界面）
from selenium.webdriver import Chrome from selenium.webdriver.chrome.options import Options option = Options() # 實體化option物件 option.add_argument("--headless") # 給option物件添加無頭引數 driver = Chrome(executable_path=r"E:\python學習\python爬蟲\chromedriver.exe", # 實體化瀏覽器物件,可以指定chromedriver的路徑,不指定的話 默認會去找python解釋器的同級目錄 options=option) # 實體化瀏覽器物件的時候 把option物件帶進來
保存當前網頁的截圖
from selenium.webdriver import Chrome
driver = Chrome(executable_path=r"E:\python學習\python爬蟲\chromedriver.exe", # 實體化瀏覽器物件,可以指定chromedriver的路徑,不指定的話 默認會去找python解釋器的同級目錄
# options=option) # 實體化瀏覽器物件的時候 把option物件帶進來
)
driver.get("https://www.baidu.com/")
driver.save_screenshot('baidu.png') # 保存當前網頁的截圖
driver.close() # 關閉當前網頁
瀏覽器視窗最大化
from selenium.webdriver import Chrome driver = Chrome(executable_path=r"E:\python學習\python爬蟲\chromedriver.exe") driver.maximize_window() # 瀏覽器視窗最大化
在input輸入框中輸入資料
from selenium.webdriver import Chrome driver = Chrome(executable_path=r"E:\python學習\python爬蟲\chromedriver.exe") driver.maximize_window() # 瀏覽器視窗最大化 ele = driver.find_element_by_id("kw") # 找到id為kw的節點 ele.send_keys("數學") # 向input輸入框輸入資料
模擬點擊
from selenium.webdriver import Chrome driver = Chrome(executable_path=r"E:\python學習\python爬蟲\chromedriver.exe") driver.maximize_window() # 瀏覽器視窗最大化 ele = driver.find_element_by_id("kw") # 找到id為kw的節點 ele.send_keys("數學") # 向input輸入框輸入資料 ele = driver.find_element_by_id('su') # 找到id為su的節點（百度一下） ele.click() # 模擬點擊
根據文本值查找節點
# 找到文本值為百度一下的節點
driver.find_element_by_link_text("百度一下")
# 根據鏈接包含的文本獲取元素串列，模糊匹配
driver.find_elements_by_partial_link_text("度一下")
獲取當前節點的文本
ele.text # 獲取當前節點的文本 ele.get_attribute("data-click") # 獲取到屬性對應的value
列印當前網頁的一些資訊
print(driver.page_source) # 列印網頁的原始碼 print(driver.get_cookies()) # 列印出網頁的cookie print(driver.current_url) # 列印出當前網頁的url
關閉瀏覽器
driver.close() # 關閉當前網頁 driver.quit() # 直接關閉瀏覽器
頁面等待
from selenium.webdriver import Chrome import time from selenium.webdriver.common.by import By from selenium.webdriver.support.ui import WebDriverWait from selenium.webdriver.support import expected_conditions as EC driver = Chrome(executable_path=r"E:\python學習\python爬蟲\chromedriver.exe") driver.get("https://www.baidu.com/") # time.sleep(1) driver.implicitly_wait(5) # 跟time.sleep類似，比time.sleep更加智能，不會被動的等待時間結束 wait = WebDriverWait(driver, 10) # 等待時間 ele = wait.until(EC.presence_of_element_located((By.ID, "kw"))) ele.send_keys("數學") wait = WebDriverWait(driver, 10) ele = wait.until(EC.element_to_be_clickable((By.ID, 'su'))) ele.click() time.sleep(3) driver.close()
四、Selenium切換視窗
1. 獲取當前所有的視窗
current_windows = driver.window_handles #回傳一個list.
2. 根據視窗索引進行切換
driver.switch_to.window(current_windows[0])
3. selenium切換iframe
driver.switch_to.frame("iframe的id")
4.切換進入alert
alert = driver.switch_to.alert()
五、Selenium滑動界面
from selenium.webdriver import Chrome import time driver = Chrome(executable_path=r"E:\python學習\python爬蟲\chromedriver.exe") driver.get( "https://www.baidu.com/s?ie=utf-8&f=8&rsv_bp=1&rsv_idx=1&tn=78000241_12_hao_pg&wd=selenium%20js%E6%BB%91%E5%8A%A8&fenlei=256&rsv_pq=8215ec3a00127601&rsv_t=a763fm%2F7SHtPeSVYKeWnxKwKBisdp%2FBe8pVsIapxTsrlUnas7%2F7Hoo6FnDp6WsslfyiRc3iKxP2s&rqlang=cn&rsv_enter=1&rsv_dl=tb&rsv_sug3=31&rsv_sug1=17&rsv_sug7=100&rsv_sug2=0&rsv_btype=i&inputT=9266&rsv_sug4=9770") # 1.滾動到網頁底部 js = "document.documentElement.scrollTop=800" # 執行js driver.execute_script(js) time.sleep(1) # 滾動到頂部 js = "document.documentElement.scrollTop=0" driver.execute_script(js) # 執行js time.sleep(1) driver.close()
selenium的優缺點
selenium能夠執行頁面上的js，對于js渲染的資料和模擬登陸處理起來非常容易，
selenium由于在獲取頁面的程序中會發送很多請求，所以效率非常低，所以在很多時候需要酌情使用，
PS：如有需要Python學習資料的小伙伴可以加下方的群去找免費管理員領取
可以免費領取原始碼、專案實戰視頻、PDF檔案等
轉載請註明出處，本文鏈接：https://www.uj5u.com/houduan/6589.html
標籤：Python