【Python3爬蟲】selenium入門


  selenium 是一個用於Web應用程序測試的工具。Selenium測試直接運行在瀏覽器中,就像真正的用戶在操作一樣。支持的瀏覽器包括IE(7, 8, 9, 10, 11),Mozilla Firefox,Safari,Google Chrome,Opera等。

 

環境配置:

  1、Windows系統

  2、Python3.5(已經安裝好pip

  3、Chrome瀏覽器(下載地址:https://pc.qq.com/detail/1/detail_2661.html

 

安裝Selenium:

  推薦使用pip進行安裝,代碼如下:

pip install selenium

  安裝好之后,可以在python命令行模式輸入以下代碼驗證是否安裝正確:

import selenium

 

安裝Chromedriver:

  chromedriver版本和chrome版本的對應表如下:

chromedriver版本 支持的Chrome版本
v2.40 v66-68
v2.39 v66-68
v2.38 v65-67
v2.37 v64-66
v2.36 v63-65
v2.35 v62-64
v2.34 v61-63
v2.33 v60-62
v2.32 v59-61
v2.31 v58-60
v2.30 v58-60
v2.29 v56-58
v2.28 v55-57
v2.27 v54-56
v2.26 v53-55
v2.25 v53-55
v2.24 v52-54
v2.23 v51-53
v2.22 v49-52
v2.21 v46-50
v2.20 v43-48
v2.19 v43-47
v2.18 v43-46
v2.17 v42-43
v2.13 v42-45
v2.15 v40-43
v2.14 v39-42
v2.13 v38-41
v2.12 v36-40
v2.11 v36-40
v2.10 v33-36
v2.9 v31-34
v2.8 v30-33
v2.7 v30-33
v2.6 v29-32
v2.5 v29-32
v2.4 v29-32

附chromedriver下載鏈接:http://npm.taobao.org/mirrors/chromedriver/

 

基本使用:

  Selenium支持非常多的瀏覽器,如Chrome、Firefox、Edge等,還有Android、BlackBerry等手機端的瀏覽器。另外,也支持無界面瀏覽器PhantomJS。

  我們可以用以下方式進行初始化:

from selenium import webdriver

browser = webdriver.Chrome()

  我們可以用get()方法來請求網頁,參數傳入鏈接URL即可,例如:

browser.get("https://www.baidu.com/")

  我們的第一個代碼是要打開chrome瀏覽器,然后跳轉到百度首頁,再打印出網頁源碼,具體代碼如下:

1 from selenium import webdriver 2 
3 browser = webdriver.Chrome( 4     executable_path="C:\\Users\Administrator\AppData\Local\Google\Chrome\Application\chromedriver.exe") 5 browser.get("https://www.baidu.com/") 6 print(browser.page_source) 7 browser.quit()

 

 

 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM