Ubuntu下配置python完成爬蟲任務（筆記一） 目標： 作為一個.NET汪，是時候去學習一下Linux下的操作了。為此選擇了python來邊學習Linux，邊學python，熟能生巧嘛。 前期目標是完成環境配置，apt的簡單操作。 之后按照網上的文檔學習一下python的操作，順便 ...

地址：https://peter.sh/experiments/chromium-command-line-switches/ options.add_argument('--headless') ...

1、下載並安裝最新的Google Chrome版本執行如下命令： 2、下載並安裝最新的amd64 chromedriver版本兩種方式（其實是兩個不同網址，但文件都一樣）：(1) 鏈接 ...

最近在學習爬蟲的編寫，使用selenium模塊時候，遇到了很多坑，本blog的目的是總結一下遇到的坑和解決辦法，以便后來人少走彎路！ 以下介紹均以Python3.x為基准進行，基於windows平台的。 1. Selenium配置 我們在做爬蟲的時候，避免不了要使用selenium模塊 ...

1.安裝selenium pip3 install selenium 或者通過PyCharm編譯器安裝 2.下載Chromedriver 1）下載地址：http://chromedriver.storage.googleapis.com/index.html ...

Web自動化測試工具，可運行在瀏覽器，根據指令操作瀏覽器，只是工具，必須與第三方瀏覽器結合使用，相比於之前學的爬蟲只是慢了一點而已。而且這種方法爬取的東西不用在意時候ajax動態加載等反爬機制。因此找標簽可以直接F12找，不用確定源碼中是否存在。 安裝 Linux: sudo pip3 ...

參考：http://www.cnblogs.com/fnng/archive/2013/05/29/3106515.html ubuntu 安裝過程： 1、安裝：setuptools $ apt-get install python-setuptools 2、安裝pip ...

由於剛開始學習Linux，對佷多操作還不熟悉，遇到了一些困難，在這里記錄一下。 1 安裝vim。俺我現在的理解，vim有控制台版本和GUI版本。控制台版本貌似是Ubuntu自帶的，可以在終端輸入 vim執行一下。GUI版本需要自己下，在終端執行 sudo apt-get ...