由於是初學者,業余學習,習慣使用windows,初次了解到pyspider寫代碼和調試代碼非常簡便;作者binux是在Ubuntu下部署測試的。在作者的博客看到windows下安裝的討論。windows直接安裝失敗主要是lxml、pycurl安裝失敗,需要用第三方的庫安裝
pycurl和lxml等第三方包可以在這里下載
http://www.lfd.uci.edu/~gohlke/pythonlibs
- 安裝lxml-xx.whl、pycurl-xx.whl,先下載lxml-xx.whl,然后切換到下載目錄,用pip安裝,命令pip install xx.whl(xx.whl改為 實際文件名)
- pip install pyspider。如果遇到提示缺少依賴包,請到這里找 http://www.lfd.uci.edu/~gohlke/pythonlibs/,然后pip install xx.whl (xx.whl改為實際文件名),然后重試。
- 完成后,請耐心看作者博客和文檔學習。
文檔 http://doc.scrapy.org/en/latest/
作者博客 http://binux.me/