Python、pip和scrapy的安裝——Python爬蟲學習筆記1


Python作為爬蟲語言非常受歡迎,近期項目需要,很是學習了一番Python,在此記錄學習過程:
首先因為是初學,而且當時要求很快速的出demo,所以首先想到的是框架,一番查找選用了Python界大名鼎鼎的Scrapy框架,這個框架歷史悠久,直接pip安裝,安裝使用非常方便。

先介紹Python的安裝
windows去鏈接https://www.python.org/downloads/windows/下載Python的安裝包,選擇對應的版本,選擇對應系統安裝包
再次說明,本文安裝的是Python2.7,因為Python3暫時很多框架不支持,所以本文安裝的是Python2.7

下載后,雙擊打開,一點一點下一步就可以了
主要是windows需要設置環境變量,才能在CMD中使用命令行
環境變量設置:
右擊“我的電腦”->點擊屬性->點擊高級屬性設置->選擇環境變量中的Path,雙擊,在Paht行添加剛才選擇的Python安裝路徑,路徑需要使用分好;隔開(英文字符),最后設置成功后,在CMD中輸入python會有先關狀態提示

 

 

 

 

pip安裝
安裝好Python后,查看是否安裝pip,pip 是 Python 包管理工具,該工具提供了對Python 包的查找、下載、安裝、卸載的功能。
目前如果你在 python.org 下載最新版本的安裝包,則是已經自帶了該工具。
Python 2.7.9 + 或 Python 3.4+ 以上版本都自帶 pip 工具。
如果不確定,windows在開始菜單->運行->cmd->輸入

pip --version

如果顯示了版本號則是已經安裝過,如果沒有那就需要去https://pypi.org/project/pip/#files 里面下載Source壓縮文件回來,手動安裝

解壓剛下載的文件,使用CMD進入到解壓后的pip文件夾,輸入命令行安裝pip

python setup.py install

執行完畢后,繼續輸入

pip list

可能會發現還是提示錯誤,無法識別命令行,這時候可能是沒有加入環境變量的原因
按照之前介紹的添加Python環境變量的方法,添加pip的環境變量(加入我的Python安裝在D:/Python)為:D:\Python\Scripts\;
然后再用CMD命令行輸入pip list 就發現有介紹了

 

Scrapy框架的安裝
在pip已經安裝好的情況下,直接使用命令行安裝Scrapy,CDM輸入

pip install scrapy

安裝完之后命令行輸入scrapy查看介紹,scrapy是不用手動加入環境變量的,安裝的時候自動加入過了


安裝之前請記住一點,scrapy框架是必須要C++9.0支持的,如果安裝有報錯,請自行百度安裝C++ 9.0的辦法

費了九牛二虎之力,總算是把python給裝好了,下節就可以愉快的寫代碼啦

 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM