Python中包含了兩個網絡模塊，分別是urllib與urllib2，urllib2是urllib的升級版，擁有更強大的功能。urllib，讓我們可以像讀文件一樣，讀取http與ftp。而urllib2，則在urllib的基礎上，提供了更多的接口，如cookie、代理、認證等更強大的功能 ...

當處理HTTP鏈接的時候，鏈接如果有中文的話，那么發起HTTP鏈接的時候，一定要先把URL編碼，否則就會出現問題。而在python中，用 urllib2.quote(URL)進入編碼和urllib2.unquote(URL)解碼的時候，有一點需要注意，就是URL字符串不能是 unicode編碼 ...

Python的urllib和urllib2模塊都做與請求URL相關的操作，但他們提供不同的功能。他們兩個最顯着的差異如下： urllib2可以接受一個Request對象，並以此可以來設置一個URL的headers，但是urllib只接收一個URL。這意味着，你不能偽裝你的用戶代理字符串 ...

在 正式並入某大公司之后，網絡必須設置為統一的proxy，好的方面沒看到，但是立即讓我一的一個小工具不能工作了。在之前使用urllib2庫，無需設置proxy，一切工作正常。在必須使用proxy之后，遇到了一系列的問題1. 使用urllib2的proxy import urllib2 ...

urllib2.urlopen(url, data=None, timeout=<object object>) ：用於打開一個URL，URL可以是一個字符串也可以是一個請求對象，data 用於指定要發送到服務器的額外數據的字符串，timeout 用於設置打開URL的超時 ...

在模擬登錄一些平台后，在抓取平台數據時需要將cookie設置到urllib2中，python有一個自己的cookielib庫，可實現cookie的設置 ...

所謂網頁抓取，就是把URL地址中指定的網絡資源從網絡流中讀取出來，保存到本地。在Python中有很多庫可以用來抓取網頁，我們先學習urllib2。 urllib2是Python2.x自帶的模塊(不需要下載，導入即可使用) urllib2官網文檔：https ...

Python網頁抓取urllib,urllib2,httplib[1] 分類： Python筆記 2012-03-17 16:02 78人閱讀 評論(0) 收藏 舉報 前階段使用到ftp，寫了個工具腳本http ...