基於正則表達式用requests下載網頁中的圖片

在慕課網看了正則表達式和requests的課程后，為了加深學習記憶，決定簡單記錄。

 

實現步驟：

1、先打開你要下載的網頁，查看源碼找出圖片位置

2、編寫正則匹配圖片url

3、保存圖片到本地

 

圖文步驟：

1、以圖蟲網為例（https://tuchong.com/），隨便點進去個主題（https://mrpig.tuchong.com/14390318/）

定位圖片

2、寫出正則

通過觀察可以發現圖片url是以 // 開頭以 .jpg結尾的

則正則表達式為 “//.+\.jpg”

import requests
import re

url='https://mrpig.tuchong.com/14390318/'
response = requests.get(url)
url_lst = re.findall(r"//.+\.jpg",response.text)
print url_lst

輸出

通過拷貝到瀏覽器，發現前面兩個圖片不是我們感興趣的，則把他們切掉 [2:]

3、最后使用一個遍歷，將圖片保存到本地。

 

完整代碼：

import requests
import re

url='https://mrpig.tuchong.com/14390318/'
response = requests.get(url)
url_lst = re.findall(r"//.+\.jpg",response.text)[2:]
i=0
for url in url_lst:
    with open(str(i)+".jpg","wb") as fd:
        #在url前面加上http
        response=requests.get("http:"+url)
        fd.write(response.content)
        print '圖片',i,"保存成功\n"
        i+=1