昨天收到公眾號粉絲的爬蟲需求:
抓取平台:天貓或者淘寶
爬取對象:某個商品的各分類的價格和庫存數
因此花費兩天時間抓取完成,基於python3 抓取, flask 可視化頁面查看,目前支持網頁可視化查看:

用途
實時監控競品銷量:

使用方式
下載代碼
首先在我的 github 上面下載該項目的代碼,項目地址為:
代碼的結構路徑為:
---static
---bootstrap.min.css
---templates
---htmlWeb.py
運行代碼
在當前目錄下運行代碼
python3 htmlWeb.py

在瀏覽器里面打開網址:127.0.0.1:5000 顯示如下頁面:

只要在輸入框輸入商品的 id 即可
id 的來源為搜索淘寶的商品關鍵詞后,點擊進入詳情頁,可以在 url 中看到所需要的商品的 id 。例如搜索關鍵詞 女裝,點擊其中一個進入頁面:

新頁面的 url 中的 id 即為商品唯一的 id :

即 url 中的 id=586378509246
其他相關
如果需要基於關鍵字搜索商品價格等,可以查看如下項目:
爬蟲代碼不知道怎么寫
關注公眾號讓作者幫你解決

