熟悉puppeteer模塊時做的小demo，代碼十分簡單易懂，分享給大家交流學習，請勿惡意抓取或做違反國家政策的行為。 一、前期准備工作 首先需要安裝nodejs，並初始化一個項目，安裝puppeteer模板以及log4js日志模板並保存。 　　 npm install ...

關於熱圖 在網站分析行業中，網站熱圖能夠很好的反應用戶在網站的操作行為，具體分析用戶的喜好，對網站進行針對性的優化，一個熱圖的例子（來源於ptengine） 上圖中能很清晰的看到用戶關注點在那 ...

已失效！ ...

...

　　最近發現淘寶網的滑塊直接拖到右邊就可以了，不用寫軌跡方程，直接上代碼吧 ...

原來打開淘寶網頁發現不登陸也可以查看商品信息，以為不用登錄也可以爬取數據，但是后來發現需要登錄才能爬取信息。並且淘寶的登錄名和密碼都是經過算法加密的。所以需要得到加密后的登錄名和密碼。剛開始用谷歌瀏覽器和IE瀏覽器都不能找到有用的信息。安裝上火狐瀏覽器后才按照教程得到了相關信息。 https ...

之前想爬取一些淘寶的數據，后來發現需要登錄，找了很多的資料，有個使用request的sessions加上cookie來登錄的，cookie的獲取在登錄后使用開發者工具可以找到。不過這個登錄后獲得的網頁的代碼是靜態的，獲取動態網頁還得另尋他法，一般需要的數據可以在網頁的源碼中得到，但是你知道的，有些 ...

@ 目錄 簡介 編寫思路 使用教程 演示圖片 源代碼 簡介 模擬登錄淘寶已經不是一件新鮮的事情了，過去我曾經使用get/post方式進行爬蟲，同時也加入IP代理池進行跳過檢驗，但隨着大型網站的升級，采取該策略比較 ...