python爬蟲之快速對js內容進行破解 今天介紹下數據被js加密后的破解方法。距離上次發文已經過去半個多月了，我寫文章的主要目的是把從其它地方學到的東西做個記錄順便分享給大家，我承認自己是個懶豬。不知道小伙伴們有沒有遇到同樣的情況，公眾號，博客關注了一堆，但是真正看並去學習的少之又少 ...

除了一些類似字體反爬之類的奇淫技巧，js加密應該是反爬相當常見的一部分了，這也是一個分水嶺，我能解決基本js加密的才能算入階。 最近正好遇到一個比較簡單的js，跟大家分享一下迅雷網盤搜索_838888 輸入關鍵字，url變了https://838888.net/search ...

前言 在GitHub上維護了一個代理池的項目，代理來源是抓取一些免費的代理發布網站。上午有個小哥告訴我說有個代理抓取接口不能用了，返回狀態521。抱着幫人解決問題的心態去跑了一遍代碼。發現果 ...

經過一段時間的python學習，能寫出一些爬蟲了。但是，遇到js動態加載的網頁就犯了難。於是乎谷歌、百度，發現個好介紹http://www.jianshu.com/p/4fe8bb1ea984 主要就是分析網頁的加載過程，從網頁響應中找到JS腳本返回的JSON數據。（上邊的網址介紹很詳細 ...

經歷過企查查這個網站后，強烈感覺到使用抓包的重要性，以至於決定從此以后使用抓包進行模擬請求，放棄使用F12進行分析。 寫下這篇文章，奠基死去的F12~~~ 代碼很簡單，甚至於簡陋，為什么要記錄下這個爬蟲，因為請求頭部信息，自己進行分析，和ctrl+c+v導致請求頭數據不准確，嚴重 ...

前言 我們在寫爬蟲的時候經常會遇到各種反爬措施，比如現在各種大型網站越來越多的js加載令人十分頭疼。 這些網站的數據不像簡單的網站一樣可以直接拿取，我們經常會找不到數據源頭，難道只能使用selenium來模擬瀏覽器拿取嗎?當然不是的。 本文就以如何破解有道翻譯的參數為例來一步步完成js的破解 ...

一、前言 　　本文是一次破解某網站 JS 加密數據的記錄，網址為： https://www.qimingpian.cn/finosda/event/einvestment 　　要獲取的是本頁面上的投資事件信息，首先可以確定的是數據是通過 AJax 來傳輸的，並非直接寫在網頁源碼中 ...

前言 本篇博文的主題就是處理字體反爬的，其實這種網上已經很多了，那為什么我還要寫呢？因為無聊啊，最近是真沒啥事，並且我看了下，還是有點難度的，然后這個字體反爬系列會出兩到三篇博文，針對市面上主流的字 ...