前言 其實有關AES，之前發過一版的博客文章，python爬蟲- js逆向解密之破解AES(CryptoJS)加密的反爬機制 而這次雖然也是AES，但是這次的變化有點大了。 這次的目標對象同樣也是我的老朋友給我的，還是老規矩，地址我不會給出來的 打開網址，界面 ...

發現問題 在一次偶然中，在爬取某個公開網站（非商業型網站）時，老方法，打開調試工具查看請求方式，請求攔截，是否是異步加載，不亦樂乎，當我以為這個網站非常簡單的時候，發現二級網頁的地址和源碼不對應 Ajax異步加載？源碼也是 ...

前言 同上一篇的aes加密一樣，也是偶然發現這個rsa加密的，目標網站我就不說了，保密。 當我發現這個網站是ajax加載時： 我已經習以為常，正在進行爬取時，發現返回為空，我開始用findler抓包，發現它驗證了cookie，然后我帶上 ...

前言 同樣的，接上一篇 python爬蟲 - js逆向之woff字體反爬破解 ，而且也是同一個站的數據，只是是不同的反爬 網址： aHR0cDovL3{防查找，刪除我，包括花括號}d3dy5kaWFuc{防查找，刪除我，包括花括號}GluZy5jb20vcmV2aWV3L{防查找，刪除 ...

前言 本篇博文的主題就是處理字體反爬的，其實這種網上已經很多了，那為什么我還要寫呢？因為無聊啊，最近是真沒啥事，並且我看了下，還是有點難度的，然后這個字體反爬系列會出兩到三篇博文，針對市面上主流的字體反爬，一一講清楚 不多bb，先看目標站 aHR0cDo{防查找，刪除 ...

有個需求爬取知乎文章，正好記錄下爬取過程以及出現問題並解決方法 我是在沒有登錄的情況下爬取文章的 本文僅供研究與學習使用 知乎現今的 x-zse 參數的加密方法已升級成了：x-zse-96 2.0版本。 來看這篇帖子的應該都知道，這個參數動態唯一，沒有就拿不到api數據。 查閱了網上有關文章 ...

一、前言 　　前幾天看到了瓜子二手車的廣告，突發奇想想要拿這個網站試試手，可每次都無法成功獲取到頁面。試了很多次都沒有結果之后便去網上搜索方案，才知道原來還有js反爬這種東西（看來我以前選網站的運氣都太好了。。。），又發現了一篇js混淆反爬破解的文章，就拿來模仿學習一下。 學習的文章：JS混淆 ...

反爬機制和破解方法匯總 一什么是爬蟲和反爬蟲？ 爬蟲：使用任何技術手段，批量獲取網站信息的一種方式。 反爬蟲：使用任何技術手段，阻止別人批量獲取自己網站信息的一種方式。 二 Headers and referer 反爬機制 *headers進行反爬是最常見的反爬蟲策略 ...