...

一、背景介紹 最近做一個爬蟲項目，用selenium調用瀏覽器去獲取渲染后的源碼，但是每次登陸都需要手機驗證，這真的是頭痛啊，這種驗證方式不要想着去破解，還是老老實實用手機收驗證碼去吧！反正我是不知道這種驗證方式還能破解！難道就沒有其他辦法了嗎？ 有，那就是模擬登陸！這樣最起碼不用沒測 ...

抓取頁面數據的時候，有時候我們需要登陸才可以獲取頁面資源，那么我們需要登陸以后才可以跳轉到對應的資源頁面，那么我們需要通過模擬登陸，登陸成功以后再次去抓取對應的數據。 首先我們需要通過手動方式來登陸一下，查看一下如何請求登陸 通過下圖我們看到真正處理請求的頁面是login.php,登陸成功以后 ...

　　最近由於項目的需要，需要做數據抓取，也就是用的curl相關的函數庫，在這之前還真心沒有接觸過這么高大上的東西，然后從剛開始到今天才研究curl算是第四天了，寫這篇博客記錄一下這幾天的一個過程，在使用curl模擬登陸抓取數據過程中需要注意的一些事項，以及介紹一款支持跨平台(windows ...

思路 輸入用戶名密碼點擊登陸 獲取驗證碼的原始圖片與有缺口的圖片 找出兩張圖片的缺口起始處 拖動碎片 功能代碼段 初始化相關參數 獲取按鈕、輸入框、碎片拖動按鈕對象 獲取帶有碎片的圖片和完整圖片 判斷像素點是否相同 獲取需要移動的距離 ...

剛開始學習Python，不願意看基礎，記憶不好，那些語法記不住，直接上個項目，這樣比較深刻 剛好公司有個情況要查企業的信息，就想做個爬蟲吧，有驗證碼的不願意搞，那是個老大難問題，就選擇了天眼查 過程都略了，直接寫個結果吧，總結出來的步驟如下： 一、天眼查最大的障礙在於字體問題，這個網上都有 ...

學校的教務系統是正方的，在大學期間無論是選課、報名還是查成績，幾乎都要和它打交道，上學期在積累了一定的爬蟲和web知識后，我就想着用Python模擬登陸教務系統，實現在命令行里方便地進行成績或課表的查詢。 首先先來看看登陸的過程。 首先是向default.aspx POST過去了一些 ...

模擬登陸部分實現： package token.exe; import java.math.BigInteger; import java.util.Random; import org.apache.commons.codec.binary.Base64; public ...