Selenium的配置 在項目中引入Selenium庫 下載chromedriver.exe 在項目代碼中加入chromedriver位置的配置 使用Selenium Selenim語法 智能等待 ...

為了總結一下Selenium的用法，具體用了這個例子來說明一下。 Selenium簡單來說，就是通過程序驅動一個瀏覽器，並且可以通過程序來幫你做一些事情，例如點擊、填表呀之類的。 換句話說，你在瀏覽器上面看到的東西，他都能給你呈現；你能在頁面上做的東西，它也能做。 Selenium厲害的地方 ...

fiddler 之前了解了一些常見到的反爬措施，JS加密算是比較困難，而微博的登錄中正是用JS加密來反爬，今天來了解一下。 分析過程 首先我們去抓包，從登錄到微博首頁加載出來的過程。我們重點關注一下登錄操作，其次是首頁的請求，登錄一般是POST請求。我們搜索一下： 得知登錄的url ...

前言 對於很少玩微博@張行之_的我來說，微博內容少的可憐。所以本人就想：能不能寫個成功程序來幫我發微博。這個程序要滿足以下要求： 自動化，自動登錄微博，自動發微博。 微博內容要有意義，不能是隨機生成的字符。 可以設置每隔一段時間發一條微博，頻率不能太快，當然也不能太慢 ...

因為項目原因，我被領導委任爬取微博用戶的一些信息，而作為一個爬蟲經驗幾乎為0的python非老司機，開始了漫長的研究之路。。。。 在了解了爬蟲的基本工具和著名框架scrapy后 博主還是決定自己參考網上的各路大神的腳本，寫一個登錄腳本。。。。 環境 tools 1、Chrome ...

1.首先在瀏覽器中進入WAP版微博的網址，因為手機版微博的內容較為簡潔，方便后續使用正則表達式或者beautifulSoup等工具對所需要內容進行過濾 https://login.weibo.cn/login/ 2.人工輸入賬號、密碼、驗證字符，最后最重要的是勾選（記住登錄 ...

閱讀目錄 一.抓包利器Fiddler 二.Cookies與保持登錄 三.Cookies模擬登錄 四.使用 Post 提交數據的方法實現模擬登錄 當我們試圖從新浪微博抓取數據時，我們會發現網頁上提示未登錄，無法查看其他用戶 ...

一、寫在前面 首先呢，由於之前重裝系統，又要重新配置環境，然后還有一些別的事，導致我一直沒有寫爬蟲了，不過現在又可以繼續寫了。 然后我這次說的模擬登錄新浪微博呢，不是使用Selenium模擬瀏覽器操作，畢竟Selenium的效率是真的有些低，所以我選擇用Python發送請求實現模擬登錄，整個 ...