為了總結一下Selenium的用法，具體用了這個例子來說明一下。 Selenium簡單來說，就是通過程序驅動一個瀏覽器，並且可以通過程序來幫你做一些事情，例如點擊、填表呀之類的。 換句話說，你在瀏覽器上面看到的東西，他都能給你呈現；你能在頁面上做的東西，它也能做。 Selenium厲害的地方 ...

因為項目原因，我被領導委任爬取微博用戶的一些信息，而作為一個爬蟲經驗幾乎為0的python非老司機，開始了漫長的研究之路。。。。 在了解了爬蟲的基本工具和著名框架scrapy后 博主還是決定自己參考網上的各路大神的腳本，寫一個登錄腳本。。。。 環境 tools 1、Chrome ...

1.selenium基本使用 1.selenium安裝及基本操作 selenium是一個自動化測試工具，它支持各種瀏覽器，包括Chrome，Safari,Firefox等主流界面瀏覽器驅動，也包括Phantomjs的無界面瀏覽器。 通過selenium+phantomjs可以直接渲染js ...

畢設題目要使用到新浪微博數據，所以要爬取新浪微博的數據。一般而言，新浪微博的爬蟲有兩種模式：新浪官方API和模擬登錄新浪微博。兩種方法的異同點和適用情況就無須贅述了。前輩的文章已經非常多了。寫這篇文章主要記錄自己的探究過程。 參考文章：1，解析新浪微博的登錄 ...

這幾天一直在研究新浪微博的爬蟲，發現爬取微博的數據首先要登錄。本來打算是通過賬號和密碼模擬瀏覽器登錄。但是現在微博的登錄機制比較復雜。通過賬號密碼還沒有登錄成功QAQ。所以就先記錄下，通過cookie直接訪問自己的微博主頁。 微博登錄的認證過程 微博登錄的細節在其他的博客里已經有了詳細的介紹 ...

這幾天要做個獲取新浪微博@我的信息， 又不用第三方登錄，所以只能通過模擬登錄來獲取信息，研究的一下發現直接模擬登錄微博比較困難，驗證的算法比較復雜，於是繞道通過登錄新浪通行證后來獲取cookie 來獲取信息,代碼如下。 ...

昨天把selenium的官網教程瀏覽了一遍，英文差，看得費勁，最后借助詞典大體了解了selenium的webdriver(⊙﹏⊙) 紙上得來終覺淺，絕知此事要躬行。廢話少說，直接上例子~ 題目：登錄新浪微博 思路：因為沒有涉及到驗證碼，所以直接用賬號密碼登錄，設置一個檢查點判斷是否登錄 ...

注冊新浪微博應用將會獲得該應用的App Key和Secret Key，您可以通過這兩個Key您可以在燈鷺控制台完成與新浪微博的對接。App Key是應用的唯一標識，開放平台通過App Key來鑒別應用的身份。 AppSecret是給應用分配的密鑰，您需要妥善保存這個密鑰，這個密鑰用來保證應用 ...