(1)個人使用小爬蟲---------關於一次被論壇封號而搜索的思考
前段時間上了某論壇的技術討論區,習慣性的打開搜索看有沒有我需要的內容,一登陸賬號,發現自己被禁言了,連基本的搜索功能也被限制了。無奈只能手動的一個一個會找帖子。我去,竟然有200多頁,每頁有4 ...
前段時間上了某論壇的技術討論區,習慣性的打開搜索看有沒有我需要的內容,一登陸賬號,發現自己被禁言了,連基本的搜索功能也被限制了。無奈只能手動的一個一個會找帖子。我去,竟然有200多頁,每頁有4 ...
這應該也是一個系列,邊整理,邊記錄。 瀏覽器自動化(browser automation) 我的理解就是用代碼模擬瀏覽器的行為。 這里說的基本上是基於C#的實現。 大致可能有這幾種方法(這里只是一個概述,詳細以后討論): 1.用httprequest,或者用webclient,后者 ...