(1)个人使用小爬虫---------关于一次被论坛封号而搜索的思考
前段时间上了某论坛的技术讨论区,习惯性的打开搜索看有没有我需要的内容,一登陆账号,发现自己被禁言了,连基本的搜索功能也被限制了。无奈只能手动的一个一个会找帖子。我去,竟然有200多页,每页有4 ...
前段时间上了某论坛的技术讨论区,习惯性的打开搜索看有没有我需要的内容,一登陆账号,发现自己被禁言了,连基本的搜索功能也被限制了。无奈只能手动的一个一个会找帖子。我去,竟然有200多页,每页有4 ...
这应该也是一个系列,边整理,边记录。 浏览器自动化(browser automation) 我的理解就是用代码模拟浏览器的行为。 这里说的基本上是基于C#的实现。 大致可能有这几种方法(这里只是一个概述,详细以后讨论): 1.用httprequest,或者用webclient,后者 ...