设置ip代理是爬虫必不可少的技巧； 查看本机ip地址；打开百度，输入“ip地址”，可以看到本机的IP地址； 本文使用的是goubanjia.com里面的免费ip； 使用时注 ...

下面是webmagic官方的默认实现HttpClientDownloader中的下载方法。 上面第一个标黄的方法，构造org.apache.http.client.methods.Ht ...

由于这个工具第一次体验感觉还不错，很稳定。因此在这记录一下reGeorg+Proxifier的配置及其使用。 下载地址 ：https://github.com/sensepost/reGeorg.g ...