以前对UserAgent了解不是很透彻，今天发现UserAgent用处多多。比如我之前一直很喜欢用火狐浏览器，不过用了那么久发现火狐浏览器问题多多，比如有的论坛上传附件或者上传图片等按钮没有作用，并且今天发现火狐浏览器还播放不了新浪视频。本来以为是我安装的扩展或者脚本冲突的问题，于是我用火狐原版 ...

　　写过一个批量下载 ts 文件的脚本，但是最近莫名其妙的被返回各种错误码，估计是服务器加强了对脚本的检测，那user-agent 字段要升下级，为了省事，直接用 fake-useragent 随机生成吧！ 　　最简单的方式就是直接命令： pip install fake-useragent ...

以前对UserAgent了解不是很透彻，今天发现UserAgent用处多多。比如我之前一直很喜欢用火狐浏览器，不过用了那么久发现火狐浏览器问题多多，比如有的论坛上传附件或者上传图片等按钮没有作用，并且今天发现火狐浏览器还播放不了新浪视频。本来以为是我安装的扩展或者脚本冲突的问题，于是我用火狐原版 ...

问题： 　　今天在做测试发现传入的时间为 "2018-11-26" 在格式化后变成了"20181125" 　　 DateUtils.formatDate(c.getTime(), "yyyyMMdd") 　　 　　解析工具使用的是httpClient 4.5 想法 ...

jps -lvmjstack -l pid requestConfig 设置timeout不生效 job出现卡死杜塞情况，查看线程如下"dcpUpdateOtrAccessTokenCronJob ...

昨天的搜索系统又出状况了，几个库同时重建索引变得死慢。经过一个上午的复现分析，确定问题出现httpclient的使用上（我使用的是3.1这个被广泛使用的遗留版本）。搜索系统在重建索引时，是并发多个线程（默认是8个）不停的从PHP客户端取数据（当然，从另一个角度来说，搜索系统是客户端，PHP端 ...

调用第三方接口时会报NoHttpResponse异常，原因是上次的连接已经断掉了，但是客户端并未知道，复用上次连接就报错了，所以要解决这个问题，就是要校验上次链接是否断掉了 1. httpClient已经给我们实现了这个，setRetryHandler public ...

在进行Scrapy开发的时候，需要使用UA中间件，这里就采用了fake-useragent来随机获取浏览器的UA值，但貌似直接访问的话有异常： 貌似是网络访问问题。 综合资料，解决办法如下： 当然前提是先安装： 如果已经安装过，记得更新下 ...