调用工具：Browsermob Proxy Browsermob Proxy是一个开源的Java编写的基于LittleProxy的代理服务。Browsermob Proxy的具体流程有点类似与Flidder或Charles。即开启一个端口并作为一个标准代理存在，当HTTP客户端 浏览器等 设置了这个代理，则可以抓取所有的请求细节并获取返回内容。 下载zip包，https: github.com l ...
2020-05-29 17:40 1 2293 推荐指数：
1.问题 自从发现 Selenium 这块新大陆后，许多异步加载、js加密、动态Cookie等问题都变得非常简单，大大简化了爬虫的难度。但是有些时候使用 Selenium 仍然有一些缺陷，比如现在很多网站数据都是通过json结构的接口来交互，通过分析报文的方式直接发包可以直接拿到json数据 ...
直接贴代码： 以京东登陆为例： 运行结果： ...
前言：由于登录反爬措施的越来越麻烦，甚至出现了12306这种看图识物的无敌验证码，我只能说，我选择死亡。这就衍生出了使用selenium来获取获取cookies。 实例：获取qq空间cookies，亲测成功2018-3-7（注意点：chromedriver.exe的路径输入 ...
<table> <tbody id="tb-37327761306"> <tr class="sep-row"><td colspan="5"> ...
共有2种方式获取元素文本，各有优缺点 1、ele.text方式 优点是：书写简单 缺点是：当页面很大，有一部分页面会展示不出来，需要通过拖动滚动条才能查看。对这部分页面的元素，使用ele.text查看，获取不到元素文本。 举例： 申请号是第1列，页面展示出来了 ...
测试odoo时，发现大部分按钮都是动态生成，id也是动态的， 只能用xpath，但是配置一旦改变导致按钮位置改变 想到一个办法，遍历所有按钮，然后内容相符的才点击，测试代码如下 submi ...
