原文：nodejs爬虫笔记(五)---利用nightmare模拟点击下一页
目标 以腾讯滚动新闻为例，利用nightmare模拟点击下一页，爬取所有页面的信息。首先得感谢node社区godghdai的帮助，开始接触不太熟悉nightmare，感觉很高大上，自己写代码的时候问题也很多，多亏大神的指点。 一 选择模拟的原因 腾讯滚动新闻，是每六十秒更新一次，而且有下一页。要是直接获取页面的话得一页一页的获取，不太方便，又想到了找数据接口，然后通过请求得到数据，结果腾讯新闻的数 ...
2017-08-07 10:35 0 6512 推荐指数：
相关推荐
目标： 解决页面加载更多问题。笔记三中，我们只爬取到网页的部分信息，而点击加载更多后的页面内容是没有提取到的。开始我的想法是找到加载更多的数据接口（可参照：http://www.jianshu.com/p/3fdb6ab47aef），但是我又发现一个问题，当我打开一个订阅号页面时，找到数据 ...
嗯，昨天呢，我们已经实现了自动输入百度然后搜索Cgrain，然后点击按钮，进入我的页面，在这里呢，有个问题 然后仔细检查，结果发现没什么问题，然后查看错误，说是找不到这个位置，纳闷了 ~~~~ 然后 加了个定时 出来了，这个问题很奇怪 ...
在下一个页面中的mounted中加一个 window.scrollTo(0,0) ...
还有种方式，获取到总页数，再循环 ...
...
成全部页码对应的链接再分别抓取，但是这个网站在换页的时候链接是没有变化的，因此打算去观察一下点击第二页 ...
不再重写一遍了,看csdn: https://blog.csdn.net/qq_42866164/article/details/101346058 ...