Node Crawler的目标是成为最好的node.js爬虫工具，目前已经停止维护。 我们来抓取光合新知博客tech栏目中的文章信息。访问http://dev.guanghe.tv/category/tech/，右键查看页面源代码，可以看到文章信息等内容，如下所示： ...

任务还是读取博文标题。 读取app2.js 读取后的输出文件： 当然，需要再整理一下,程序如下： 整理后的结果： 最开头部分的 是怎么搞得，有点迷糊，以后再看吧。 ...

最近重新玩起了node，便总结下基本的东西，在本文中通过node的superagent与cheerio来抓取分析网页的数据。 目的 superagent 抓取网页 cheerio 分析网页 准备 Node（我的6.0） 三个依赖， express（4X），superagent ...

前言 在学习慕课网视频和Cnode新手入门接触到爬虫，说是爬虫初探，其实并没有用到爬虫相关第三方类库，主要用了node.js基础模块http、网页分析工具cherrio。 使用http直接获取url路径对应网页资源，然后使用cherrio分析。 这里我主要是把慕课网教学视频提供的案例 ...

　 一时兴起，想做个爬虫，经过各种深思熟虑，最后选择了某乎，毕竟现在某乎的数据质量还是挺高的。说干就干 　　 打开某乎首页，随便搜索了一串关键字，相关的问题和答案就展现在眼前，我就思考怎么把这些搜索结果全部通过爬虫爬下来，方便收集（我也不知道收集来干嘛嘻嘻）。 　　发现搜索结果每页只会 ...

本文将介绍node使用cheerio插件，使jquery可以在服务端解析结构，实现精准查询并爬取数据 一、导入相关依赖 需要安装cheerio插件，使用npm i cheerio -S指令安装 二、使用get请求或post请求网址 三、封装cheerio解析插件 ...

参考文章： 　　https://andyliwr.github.io/2017/12/05/nodejs_spider_ip/ 　　https://segmentfault.com/q/10100 ...

大众点评上有很多美食餐馆的信息，正好可以拿来练练手Node.js。 1. API分析 大众点评开放了查询商家信息的API，这里给出了城市与cityid之间的对应关系，链接http://m.api.dianping.com/searchshop.json?&regionid=0& ...