这里的断点续传不是文件下载时的断点续传，而是指在爬行页面时有时会遇到各种网络中断而从中断前的页面及其数据继续爬行的过程，这个过程和断点续传原理上相似故以此命名。我的具体做法是：在下载出现故障或是图片已经全部获得时，将存储目录，当前爬行页面和已经获取的图片地址以json形式存储到数据文件中，而用 ...

...

...

原有1.05版程序没有断点续传模式，现在在最近程序基础上改写一版1.051. 2017年11月21日10:19:20 ...

...

GitHub地址 目标网站：妹子图（点进去别忘了回来~~）项目功能：批量下载该网站的相册姊妹项目：批量爬取并下载头条视频 启动项目 命令: 配置文件: 技术点 Axios: 发起 get 请求，获取页面和图片 stream Cheerio ...

　　说到爬虫，很多人都认为是很高大上的东西。哇塞，是不是可以爬妹纸图啊，是不是可以爬小片片啊。答案就是对的。爬虫可以完成这些东西的操作。但是，作为一个正直的程序员，我们要在法律允许范围内用爬虫来为我们服务，而不是为所欲为。（ps：此处应有掌声，谢谢。） 　　今天，我带来一个用Node.js写 ...