最近听到一首很喜欢的歌，许薇的《我以为》，评论也很有趣，遂有想爬取该歌曲下的所有评论并用词云工具展示。 我们使用chrome开发者工具，发现歌曲的评论都隐藏在以 R_SO_4 开头的 XHR 文件中 接下来思路就很明确，拿到该文件，解析该文件的 json 数据，拿到全部评论 ...

　　首先，我们打开网易云音乐的网页版：https://music.163.com/，随便选择一首歌曲，如林志炫版本的《烟花易冷》：https://music.163.com/#/song?id=25723157。透过网址很容易发现每首歌都有一个对应的id。所以原则上我们只要搜素对应 ...

大家经常都在网易云上听音乐，而且上面还有很多感人的故事，也有很多人在上面发表评论，关于网易云音乐的评论我早就想爬了，之前是因为太忙没时间爬，这两天的时间闲了，这里我分享给大家用最简单的方法实现网易云音乐评论的爬取，我们就以毛不易的《消愁》为例来介绍一下 数据抓取首先，我们用电脑打开网易云 ...

教程系列链接目录： 1、Scrapy爬取网易云音乐和评论（一、思路分析） 2、Scrapy爬取网易云音乐和评论（二、Scrapy框架每个模块的作用） 3、Scrapy爬取网易云音乐和评论（三、爬取歌手） 4、Scrapy爬取网易云音乐和评论（四、关于API） 5、Scrapy爬取网易云音乐和评论 ...

前提： scrapy这个框架很多人用过，网上教程也很多，但大多就是爬爬小说这种比较简单且有规律的，网易云音乐也有很多人写过，也有API，不过大多是爬取了热门歌曲，或是从歌单下手，但是考虑到歌单会有很多重复的。当然，从歌手页的话，如果有多个歌手合唱，那每个歌手页也都会有这首歌，但他们的链接是一样 ...

教程系列链接目录： 1、Scrapy爬取网易云音乐和评论（一、思路分析） 2、Scrapy爬取网易云音乐和评论（二、Scrapy框架每个模块的作用） 3、Scrapy爬取网易云音乐和评论（三、爬取歌手） 4、Scrapy爬取网易云音乐和评论（四、关于API） 5、Scrapy爬取网易云音乐和评论 ...

一、选题背景 由于现在的音乐版权问题，很多音乐分布在各个平台的音乐播放器，而版权问题也使很多人非常的困扰，从而找不到音乐的资源。因此为帮助使用网易云的伙伴们，更好的找到各个平台的资源，听到更多自己喜欢的歌。 二、爬虫方案设计 1.实现功能 2.具体实现 　　1.搜索部分 3.下载歌曲 ...

爬过网易云评论的都知道，网易云的歌曲都是通过 <iframe> 便签进行层层迭代，而且数据都是异步加载的，就算是使用Selenium也要进行框架的转换，非常麻烦，且效率低下。 通过Chrome抓包得到评论的URL 可以看到评论的URL使用 ...