这篇文章适合于python爱好者，里面可能很多语句是冗长的，甚至可能有一些尚未发现的BUG，这个伴随着我们继续学习来慢慢消解吧。接下来 我把里面会用到的东西在这里做一个简单总结吧：本文用到了两门解释性编程语言python3 + bash(shell),为什么用shell，我会在后面具体分析 ...

教程系列链接目录： 1、Scrapy爬取网易云音乐和评论（一、思路分析） 2、Scrapy爬取网易云音乐和评论（二、Scrapy框架每个模块的作用） 3、Scrapy爬取网易云音乐和评论（三、爬取歌手） 4、Scrapy爬取网易云音乐和评论（四、关于API） 5、Scrapy爬取网易云音乐和评论 ...

在17的四月份，我曾经写了一篇关于网易云音乐爬虫的文章，还写了一篇关于评论数据可视化的文章。在这大半年的时间里，有时会有一些朋友给我发私信询问一些关于代码方面的问题。所以我最近抽空干脆将原来的代码整理了一下，做成了一个Python模块NetCloud放在Pypi上了。目前只是对原来的代码做了 ...

一、选题背景 由于现在的音乐版权问题，很多音乐分布在各个平台的音乐播放器，而版权问题也使很多人非常的困扰，从而找不到音乐的资源。因此为帮助使用网易云的伙伴们，更好的找到各个平台的资源，听到更多自己喜欢的歌。 二、网络爬虫设计方案 网络爬虫名称：“网易云音乐歌单” 内容与数据分析特征 ...

最近在研究文本挖掘相关的内容，所谓巧妇难为无米之炊，要想进行文本分析，首先得到有文本吧。获取文本的方式有很多，比如从网上下载现成的文本文档，或者通过第三方提供的API进行获取数据。但是有的时候我们想要的数据并不能直接获取，因为并不提供直接的下载渠道或者API供我们获取数据 ...

介绍 现在比较流行的大数据数据可视化都是大屏，有钱的人会使用阿里云全家桶的DataV或者商业化的大屏解决方案，但是在国内还是小公司比较多，本人50年大数据开发经验，精通数据可视化，曾经处理过百万亿级别的数据，现在就让我带领大家做一个开源的大数据可视化系统吧，爬虫部分我们用python开发 开发 ...

内容：通过访问QQ音乐的web官网，爬取相对应榜单的信息。最后保存下来做可视化分析。 设计方案思路： ...

1.1 介绍产品相关信息 你选择的产品是？ 网易云音乐 为什么选择该产品作为分析？ 在这些产品中，我比较中意网易云音乐，因为我听歌常用网易云音乐，想对它更深入的了解。 该产品是怎么诞生的（在什么样的背景下）？ 2012 年 7 月，丁磊（网易集团CEO）拉着 ...