仅供学习交流研究使用 1. 爬取思路 爬取思路大致相通 获取视频的弹幕api链接 向服务器发起请求 获取服务器返回的响应response 解析html网页，得到想要的信息 保存我们爬取的信息 2. 准备工作 首先，解析哔哩哔哩视频网页： 以为下面链接例 ...

查询历史弹幕 https://api.bilibili.com/x/v2/dm/history 时返回的是 ProtoBuf 格式的数据，需要用 protoc 和 google.protobuf 解析。 流程 首次使用，需要下载安装。https://github.com ...

目录 信息解读 实现 单线程按搜索结果批量爬取 多线程并行 测试结果 References 信息解读 1446.2345,1,25,16777215,1312863760,0,eff85771,42759017中 ...

抓包时发现子菜单请求数据时一般需要rid,但的确存在一些如游戏->游戏赛事不使用rid,对于这种未进行处理,此外rid一般在主菜单的响应中,但有的如番剧这种,rid在子菜单的url中,此外返回的data中含有页数相关信息,可以据此定义爬取的页面数量 可以看到番剧少了 ...

最近受人之托研究了下b站的数据爬取做个小工具，最后朋友说不需要了，本着开源共享的原则，将研究成果与大家分享一波，话不多说直接上干货 需求分析 给定up主uid和用户uid，爬取用户在该up主所有视频中发的所有弹幕 需求拆解 获取up主所有视频 打开b站，随便搜索一个up主，打开所有视频 ...

获取B站视频弹幕，相对来说很简单，需要用到的知识点有requests、re两个库。requests用来获得网页信息，re正则匹配获取你需要的信息，当然还有其他的方法，例如Xpath。进入你所观看的视频的页面，F12进入开发者工具，选择网络。查找我们需要的信息，发现域名那列有 ...

声明不用说了，直接进入主题 还是接上次的爬虫爬取B站视频弹幕和评论 思路 以我的主页为例，如下 然后找到存有我相关视频数据的文件，如下 然后我们随便点开一个视频，进入api端口查看相关信息 我们发现视频的cid号和oid号是一样的，所以我们只需要获取到视频相应的cid，然后将弹幕文件中 ...

先看下最终实现的效果 具体实现思路是 1.爬取带有弹幕信息的网页 2.处理爬取得到的内容并提取所需要的弹幕信息，然后写入文本中 3.通过词云库将文本处理成想要的图片 所需要用到的库 首先爬取想要的信息 ps（哔哩哔哩的弹幕全部 ...