——更新日志—— 23年5月15日 增加JSON库来优化代码，提高可读性 23年1月31日 优化代码，增加错误提示，把正则表达式单独列出 特别说明：获取LiveStreamId的正则表达式有变动 22年12月21日 优化了部分代码，直接输入直播链接即可获取弹幕 22年7月14日 ...

在某群中看到关于弹幕爬取的需求，又因为斗鱼比较OP，就以这个作为切入点。 如果你想了解如何获取弹幕，我的这个例子就可以让你豁然开朗，对于哪些没有开发弹幕的直播或视频平台，就需要用抓包工具获取请求，然后分析请求数据包内容，现在说说我的获取步骤吧。 我通过了解到斗鱼弹幕的api，根据标准协议，构建 ...

查询历史弹幕 https://api.bilibili.com/x/v2/dm/history 时返回的是 ProtoBuf 格式的数据，需要用 protoc 和 google.protobuf 解析。 流程 首次使用，需要下载安装。https://github.com ...

目录 信息解读 实现 单线程按搜索结果批量爬取 多线程并行 测试结果 References 信息解读 1446.2345,1,25,16777215,1312863760,0,eff85771,42759017中 ...

直播间特点 聊天室限制人数的原因 应对万级以上的实时互动 跨服务器是为了解决单一服务器接入数量限制、发布消息吞吐限制等问题； 多进程并发则是为了充分利用多核CPU以及减小一个循环规模从而达到降低延迟的目的。 云巴实时系统的设计 云巴是基于MQTT协议实现的实时通信系统，采用 ...

最近受人之托研究了下b站的数据爬取做个小工具，最后朋友说不需要了，本着开源共享的原则，将研究成果与大家分享一波，话不多说直接上干货 需求分析 给定up主uid和用户uid，爬取用户在该up主所有视频中发的所有弹幕 需求拆解 获取up主所有视频 打开b站，随便搜索一个up主，打开所有视频 ...

...

仅供学习交流研究使用 1. 爬取思路 爬取思路大致相通 获取视频的弹幕api链接 向服务器发起请求 获取服务器返回的响应response 解析html网页，得到想要的信息 保存我们爬取的信息 2. 准备工作 首先，解析哔哩哔哩视频网页： 以为下面链接例 ...