以下内容转自爬虫界大佬崔庆才的文章，传送门 整个分享的主题叫做《健壮高效的网络爬虫》，本次分享从抓取、解析、存储、反爬、加速五个方面介绍了利用 Python 进行网络爬虫开发的相关知识点和技巧，介绍了不同场景下如何采取不同措施高效地进行数据抓取的方法，包括 Web 抓取、App 抓取、数据 ...

上几篇介绍了如何实现一个百万级别的语音聊天室，本篇将介绍直播平台的设计。开始分享这个项目其实有点犹豫，因为我所参与的直播平台跟业界常用的方案不太一样。但是仔细想想，架构设计本来就是在各种条件约束下的因地制宜，没有绝对的正确和错误，合适才是关键。 我们是国内做直播相对比较早的团队，也缺乏一些行业 ...

开篇 最近整理笔记，不知不觉发现关于kubernetes相关的笔记已经达99篇了，索性一起总结了。算是对这两年做容器云平台的一个总结，本文是开篇，先介绍下所有用到的组件。首先来看下架构图（实在画的太丑，求推荐工具） 如图，容器平台主要涉及的组件 ...

GitHub + jsDelivr + PicGo + Imagine 打造稳定快速、高效免费图床 前言 为什么要使用图床呢？ 因为在不同平台发布同一篇文章的时候，最一个痛苦的点就是，图片存储问题，各个平台的文件存储方式各不相同，无法直接 Ctrl + C 的方式一键搞定，为了解 ...

目录 GitHub+jsDelivr+PicGo 打造稳定快速、高效免费图床 前提说明 图床对比 问题解决 1.新建GitHub仓库 2.生成一个Token ...

Authentication,Authorization 如果公司交给你一个任务让你写一个api接口,那么我们应该如何设计这个api接口来保证这个接口是对外看起来“高大上”，“羡慕崇拜”,并且使用起来和普通api接口无感，并且可以完美接入aspnetcore的认证授权体系呢，而不是自定义签名 ...

你要是还学不会，请提刀来见 Typora+PicGo+Gitee + node.js 打造个人高效稳定优雅图床 经过前面两弹的介绍，相信大家对图床都不陌生了吧， 但是小魔童觉得这样做法还是不方便，使用 github 的仓库来存放图片，如果不能上外网的话是不能展示图片的，自己可以上外网还不 ...

如下未完整整理，看懂看不懂随缘.... 准备条件： 1、阿里云oss 2、阿里云ecs 3、环境：centos7.x 步骤： 1、centos中安装宝塔面板 2、下载NextCloud安装包，上传到宝塔，解压 3、在ecs中挂载阿里云oss，此处是重点。 在oss中 ...