前言 在博客系统中，为了提升响应速度，加入了 Redis 缓存，把文章主键 ID 作为 key 值去缓存查询，如果不存在对应的 value，就去数据库中查找 。这个时候，如果请求的并发量很大，就 ...

前言 在开发十万博客系统的的过程中，前面主要分享了爬虫、缓存穿透以及文章阅读量计数等等。爬虫的目的就是解决十万+问题；缓存穿透是为了保护后端数据库查询服务；计数服务解决了接近真实阅读数以及数据库服务的压力。 架构图 限流 就拿十万博客来说，如果存在热点文章，可能会有数十万级别的并发 ...

前言 在经历了，缓存、限流、布隆穿透等等一系列加强功能，十万博客基本算是成型，网站上线以后也加入了百度统计来见证十万+ 的整个过程。 但是百度统计并不能对每篇博文进行详细的浏览量统计，如果做一些热点博文排行、48小时排行之类统计，还需要引入浏览量统计功能。 设计 通常情况下，我们只需要 ...

前言 通过 Python 爬取十万博文之后，最重要的是要让互联网用户访问到，那么如何做呢？ 选型 从后台框架、前端模板、数据库连接池、缓存、代理服务、限流等组件多个维度选型。 后台框架 SpringBoot2+、JPA 前端框架 Vue 模块框架 Thymeleaf ...

前言 这里以爬取博客园文章为例，仅供学习参考，某些AD满天飞的网站太浪费爬虫的感情了。 爬取 使用 BeautifulSoup 获取博文 通过 html2text 将 Html 转 Markdown 保存 Markdown 到本地文件 下载 ...

概述 不久前，我们在文章《如何扩展单个Prometheus实现近万Kubernetes集群监控？》中详细介绍了TKE团队大规模Kubernetes联邦监控系统Kvass的演进过程，其中介绍了针对规模较大的集群，我们是如何通过修改Prometheus代码来实现横向扩缩容的。经过方案上的改进 ...

更多精彩内容，请关注微信公众号：后端技术小屋 一文读懂clickhouse集群监控 常言道，兵马未至，粮草先行，在clickhouse上生产环境之前，我们就得制定好相关的监控方案，包括metric采集、报警策略、图形化报表。有了全面有效的监控，我们就仿佛拥有了千里眼顺风耳，对于线上 ...

聊聊如何构建自驱团队（3） “道“和”术“ 对于技术出生的管理者在进行问题思考时，总会深陷“术”和“道”两层维度问题的困扰：“道”就是平时大家提到的理论实践，而“术”则是与实际相匹配的一些方法。 敏捷项目管理为构建自驱团队提供了一些框架，利用这些框架，固然能够对构建团队发挥不错的作用 ...