原文:解Bug之路-串包Bug

解Bug之路 串包Bug 笔者很热衷于解决Bug,同时比较擅长 网络 协议 部分,所以经常被唤去解决一些网络IO方面的Bug。现在就挑一个案例出来,写出分析思路,以飨读者,希望读者在以后的工作中能够少踩点坑。 串包Bug现场 前置故障Redis超时 由于某个系统大量的hget hset操作将Redis拖垮,通过监控发现Redis的CPU和IO有大量的尖刺,CPU示意图下图所示: CPU达到了 ,导 ...

2020-09-14 10:01 8 707 推荐指数:

查看详情

Bug之路-Nginx 502 Bad Gateway

Bug之路-Nginx 502 Bad Gateway 前言 事实证明,读过Linux内核源码确实有很大的好处,尤其在处理问题的时刻。当你看到报错的那一瞬间,就能把现象/原因/以及解决方案一股脑的在脑中闪现。甚至一些边边角角的现象都能很快的反应过来是为何。笔者读过一些Linux TCP协议栈 ...

Fri Jul 31 22:30:00 CST 2020 43 16104
Bug之路-Nginx 502 Bad Gateway(转发)

原文:https://www.cnblogs.com/alchemystar/p/13409534.html Bug之路-Nginx 502 Bad Gateway 前言 事实证明,读过Linux内核源码确实有很大的好处,尤其在处理问题的时刻。当你看到报错的那一瞬间,就能把现象/原因 ...

Fri Aug 07 18:26:00 CST 2020 0 656
Bug之路-NAT引发的性能瓶颈

Bug之路-NAT引发的性能瓶颈 笔者最近解决了一个非常曲折的问题,从抓开始一路排查到不同内核版本间的细微差异,最后才完美解释了所有的现象。在这里将整个过程写成博文记录下来,希望能够对读者有所帮助。(篇幅可能会有点长,耐心看完,绝对物有所值~) 环境介绍 先来介绍一下出问题的环境吧,调用 ...

Wed Nov 11 17:55:00 CST 2020 49 2818
Bug之路-ZooKeeper集群拒绝服务

Bug之路-ZooKeeper集群拒绝服务 前言 ZooKeeper作为dubbo的注册中心,可谓是重中之重,线上ZK的任何风吹草动都会牵动心弦。最近笔者就碰到线上ZK Leader宕机后,选主无法成功导致ZK集群拒绝服务的现象,于是把这个case写出来分享给大家(基于ZooKeeper ...

Tue Jun 22 17:50:00 CST 2021 9 2409
Bug之路-主从切换"未成功"?

Bug之路-主从切换"未成功"? 前言 数据库主从切换是个非常有意思的话题。能够稳定的处理主从切换是保证业务连续性的必要条件。今天笔者就来讲讲主从切换过程中一个小小的问题。 故障场景 最近线上进行主从切换,大部分应用都切过去了,但是某些应用的连接确还在老的主(新的从)上面。 这让对应 ...

Tue Mar 30 17:38:00 CST 2021 5 433
Bug之路-中间件"SQL重复执行"

前言 我们的分库分表中间件在线上运行了两年多,到目前为止还算稳定。在笔者将精力放在处理各种灾难性事件(例如中间件物理机宕机/数据库宕机/网络隔离等突发事件)时。竟然发现还有一些奇怪的corner case。现在就将排查思路写成文章分享出来。 Bug现场 应用拓扑 应用通过中间件连后端多个 ...

Sun Jun 28 20:56:00 CST 2020 2 704
Bug之路-dubbo应用无法重连zookeeper

前言 dubbo是一个成熟且被广泛运用的框架。饶是如此,在某些极端条件下基于dubbo的应用还会出现无法重连zookeeper的问题。由于此问题容易导致比较大的故障,所以笔者费了一番功夫去定位,现将排查过程写成博文分享出来。 Bug现场 这是一起在测试环境出现的故障。起因是网工做交换机切换 ...

Thu Aug 27 18:32:00 CST 2020 6 1783
Bug之路-dubbo流量上线时的非平滑问题

前言 笔者最近解决了一个困扰了业务系统很久的问题。这个问题只在发布时出现,每次只影响一两次调用,相较于其它的问题来说,这个问题有点不够受重视。由于种种原因,使得这个问题到了业务必须解决的程度,于是就 ...

Tue Aug 11 18:21:00 CST 2020 15 1899
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM