一次故障排查过程
上周晚上，某环境 ES 出现阻塞， 运行缓慢。于是开始排查问题的过程。 开始 思路：现象是阻塞，通常是 CPU 彪高，导致业务线程分配不到 CPU 时间片，或者内存吃紧，频繁 GC 导致的 STW。 登录到目标服务器，由于 ES 的用户不是 LZ，因此找运维要了 root 权限，登录到服务器 ...
原文：MySQL DeadLock故障排查过程
作者 刘博：携程技术保障中心数据库高级经理，主要关注Sql server和Mysql的运维和故障处理。 环境 版本号： . . 隔离级别：REPEATABLE READ 问题描述 接到监控报警，有一个线上的应用DeadLock报错，每 分钟会准时出现，报错统计如下图： 登录Mysql服务器查看日志： 大致一看，更新同一索引的同一行，应该是一个Block，报TimeOut的错才对，怎么会报Dead ...
2019-01-02 11:59 0 3015 推荐指数：
相关推荐
一则线上MySql连接异常的排查过程
Mysql作为一个常用数据库，在互联网系统应用很多。有些故障是其自身的bug，有些则不是，这里以前段时间遇到的问题举例。 问题## 当时遇到的症状是这样的，我们的应用在线上测试环境，JMeter测试过程中，发现每次压力测试开始时访问低前几个http request请求会超时，而之后的请求持续 ...
MySQL-记一次备份失败的排查过程
山竹来临，窝在家里整理个人文档。 本篇文章主要讲解排查问题的思路，涉及linux 删除文件的原理、实例误删数据恢复、MySQL实例初始化参数优先级别等，虽然涉及知识点比较浅，但是个人觉得挺有 ...
记录一次Mysql死锁排查过程
背景以前接触到的数据库死锁，都是批量更新时加锁顺序不一致而导致的死锁，但是上周却遇到了一个很难理解的死锁。借着这个机会又重新学习了一下mysql的死锁知识以及常见的死锁场景。在多方调研以及和同事们的讨论下终于发现了这个死锁问题的成因，收获颇多。虽然是后端程序员，我们不需要像DBA一样深入地去分析 ...
服务器故障排查三板斧:记一次IIS报503/502错误故障排查过程
背景 近期被抓壮丁解决一个几年前的系统故障，经过反复排查多次监控后终于成功解决，记录分享一下心得吧！ 故障描述 具体表现为在高峰访问期间，IIS直接报服务器处理503。 系统部署 采用ARR实现的IIS Sever Farm进行负载均衡 ...
记录一次Mysql死锁排查过程
背景 以前接触到的数据库死锁，都是批量更新时加锁顺序不一致而导致的死锁，但是上周却遇到了一个很难理解的死锁。借着这个机会又重新学习了一下mysql的死锁知识以及常见的死锁场景。在多方调研以及和同事们的讨论下终于发现了这个死锁问题的成因，收获颇多。虽然是后端程序员，我们不需要像DBA一样深入 ...
解Bug之路-记一次存储故障的排查过程
解Bug之路-记一次存储故障的排查过程 高可用真是一丝细节都不得马虎。平时跑的好好的系统，在相应硬件出现故障时就会引发出潜在的Bug。偏偏这些故障在应用层的表现稀奇古怪，很难让人联想到是硬件出了问题，特别是偶发性出现的问题更难排查。今天，笔者就给大家带来一个存储偶发性故障的排查过程。 Bug ...
一次死锁导致CPU异常飘高的整个故障排查过程
目录 一、问题详情 top 命令截图 联系腾讯云排查 检查系统日志发现异常 二、 问题解析 三、问题原因 最终结论 四、扩展 进程的几种状态 马后炮 ...