1、事件还原 昨天下午，收到一个504的告警，显然这是一个超时告警。当时由于手头有其他事情，没在意，就只是瞄了一眼，但是引起告警的方法很熟悉，是我写的，第一反应有点诧异。 诧异之后，继续处理手头的工作。 一小时过后，又收到同样的告警，显然不是偶尔，肯定是哪儿出问题了，于是开始排查。 报警 ...

之前同事反馈说线上遇到Redis反序列化异常问题，异常如下： 已知信息如下： 该异常不是必现的，偶尔才会出现； 出现该异常后重启应用或者过一会就好了； 序列化协议使用了hessian。 因为偶尔出现，首先看了报异常那块业务逻辑是不是有问题，看了一遍也发现 ...

前言 之前或多或少分享过一些内存模型、对象创建之类的内容，其实大部分人看完都是懵懵懂懂，也不知道这些的实际意义。 直到有一天你会碰到线上奇奇怪怪的问题，如： 线程执行一个任务迟迟没有返回，应用假死。 接口响应缓慢，甚至请求超时。 CPU 高负载运行。 这类问题并不 ...

> 线上用户存储数据后查看提示无权限 前言 不知道什么时候年轻的我曾一度认为Java没啥难度，没有我实现不了的需求，没有我解不了的bug 直到我遇到至今难忘的一个bug 。 线上用户存储数据后查看提示无权限 初次定位 明明自己添加的数据，为什么提示 ...

https://blog.csdn.net/qq_16681169/article/details/53296137 一.出现问题 在前一段时间日常环境很不稳定，前端调用mtop接口会出网络异常或服务不存在的异常。查询了服务器上的HSF会有偶尔挂死的情况，服务器上的接口服务都不 ...

1、问题发现 Prometheus报警某服务的一个节点 Old GC过多，需要排查。 2、查看GC日志 使用tail -f gc.log命令查看异常节点的GC日志，从日志可以看出Young GC过于频繁，竟然在1s内有9次Young GC： 使用tail ...

由于近期线上单量暴涨，第三方反馈部分工单业务存在查询处理失败现象，经排查是当前系统通过FeignClient调用下游系统出现部分超时失败（异常代码贴在下方）。 通过系统慢请求捕捉拦截，发现当前请求仅耗时1031毫秒，就触发Read timed out超时错误，本项 ...

转贴：http://my.oschina.net/flashsword/blog/205266 本文是一次线上OOM故障排查的经过，内容比较基础但是真实，主要是记录一下，没有OOM排查经验的同学也可以参考。 现象 我们之前有一个计算作业。最近经常出现不稳定，无法正常响应的情况。具体表现 ...