原文:记一次Redis错误排查经历

日志集中式监控平台上线已经有一段时间,但是大部分情况下只是作为发布或者出问题时查看日志的便利工具使用。平时大家都不怎么主动上去看看。于是前几天把应用的错误日志也加上邮件 Hi和短信报警,马上就收到很多错误报警,引起了大家的重视。其中有一个Redis报错: 看起来挺严重的,拿不到Redis连接,而且是在 validate的时候报的错: 我们使用的是Jedis,在validate的时候默认是发送一个P ...

2017-03-17 22:56 0 2790 推荐指数:

查看详情

一次Redis错误排查经历redis cluster 节点重启后无限同步问题)

日志集中式监控平台上线已经有一段时间,但是大部分情况下只是作为发布或者出问题时查看日志的便利工具使用。平时大家都不怎么主动上去看看。于是前几天把应用的错误日志也加上邮件、Hi和短信报警,马上就收到很多错误报警,引起了大家的重视。其中有一个Redis报错: 看起来挺严重的,拿不到 ...

Fri May 15 02:19:00 CST 2020 0 2876
一次排查tomcat耗费CPU过高的经历

有一个新项目,在测试环境部署后,发现tomcat进程耗费的CPU非常高,排查过程如下: 日志搜集 先通过top,查找耗费CPU最高的线程 top -Hp pid 将线程ID转为16进制 printf "%x\n" threadid 搜集JVM的栈日志 jstack pid > ...

Wed Jul 25 03:43:00 CST 2018 0 3741
一次python操作mongodb错误经历

首先,看一下mongodb错误日志 测试环境没有问题,开发环境没有问题,但生产就是会报以上错误,并且导致数据库服务也停止了,刚开始以为是因为存储数据量过大引起的,但后来进行了python接口访问速率限制,仍然不行。 查看日志后发现主要是WiredTiger权限不足导致 ...

Wed Oct 21 22:54:00 CST 2020 0 393
一次redis key丢失的问题排查

最近测试环境的redis经常性发生某些key丢失的问题,最终的找到的问题让人大吃一惊。 复盘一下步骤: 1、发现问题 不知道从某天开始,后台经常报错,原因是某些key丢失,一开始不在意,以为是小bug,后来越来越频繁。 2、检查代码 看看是不是有误删除的情况,这些key的访问范围很小,压根没有删除 ...

Thu Apr 25 22:19:00 CST 2019 0 1424
一次面试经历

投简历阶段 又到了金三银四的这段日子了,看着大家纷纷投简历找工作,抱着有事儿没事儿凑热闹的想法也参加到了投简历的大队伍中。先自我介绍一下,本人三年.NET loser一枚,现就职于某游戏运营公司,l ...

Wed Apr 22 04:45:00 CST 2015 17 2502
我的一次外包经历

其实外包是很多人在职业生涯中都会遇到的问题,也就是接私活。今天我来说说我遇到过的一次外包经历,我要说的这次外包经历既不是我的第一个外包项目,也不是最后一个,之所以要记下来,是因为这是我目前为止遇到过的最坑的一次,导致我整个2015年都在为这一次外包进行补救。不过,我写这篇文章并不是为了抱怨 ...

Tue Feb 16 06:39:00 CST 2016 65 7460
一次dubbo连接zookeeper注册中心发生异常的排查经历

    spring boot集成dubbo项目启动过程中报错,错误信息如下: 项目中引用的是dubbo-spring-boot-starter,版本配置如下:     从启动结果可以看出,dubbo的注册中心zookeeper连接不上了,起初我以为apollo中配置 ...

Mon Jan 20 06:43:00 CST 2020 2 5721
一次排查服务器端接口报500错误经历

目录 1 出现问题情景 2 排查问题 3 解决办法 4 写在最后 1 出现问题情景 该问题来自我实习期间完成的一个博客后端系统,具体如下: 当我辛辛苦苦在编辑器里完成文章格式修改(字数较多,一般大于3000字;字数较少时不会出现问题),以及相关 ...

Fri Jul 27 19:37:00 CST 2018 0 12494
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM