原文:记一次生产数据库"意外"重启的经历

前言 在一个阳光明媚的下午,电脑右下角传来一片片邮件提醒,同时伴随着微信钉钉的震动,打开一看,应用各种出错,天兔告警,数据库服务器内存爆红,Mysql数据库实例挂掉了。 排查 先交代一下数据库版本: 崩溃故障排除绝不是一项有趣的任务,特别是如果MySQL没有报告崩溃的原因。例如,当MySQL内存不足时。 数据库邮件告警提醒发来的消息: 登录 Grafana 监控面板,数据库连接在哪个时间段曾有幅 ...

2018-12-05 08:58 31 2647 推荐指数:

查看详情

一次生产事故--磁盘被占满

写在前面 今天,跑在阿里云ECS上的生产环境,突然间访问异常,接口各种报错,无奈公司没有专业的运维人员,只能硬着头皮解决一下。 问题排查 先从表面看起,数据库首先报错 直观上看,设备没有可用空间,也就是磁盘满了。 进入服务器后台,执行 发现确实磁盘满了,而且满的很彻底。系统盘 ...

Tue Feb 11 03:58:00 CST 2020 0 782
一次生产请求耗时的问题

最近发现lb上记录的request_time比upstream_response_time大的比较多,例如upstream_response_time记录是0.062,request_time记 ...

Sat Mar 30 16:34:00 CST 2019 3 1869
一次生产kafka消息消费的事故

事故背景:   我们公司与合作方公司有个消息同步的需求,合作方是消息生产者,我们是消息消费者,他们通过kafka给我们推送消息,我们实时接收,然后进行后续业务处理。昨天上午,发现他们推送过来的广场门店信息我们都没有消费,导致我们系统和他们系统数据不一致,从而导致无法提单,无法出报表(报表有误 ...

Wed Jun 12 18:07:00 CST 2019 0 571
一次纯sqlite数据库的小项目开发经历

sqlite有哪些坑 1.支持的数据量级:根据SQLite的官方提示:http://www.sqlite.org/limits.htmlSQLIte数据库最大支持128TiB(140 terabytes, or 128 tebibytes, or 140,000 gigabytes ...

Thu Sep 26 19:36:00 CST 2019 0 377
一次mybatis查询不出结果而数据库可以查到的经历

1. 问题 mybatis查不到:控制台查到的是0条数据 将查询语句和参数复制出来,在数据库可以查到 2. 应该是参数的问题,应该是参数的问题 在控制台打印参数,拷到notepad++,发现参数前面有空格 3. 问题所在 前台取table单元格的值的时候,使用的是.text ...

Tue Jan 04 18:11:00 CST 2022 0 1664
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM