原文:記一次生產數據庫"意外"重啟的經歷

前言 在一個陽光明媚的下午,電腦右下角傳來一片片郵件提醒,同時伴隨着微信釘釘的震動,打開一看,應用各種出錯,天兔告警,數據庫服務器內存爆紅,Mysql數據庫實例掛掉了。 排查 先交代一下數據庫版本: 崩潰故障排除絕不是一項有趣的任務,特別是如果MySQL沒有報告崩潰的原因。例如,當MySQL內存不足時。 數據庫郵件告警提醒發來的消息: 登錄 Grafana 監控面板,數據庫連接在哪個時間段曾有幅 ...

2018-12-05 08:58 31 2647 推薦指數:

查看詳情

一次生產事故--磁盤被占滿

寫在前面 今天,跑在阿里雲ECS上的生產環境,突然間訪問異常,接口各種報錯,無奈公司沒有專業的運維人員,只能硬着頭皮解決一下。 問題排查 先從表面看起,數據庫首先報錯 直觀上看,設備沒有可用空間,也就是磁盤滿了。 進入服務器后台,執行 發現確實磁盤滿了,而且滿的很徹底。系統盤 ...

Tue Feb 11 03:58:00 CST 2020 0 782
一次生產請求耗時的問題

最近發現lb上記錄的request_time比upstream_response_time大的比較多,例如upstream_response_time記錄是0.062,request_time記 ...

Sat Mar 30 16:34:00 CST 2019 3 1869
一次生產kafka消息消費的事故

事故背景:   我們公司與合作方公司有個消息同步的需求,合作方是消息生產者,我們是消息消費者,他們通過kafka給我們推送消息,我們實時接收,然后進行后續業務處理。昨天上午,發現他們推送過來的廣場門店信息我們都沒有消費,導致我們系統和他們系統數據不一致,從而導致無法提單,無法出報表(報表有誤 ...

Wed Jun 12 18:07:00 CST 2019 0 571
一次純sqlite數據庫的小項目開發經歷

sqlite有哪些坑 1.支持的數據量級:根據SQLite的官方提示:http://www.sqlite.org/limits.htmlSQLIte數據庫最大支持128TiB(140 terabytes, or 128 tebibytes, or 140,000 gigabytes ...

Thu Sep 26 19:36:00 CST 2019 0 377
一次mybatis查詢不出結果而數據庫可以查到的經歷

1. 問題 mybatis查不到:控制台查到的是0條數據 將查詢語句和參數復制出來,在數據庫可以查到 2. 應該是參數的問題,應該是參數的問題 在控制台打印參數,拷到notepad++,發現參數前面有空格 3. 問題所在 前台取table單元格的值的時候,使用的是.text ...

Tue Jan 04 18:11:00 CST 2022 0 1664
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM