一次故障排查過程
上周晚上，某環境 ES 出現阻塞， 運行緩慢。於是開始排查問題的過程。 開始 思路：現象是阻塞，通常是 CPU 彪高，導致業務線程分配不到 CPU 時間片，或者內存吃緊，頻繁 GC 導致的 STW。 登錄到目標服務器，由於 ES 的用戶不是 LZ，因此找運維要了 root 權限，登錄到服務器 ...
原文：MySQL DeadLock故障排查過程
作者 劉博：攜程技術保障中心數據庫高級經理，主要關注Sql server和Mysql的運維和故障處理。 環境 版本號： . . 隔離級別：REPEATABLE READ 問題描述 接到監控報警，有一個線上的應用DeadLock報錯，每 分鍾會准時出現，報錯統計如下圖： 登錄Mysql服務器查看日志： 大致一看，更新同一索引的同一行，應該是一個Block，報TimeOut的錯才對，怎么會報Dead ...
2019-01-02 11:59 0 3015 推薦指數：
相關推薦
一則線上MySql連接異常的排查過程
Mysql作為一個常用數據庫，在互聯網系統應用很多。有些故障是其自身的bug，有些則不是，這里以前段時間遇到的問題舉例。 問題## 當時遇到的症狀是這樣的，我們的應用在線上測試環境，JMeter測試過程中，發現每次壓力測試開始時訪問低前幾個http request請求會超時，而之后的請求持續 ...
MySQL-記一次備份失敗的排查過程
山竹來臨，窩在家里整理個人文檔。 本篇文章主要講解排查問題的思路，涉及linux 刪除文件的原理、實例誤刪數據恢復、MySQL實例初始化參數優先級別等，雖然涉及知識點比較淺，但是個人覺得挺有 ...
記錄一次Mysql死鎖排查過程
背景以前接觸到的數據庫死鎖，都是批量更新時加鎖順序不一致而導致的死鎖，但是上周卻遇到了一個很難理解的死鎖。借着這個機會又重新學習了一下mysql的死鎖知識以及常見的死鎖場景。在多方調研以及和同事們的討論下終於發現了這個死鎖問題的成因，收獲頗多。雖然是后端程序員，我們不需要像DBA一樣深入地去分析 ...
服務器故障排查三板斧:記一次IIS報503/502錯誤故障排查過程
背景 近期被抓壯丁解決一個幾年前的系統故障，經過反復排查多次監控后終於成功解決，記錄分享一下心得吧！ 故障描述 具體表現為在高峰訪問期間，IIS直接報服務器處理503。 系統部署 采用ARR實現的IIS Sever Farm進行負載均衡 ...
記錄一次Mysql死鎖排查過程
背景 以前接觸到的數據庫死鎖，都是批量更新時加鎖順序不一致而導致的死鎖，但是上周卻遇到了一個很難理解的死鎖。借着這個機會又重新學習了一下mysql的死鎖知識以及常見的死鎖場景。在多方調研以及和同事們的討論下終於發現了這個死鎖問題的成因，收獲頗多。雖然是后端程序員，我們不需要像DBA一樣深入 ...
解Bug之路-記一次存儲故障的排查過程
解Bug之路-記一次存儲故障的排查過程 高可用真是一絲細節都不得馬虎。平時跑的好好的系統，在相應硬件出現故障時就會引發出潛在的Bug。偏偏這些故障在應用層的表現稀奇古怪，很難讓人聯想到是硬件出了問題，特別是偶發性出現的問題更難排查。今天，筆者就給大家帶來一個存儲偶發性故障的排查過程。 Bug ...
一次死鎖導致CPU異常飄高的整個故障排查過程
目錄 一、問題詳情 top 命令截圖 聯系騰訊雲排查 檢查系統日志發現異常 二、 問題解析 三、問題原因 最終結論 四、擴展 進程的幾種狀態 馬后炮 ...