記錄一次Mysql死鎖排查過程
背景以前接觸到的數據庫死鎖，都是批量更新時加鎖順序不一致而導致的死鎖，但是上周卻遇到了一個很難理解的死鎖。借着這個機會又重新學習了一下mysql的死鎖知識以及常見的死鎖場景。在多方調研以及和同事們的討論下終於發現了這個死鎖問題的成因，收獲頗多。雖然是后端程序員，我們不需要像DBA一樣深入地去分析 ...
原文：記錄一次concurrent mode failure問題排查過程以及解決思路
背景：后台定時任務腳本每天凌晨 點 會執行一個批量掃庫做業務的邏輯。 gc錯誤日志： 借鑒於:understanding cms gc logs 得知導致concurrent mode failure的原因有是： there was not enough space in the CMS generation to promote the worst case surviving young g ...
2017-07-10 15:11 0 4011 推薦指數：
相關推薦
原創 記錄一次線上Mysql慢查詢問題排查過程
背景 前段時間收到運維反饋，線上Mysql數據庫凌晨時候出現慢查詢的報警，並把原始sql發了過來： 表數據量200W左右，不是很大，而且是根據主鍵更新。 問題排查 排查Mysql數據庫 我看到sql后第一反應就是是不是數據庫出問題了，每個小時都有業務，偏偏白天業務高峰時間段 ...
記錄一次http網絡超時的排查過程
微信公眾號：內核小王子 覺得可以的話歡迎關注 場景：公司對外網關對很多外部商戶開放，運行多年一直正常，昨天某一個客戶調用我們接口的時候頻繁報connectiontimeout，異常如下： 該異常來自於httpclient，原因是創建連接超時，也就是tcp進行三次握手的時候失敗 ...
記錄一次Mysql死鎖排查過程
背景 以前接觸到的數據庫死鎖，都是批量更新時加鎖順序不一致而導致的死鎖，但是上周卻遇到了一個很難理解的死鎖。借着這個機會又重新學習了一下mysql的死鎖知識以及常見的死鎖場景。在多方調研以及和同事們的討論下終於發現了這個死鎖問題的成因，收獲頗多。雖然是后端程序員，我們不需要像DBA一樣深入 ...
記錄一次Flink作業異常的排查過程
最近2周開始接手apache flink全鏈路監控數據的作業，包括指標統計，業務規則匹配等邏輯，計算結果實時寫入elasticsearch. 昨天遇到生產環境有作業無法正常重啟的問題，我負責對這個問題進行排查跟進。 第一步，基礎排查 首先拿到jobmanager和taskmanager的日志 ...
記錄一次OOM的排查過程以及內存分析、解決方案
都是在內存中處理的) 記錄下此次OOM的排查過程。 1. 前置知識 關於JVM調試的前置知 ...
一次ygc越來越慢的問題排查過程
問題發現場景 某天突然收到線上應用的gc時間過長的告警，剛開始只有一台機器偶爾報一下，后續其他機器也紛紛告警，具體告警的閾值是應用10分鍾內ygc的總時長達到了6.6s。 初步排除過程 按照gc問題常規排查流程，還是先保留現場，jmap -dump:format=b,file ...
記一次慢sql問題排查過程
背景說明 組織架構被拆分為多個微服務 需求： 一個輸入框 查詢 前后模糊查詢 人員信息（工號、姓名），前后模糊查詢 單位名稱。 跨庫平級查詢！！ ...