【Redis連接超時】記錄線上RedisConnectionFailureException異常排查過程
項目架構： 部分組件如下： SpringCloudAlibaba(Nacos+Gateway+OpenFeign）+SpringBoot2.x+Redis 問題背景: 最近由於用戶量增大，在高峰時期，會導致用戶服務偶爾Redis出現連接超時的情況， 例如：從Redis中 ...
原文：一則線上MySql連接異常的排查過程
Mysql作為一個常用數據庫，在互聯網系統應用很多。有些故障是其自身的bug，有些則不是，這里以前段時間遇到的問題舉例。 問題 當時遇到的症狀是這樣的，我們的應用在線上測試環境，JMeter測試過程中，發現每次壓力測試開始時訪問低前幾個http request請求會超時，而之后的請求持續測試中都不會。最后一點是Tomcat的log並沒有報什么錯誤。 壓測的內容就是起 線程不停的向這個http頁面發 ...
2015-05-24 16:03 0 6511 推薦指數：
相關推薦
線上問題的排查過程
線上問題的排查過程1、測試統一收口，2、產品判斷是否正常邏輯 | 測試判斷是否已經用例覆蓋 | 技術排查日志或代碼變更 ...
原創 記錄一次線上Mysql慢查詢問題排查過程
背景 前段時間收到運維反饋，線上Mysql數據庫凌晨時候出現慢查詢的報警，並把原始sql發了過來： 表數據量200W左右，不是很大，而且是根據主鍵更新。 問題排查 排查Mysql數據庫 我看到sql后第一反應就是是不是數據庫出問題了，每個小時都有業務，偏偏白天業務高峰時間段 ...
一次線上接口超時的排查過程
1、事件還原 昨天下午，收到一個504的告警，顯然這是一個超時告警。當時由於手頭有其他事情，沒在意，就只是瞄了一眼，但是引起告警的方法很熟悉，是我寫的，第一反應有點詫異。 詫異之后，繼續處理手頭的工作。 一小時過后，又收到同樣的告警，顯然不是偶爾，肯定是哪兒出問題了，於是開始排查。 報警 ...
一個線上 Maven 詭異問題排查過程
å. 前言 現在的大部分 Java 應用基本都是通過 Maven 進行組織的，不論是分布式應用還是單體集群應用往往都會通過一個 父 POM 加若干子 POM 完成項目的組織。然而這種多應用多模 ...
記一次線上內存泄漏問題的排查過程
近期需要對公司的接口做線上的巡查監控，需要寫一個腳本放到服務器上，定時運行腳本監測線上接口是否正常。測試的接口不是HTTP協議，而是公司基於TCP協議開發的私有協議，因此不能直接用現成的一些接口測試工具，需要自己寫代碼來調用接口。由於是私有協議，為了方便各業務項目進行通信，開發部門統一提供了一個 ...
記一次線上崩潰問題的排查過程
大家好，我是雨樂！ 前幾天，突然收到報警，線上服務崩潰，然后自動重啟。 由於正值雙十一期間，業務以穩定為主，線上服務崩潰，這可不是一件小事，趕緊登陸線上服務器，分析原因，迅速解決。 借助這篇文章，記錄下整個崩潰的分析和解決過程。 收到報警 上午上班后，正在划水，突然收到郵件報警 ...
MySQL DeadLock故障排查過程
【作者】 劉博：攜程技術保障中心數據庫高級經理，主要關注Sql server和Mysql的運維和故障處理。 【環境】 版本號：5.6.21 隔離級別：REPEATABLE READ 【問題描述】 接到監控報警，有一個線上的應用DeadLock報錯，每15分鍾會准時出現，報錯統計如下圖 ...