記go中一次http超時引發的事故
記一次http超時引發的事故 前言 分析下具體的代碼實現 服務設置超時 客戶端設置超時 http.client context http.Transport 問題 總結 ...
原文：記一次網絡請求連接超時的事故
從HTTP請求超時 重試機制 操作系統網絡等層面剖析了事故的原因，最終解決業務問題。 這里先拋兩個問題： 你遭遇過由於網絡連接或請求超時造成的生產事故嗎 你知道操作系統默認的網絡連接超時是多少秒 問題背景 最近同事出現這么一個問題，簡單業務場景： 服務A使用HTTP請求服務B接口m。服務A起了一個定時任務Task： 從db查詢數據總共有 條，每條記錄對應一次請求，循環調用m接口。服務B收到請求會使 ...
2020-12-17 14:54 0 351 推薦指數：
相關推薦
記一次訂單號事故
記一次訂單號事故 去年年底的時候，我們線上出了一次事故，這個事故的表象是這樣的: 系統出現了兩個一模一樣的訂單號，訂單的內容卻不是不一樣的，而且系統在按照 訂單號查詢的時候一直拋錯，也沒法正常回調，而且事情發生的不止一次，所以 這次系統升級一定要解決掉。 經手的同事之前也改過幾次 ...
記一次Spring配置事故
在引入Spring的Validated時，需要聲明如下bean： 出於偷懶，放在了如下的一個初始化中： ...
記一次kubernetes集群異常: kubelet連接apiserver超時
Background kubernetes是master-slave結構，master node是集群的大腦， 當master node發生故障時整個集群都"out of control"。master node中最重要的當屬apiserver組件， 它負責處理所有請求， 並持久化狀態到etcd ...
記一次go中map並發引起的事故
池連接失敗 場景復原 先來看來偽代碼 一個全局的map，然后WaitGroup開啟一組協程並 ...
記一次生產事故--磁盤被占滿
寫在前面 今天，跑在阿里雲ECS上的生產環境，突然間訪問異常，接口各種報錯，無奈公司沒有專業的運維人員，只能硬着頭皮解決一下。 問題排查 先從表面看起，數據庫首先報錯 直觀上看，設備沒有可 ...
記一次線上事故的JVM內存學習
今天線上的hadoop集群崩潰了，現象是namenode一直在GC，長時間無法正常服務。最后運維大神各種倒騰內存，GC穩定后，服務正常。雖說全程在打醬油，但是也跟着學習不少的東西。 第一個 ...
記一次dirty_ratio引起的線上事故
故障時間軸 發生時間：2020-09-14 06:40 發現時間：2020-09-14 06:41 響應時間：2020-09-14 07:42 故障表現 磁盤> ...