記一次隊列積壓問題的分析、解決
現象： 同事負責的項目轉到我部門，整理服務過程中發現了隊列的積壓問題。 為了搞清楚積壓的嚴重程度， 對隊列任務數每分鍾進行一次采樣，生成一個走勢圖， 隊列積壓情況一目了然，非常嚴重。 分析： 聽了同事對系統的介紹，猜測是mongo性能影響了處理效率，於是針對mongo進行分析 ...
原文：一次zabbix代理隊列積壓的異常處理
問題現象 在查詢多個監控網元性能數據時候，發現都有斷點，查看采集程序都正常，而隊列中有一個代理的隊列突然積壓了 多萬個指標未處理 處理過程 查看proxy的日志情況，無任何異常信息反饋 查看代理對應的mysql，無異常等待時間 查看代理和數據庫所在的主機性能，CPU 內存 網絡 IO指標都正常 嘗試重啟數據庫和代理進程，問題未解決 通過隊列的 細節 選項，查看堵塞的監控項情況，發現有大量的容器主 ...
2019-11-20 12:59 0 608 推薦指數：
相關推薦
Spring ThreadPoolTaskExecutor隊列滿的異常處理
<!-- 配置線程池 --> <bean id="threadPool" class="org.springframework.scheduling.concurrent.Th ...
c/c++ 多線程 等待一次性事件 異常處理
多線程 等待一次性事件 異常處理 背景：假設某個future在等待另一個線程結束，但是在被future等待的線程里發生了異常(throw一個異常A），這時怎么處理。 結果：假設發生了上面的場景，則在調用future的get方法時，就會得到被future等待的線程拋出的異常A。 3種情況 ...
記一次 cdh6 service Connection refused 異常處理
cdh6 service啟動遇到問題 ：提示主機unhealthy 打開日志顯示的是 ............................ Caused by: java.net.Conne ...
公司內部一次關於kafka消息隊列消費積壓故障復盤分享
背景現象 1.20晚上8點業務線開始切換LBS相關流量，在之后的1個小時時間內，積壓量呈上升趨勢，一路到達50W左右，第二天的圖沒貼出具體是50W數字，以下是第一天晚上的貼圖部分。 現象 ...
記一次IE代理異常故障
原由：S.S.R完事兒之后IE代理總是自動勾選。無論怎么修改注冊表都無濟於事。且通過Process Explorer監測到任意app都可以自動觸發IE代理開啟。 強勢禁用： 編輯注冊表：HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Services ...
一次處理anaconda prompt異常的經歷
一天偶然打開anaconda prompt，發現存在如下異常（大概）：“此處不應該有......后邊跟一些環境變量”，初步以為anaconda經常被刪、裝一些包，一位壞了，百度如何修復，然后嘗試了一些方法無效！與此同時，我在安裝cuda需要查看顯卡信息，就去添加環境變量，發現添加 ...
zabbix異常處理之resuming Zabbix agent checks on host "192.168.200.38": connection restored
一、查看zabbix server端log 查看zabbix server日志發現這台主機的日志有大量報錯信息"first network error"以及 another network error 二、查看主機TCP連接 發現存在大量的TIME_WAIT連接 ...