一次zabbix代理隊列積壓的異常處理
【問題現象】 在查詢多個監控網元性能數據時候，發現都有斷點，查看采集程序都正常，而隊列中有一個代理的隊列突然積壓了40多萬個指標未處理 【處理過程】 1、查看proxy的日志情況，無任何異常信息反饋 2、查看代理對應的mysql，無異常等待時間 3、查看代理 ...
原文：記一次隊列積壓問題的分析、解決
現象： 同事負責的項目轉到我部門，整理服務過程中發現了隊列的積壓問題。 為了搞清楚積壓的嚴重程度， 對隊列任務數每分鍾進行一次采樣，生成一個走勢圖， 隊列積壓情況一目了然，非常嚴重。 分析： 聽了同事對系統的介紹，猜測是mongo性能影響了處理效率，於是針對mongo進行分析 .使用mongotop usr local mongodb bin mongotop host . . . : odds ...
2017-04-26 17:57 2 1439 推薦指數：
相關推薦
消息隊列如何解決消息積壓問題
轉載：消息隊列消息積壓了怎么辦？ 作者： 以夢為碼 Q:剛開始是對這個疑問抱有質疑態度的，因為使用消息隊列的其中目的就是削峰填谷，來避免高流量時，對下游服務的沖擊，所以使用消息隊列進行緩沖，下游根據自己的消費能力去消費， 我感覺這就是消息積壓本就是使用消息隊列的功能，怎么會是問題 ...
如何解決消息隊列的過期失效，消息隊列的積壓問題
大量消息在 mq 里積壓了幾個小時了還沒解決 幾千萬條數據在 MQ 里積壓了七八個小時，從下午 4 點多，積壓到了晚上 11 點多。這個是我們真實遇到過的一個場景，確實是線上故障了，這個時候要不然就是修復 consumer 的問題，讓它恢復消費速度，然后傻傻的等待幾個小時消費完畢。這個肯定不能在 ...
記一次內存溢出問題的排查、分析過程及解決思路
謹以此文獻給自學路上的兄弟 起因 這個測試工具的開發已有一段時間了，由於數據量過大，寫入數據較慢，導致工具執行耗時較長，所以再次優化了實現方案，進行二階段的程序開發。 經優化后，200 ...
記一次docker問題定位(perf，iostat等性能分析)
背景 最近參與的項目是基於 OpenStack 提供容器管理能力，豐富公司 IaaS 平台的能力。日常主要工作就是在開源的 novadocker 項目（開源社區已停止開發）基礎上進行增強，與公司的其他業務組件進行對接等。 周末給下游部門的 IaaS 平台進行了一次升級，主要升級 ...
記一次ZOOKEEPER集群超時問題分析
CDH安裝的ZK，三個節點，基本都是默認配置，一直用得正常，今天出現問題，客戶端連接超時6倍時長，默認最大會話超時時間是一分鍾。原因分析：1.首先要確認網絡正確。確認時鍾同步。2.查看現有的配置，基本都是默認配置 JVM配置是1G 有 2g的，不一樣3.查看dataDir目錄，du -sh .發現 ...
公司內部一次關於kafka消息隊列消費積壓故障復盤分享
背景現象 1.20晚上8點業務線開始切換LBS相關流量，在之后的1個小時時間內，積壓量呈上升趨勢，一路到達50W左右，第二天的圖沒貼出具體是50W數字，以下是第一天晚上的貼圖部分。 現象 ...
記一次Pr字幕模糊問題及解決方法
目錄 問題： 解決： 問題： 1.導出視頻后，發現字幕很模糊 2.發現我們導出時的設置如下圖，畫面大小為432x244 3.即使暴力修改寬度為1080，導出畫面的清晰度也不會有什么變化。 解決： 1.新建序列時應該自定義序列為1080x720，而不應 ...