原文:記一次NAS故障分析(ZFS NFS)

問題: 使用vdbench進行單層 w目錄,每個目錄 個文件,共 w文件讀寫時,在創建文件得時候IO會出現斷斷續續得情況。 分析過程: nfs抓包分析 使用vdbench創建一個文件得流程eg: vdb f .file: Lookup call gt lookup reply gt create call gt create reply gt write call gt write reply 當 ...

2022-03-11 10:33 0 903 推薦指數:

查看詳情

一次由於fastjson引用包沖突引發的故障分析

1,現象,從頁面訪問某個url的時候,從后端的catalina.out里面沒有找到相應的錯誤,頁面只是顯示500錯誤 2,在開發者模式中,看response里面的返回,返回如下 HTTP Stat ...

Wed Aug 26 11:18:00 CST 2020 2 1409
【JVM】記錄一次線上SWAP偏高告警的故障分析過程

近期遇到一個堆外內存導致swap飆高的問題,這類問題比較罕見,因此將整個排查過程記錄下來了 現象描述 最近1周線上服務器時不時出現swap報警(swap超過內存10%時觸發報警,內存是4G,因此s ...

Wed May 15 22:20:00 CST 2019 0 725
一次keepalived和VIP導致的故障

起因 nginx服務器采用的keepalived+vip實現的雙活,最近由於一台服務器有問題,更換了一台nginx: 操作: 停止有問題服務器keepalived和nginx 新服務器 ...

Thu Aug 27 18:33:00 CST 2020 0 1438
網絡丟包故障分析

前言: 這篇隨筆是最近處理的一起真實網絡故障分析案例,特此分享給身邊同行的朋友。 故障介紹: 公網這台服務器通過http協議與分支內部的一台服務器做業務交易,當公網服務器向分支這台內部服務器發起http請求做交易時,結果無響應,這也意味着是一次失敗的業務交易 ...

Thu Dec 24 04:06:00 CST 2020 0 335
一次IE代理異常故障

原由:S.S.R完事兒之后IE代理總是自動勾選。無論怎么修改注冊表都無濟於事。且通過Process Explorer監測到任意app都可以自動觸發IE代理開啟。 強勢禁用: 編輯注冊表:HKEY_ ...

Thu Feb 27 16:38:00 CST 2020 0 841
一次自動恢復的支付故障

故障描述 作為一個老牌OTA公司,公司早些年訂單主要來源是PC網站和呼叫中心。我在入職公司大約半年后,遇到一次非常詭異的故障。有一天早上,大概也是這個季節,陽光明媚,程序猿剛起床,洗洗涮涮,准備去迎接初戀般的工作日,卻突然收到一大堆報警,線上消息隊列大量積壓;當然,我還是一如既往的非常勤奮 ...

Thu May 09 21:02:00 CST 2019 23 2963
一次ceph集群的嚴重故障

問題:集群狀態,壞了一個盤,pg狀態好像有點問題[root@ceph-1 ~]# ceph -s cluster 72f44b06-b8d3-44cc-bb8b-2048f5b4acfe ...

Wed Jan 02 23:44:00 CST 2019 0 5801
一次Postgres CPU爆滿故障

問題描述 公司項目測試環境調用某些接口的時候,服務器立即崩潰,並一定時間內無法提供服務。 問題排查 服務器配置不夠 第一反應是服務器需要升配啦,花錢解決一切!畢竟測試服務器配置確實不高,2CP ...

Tue Feb 11 04:03:00 CST 2020 1 1136
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM