記錄一次線上yarn RM頻繁切換的故障
周末一大早被報警驚醒，rm頻繁切換 急急忙忙排查 看到兩處錯誤日志 錯誤信息1 錯誤信息2 查看源碼處FairScheduler 跟進去看下 ...
原文：記錄一次因subprocess PIPE 引起的線上故障
sence：python中使用subprocess.Popen cmd, stdout sys.STDOUT, stderr sys.STDERR, shell True ，stdout, stderr 為None. 在錯誤中執行是無法捕獲 stderr的內容，后面將上面的改為 subprocess.Popen cmd, stdout PIPE, stderr PIPE, shell True ...
2021-11-04 19:36 0 109 推薦指數：
相關推薦
ThreadLocal引起的一次線上事故
> 線上用戶存儲數據后查看提示無權限 前言 不知道什么時候年輕的我曾一度認為Java沒啥難度，沒有我實現不了的需求，沒有我解不了的bug 直到我遇到至今難忘的一個bug 。 線上用戶存儲數據后查看提示無權限 初次定位 明明自己添加的數據，為什么提示 ...
通過jstack與jmap分析一次線上故障
一、發現問題 下面是線上機器的cpu使用率，可以看到從4月8日開始，隨着時間cpu使用率在逐步增高，最終使用率達到100%導致線上服務不可用，后面重啟了機器后恢復。 二、排查思路 簡單分析下可能出問題的地方，分為5個方向： 1.系統本身代碼問題 2.內部下游系統的問題導致的雪崩 ...
一次線上OOM故障排查經過
轉貼：http://my.oschina.net/flashsword/blog/205266 本文是一次線上OOM故障排查的經過，內容比較基礎但是真實，主要是記錄一下，沒有OOM排查經驗的同學也可以參考。 現象 我們之前有一個計算作業。最近經常出現不穩定，無法正常響應的情況。具體表現 ...
通過jstack與jmap分析一次線上故障
一、發現問題 下面是線上機器的cpu使用率，可以看到從4月8日開始，隨着時間cpu使用率在逐步增高，最終使用率達到100%導致線上服務不可用，后面重啟了機器后恢復。 二、排查思路 簡單分析下可能出問題的地方，分為5個方向： 1.系統本身代碼問題 2.內部下游系統的問題導致的雪崩 ...
【JVM】記錄一次線上SWAP偏高告警的故障分析過程
近期遇到一個堆外內存導致swap飆高的問題，這類問題比較罕見，因此將整個排查過程記錄下來了 現象描述 最近1周線上服務器時不時出現swap報警（swap超過內存10%時觸發報警，內存是4G，因此swap超過400M會觸發報警），每次都是童鞋們通過重啟tomcat解決的；但導致的根本原因 ...
一次業務Connection is not available, request timed out after 30000ms線上故障排查記錄
剛入職公司接觸到的第一個項目，應用架構比較簡單和無理 1、業務是推送數據到ldap數據庫，應用是java寫的 2、架構是兩台mysql主主復制，haproxy做兩台mysql的負載（ps：由於應用 ...
Layui引起的對前端的一次記錄
前言 首先會做這次記錄，也是因為自己也是第一次去接觸這個框架，以前總是聽說，並沒有去用過。這次出於實習的原因，去學習了一下Layui這個“面向后端開發者的框架”。其次，此篇記錄僅供參考，畢竟我也不是開發者，所以不能保證文章引用的內容以及自己的理解是否正確，請自行決斷一些內容的正確性。 前段時間 ...