線上nginx的一次“no live upstreams while connecting to upstream ”分析
線上nginx的一次“no live upstreams while connecting to upstream ”分析 線上nginx的一次“no live upstreams while connecting to upstream ”分析-飛翔的單車-51CTO博客 ...
原文：記一次線上由nginx upstream keepalive與http協議"協作"引起的接口報錯率飆高事件
年前接到個任務,說要解決線上一些手機客戶端接口報錯率很高的問題.拿到了監控郵件,粗略一看,各種 的錯誤率,簡直觸目驚心.這種疑難雜症解決起來還是挺好玩的,於是擼起袖子action. 最終的結果雖然報錯問題得到了解決,但是感覺並不是最根本的解決方案. 下面把解決的過程和目前的問題放出來一起探討下. 第一步,針對錯誤進行跟蹤,初步定位問題 由於之前客戶端同學在請求中添加了唯一標示request id. ...
2017-01-19 10:16 3 28741 推薦指數：
相關推薦
線上nginx的一次“no live upstreams while connecting to upstream ”分析
參考：https://www.nginx.com/blog/tuning-nginx/ https://xiezefan.me/2017/09/27/nginx-502-bug-trace/ https://www.cnblogs.com/dadonggg/p/8778318.html ...
記一次dirty_ratio引起的線上事故
; MEM > 85% 故障根因 Kernel報錯如下: 默認情況下， Linux會最多 ...
記一次JAVA進程導致Kubernetes節點CPU飆高的排查與解決
一、發現問題 在一次系統上線后，我們發現某幾個節點在長時間運行后會出現CPU持續飆升的問題，導致的結果就是Kubernetes集群的這個節點會把所在的Pod進行驅逐（調度）；如果調度到同樣問題的節點上，也會出現Pod一直起不來的問題。我們嘗試了殺死Pod后手動調度的辦法（label ...
記一次jvm瘋狂gc導致CPU飆高的問題解決
記錄一次java虛擬機CPU飆高的異常處理 線上web服務器不時的出現非常卡的情況，登錄服務器top命令發現服務器CPU非常的高， 重啟tomcat之后CPU恢復正常，半天或者一天之后又會偶現同樣的問題。 解決問題首先要找到問題的爆發點，對於偶現的問題是非常難於定位的。 重啟服務器之后只能 ...
記一次線上商城系統高並發的優化
對於線上系統調優，它本身是個技術活，不僅需要很強的技術實戰能力，很強的問題定位，問題識別，問題排查能力，還需要很豐富的調優能力。 本篇文章從實戰角度，從問題識別，問題定位，問題分析，提出解決方案，實施解決方案，監控調優后的解決方案和調優后的觀察等角度來與大家一起交流分享本次線上 ...
記一次生產環境docker服務CPU飆高排查
今天早上，運維同學發現生產某個服務 CPU 持續飆高，於是開始進行排查： 1、首先使用 top 命令，查看 CPU 占用高的進程，得到進程 ID 2、根據上一步找到的進程ID，ps -ef | grep [進程ID] 找到對應程序 3、進入程序對應docker容器 ...
記一次線上報錯日志問題排查
今天陽光明媚，掐指一算，今天比較適合划水。 於是早上到公司之后先是蹲了廁所，然后就准備翻閱公眾號推文。 看的正嗨，突然釘釘群里開始響了， 生產日志群報了一條警告，如下： 報錯信息很明確 定位到業務代碼如下 一個普普通通的map的put操作，怎么就報錯了呢？繼續往下 ...