【故障公告】docker swarm 集群問題引發的故障
我們的生產環境部署了 2 個 docker swarm 集群，集群 swarm-a 用於專門跑博客站點，集群 swarm-b 用於跑其他站點，manager 節點用了阿里雲包月服務器，worker 節點用了阿里雲搶占式實例。 今天 11:03 收到阿里雲的短信通知“您的搶占式實例：實例ID(實例 ...
原文：【故障公告】10:30-10:45 左右 docker swarm 集群節點問題引發故障
非常抱歉，今天 : : 左右由於 docker swarm 集群節點出現問題，造成除博客之外的站點出現訪問異常，由此給您帶來很大的麻煩，請您諒解。 故障開始時出現有時訪問正常有時訪問出現 或 ，當時我們就判斷是某個節點出現問題，但無法直接定位出哪個節點，只能依次將一個個節點下線 上線。但是，不走運的是出現問題的節點恰恰是我們最后下線的一個節點。所以，在下線正常節點的過程中，更多的容器被遷移到了問題 ...
2018-09-03 11:16 2 725 推薦指數：
相關推薦
【故障公告】docker swarm 集群問題造成新版博客后台故障
非常抱歉，今天下午 16:55~17:05 左右，由於 docker swarm 集群的突發不穩定問題造成新版博客后台（目前處於灰度發布階段）無法正常使用，由此給您帶來麻煩，請您諒解。 出故障期時，新版博客后台的2個容器都無法正常啟動。 發現問題后，我們進行了刪除 stack ...
雲計算之路-阿里雲上：節點 CPU 波動引發 docker swarm 集群故障
非常抱歉，今天 10:05-10:20 左右，我們用阿里雲服務器搭建的 docker swarm 集群又出現故障，又是因為突然的節點 CPU 波動。 受這次故障影響的站點有 閃存，博問，班級，園子，短信息，招聘，小組，網摘，openapi ，由此給您帶來很大的麻煩，請您諒解。 故障前先是有一個 ...
【故障公告】14:30-15:30左右數據庫連接數飆升引發全站故障（更新）
今天下午14:30左右，先是發現博客后台出現502（博客后台的 pod 健康檢查時會連接數據庫，如果連接過慢造成健康檢查失敗，pod 會重啟，如果所有 pod 都因健康檢查失敗而重啟，這時訪問就會出現502）。過了一會，其中1個 pod 重啟成功，博客后台恢復正常。 原以為只是一次短暫的波動 ...
故障公告：docker swarm集群“群龍無首”造成部分站點無法訪問
今天傍晚 17:38-18:18 左右，由於 docker swarm 集群出現 "The swarm does not have a leader" 問題，造成博問、閃存、園子、小組、openapi 無法正常訪問，由此給您帶來麻煩，請您諒解。 目前我們已經遷移至 asp.net core ...
docker10-swarm集群
簡介 Docker Swarm 是 Docker 的集群管理工具。它將 Docker 主機池轉變為單個虛擬 Docker 主機。 Docker Swarm 提供了標准的 Docker API，所有任何已經與 Docker 守護程序通信的工具都可以使用 Swarm 輕松地擴展到多個主機。 支持 ...
【故障公告】K8s CofigMap 掛載問題引發網站故障
今天凌晨我們用阿里雲服務器自建的 kubernetes 集群出現突發異常情況，博客站點（blog-web）與博客 web api（blog-api）的 pod 無法正常啟動（CrashLoopBackOff）。 kubectl get pods -l app=blog-web ...
雲計算之路-阿里雲上：docker swarm 集群故障與異常
在上次遭遇 docker swarm 集群故障后，我們將 docker 由 17.10.0-ce 升級為最新穩定版 docker 17.12.0-ce 。 前天晚上22:00之后集群中的2個節點突然出現CPU波動，在CPU波動之后，在凌晨夜深人靜、訪問量極低的時候，整個集群出現了故障，訪問 ...