在上次遭遇 docker swarm 集群故障后,我們將 docker 由 17.10.0-ce 升級為最新穩定版 docker 17.12.0-ce 。 前天晚上22:00之后集群中的2個節點突然出現CPU波動,在CPU波動之后,在凌晨夜深人靜、訪問量極低的時候,整個集群出現了故障,訪問 ...
非常抱歉,今天 : : 左右,我們用阿里雲服務器搭建的 docker swarm 集群又出現故障,又是因為突然的節點 CPU 波動。 受這次故障影響的站點有 閃存,博問,班級,園子,短信息,招聘,小組,網摘,openapi ,由此給您帶來很大的麻煩,請您諒解。 故障前先是有一個 worker 節點出現 CPU 報警: 雲服務器ECS實例:swarm node ,CPU使用率於 : 發生告警,值為 ...
2018-01-26 11:08 8 2427 推薦指數:
在上次遭遇 docker swarm 集群故障后,我們將 docker 由 17.10.0-ce 升級為最新穩定版 docker 17.12.0-ce 。 前天晚上22:00之后集群中的2個節點突然出現CPU波動,在CPU波動之后,在凌晨夜深人靜、訪問量極低的時候,整個集群出現了故障,訪問 ...
為了迎接春節假期后的訪問高峰,我們今天對 docker swarm 集群進行了變更操作,購買了1台阿里雲4核8G的服務器作為 worker 節點,由原來的 3 manager nodes + 2 worker nodes 變為 3 manager nodes + 3 worker nodes ...
3月21日,由於使用阿里雲服務器自建 docker swarm 集群的不穩定,我們將自建 docker swarm 集群上的所有應用切換阿里雲容器服務 swarm 版(非swarm mode)。 3月22日,我們進行移除與重啟節點的操作時引發了故障,詳見 雲計算之路-阿里雲上-容器服務:移除節點 ...
非常非常抱歉!16:30 ~ 17:00 左右我們用於跑 ASP.NET Core 站點的 docker swarm 集群再次出現宕機,由此給您帶來了很大很大的麻煩,懇請您的諒解! 受此次故障影響的站點有:博問,閃存,班級,園子,短信息,招聘,小組,網摘,新聞,openapi 故障 ...
今天 11:29 - 11:39 左右,docker swarm 集群 3 個 manager 節點同時出現異常,造成整個集群宕機,由此給您帶來很大的麻煩,請您諒解。 受此次故障影響的站點有:博問,閃存,班級,園子,短信息,招聘,小組,網摘,新聞,openapi 最近我們剛剛確認我們所有遇到 ...
非常非常抱歉,由於我們的疏忽 —— docker swarm 集群中的 2 台服務器沒有及時續費,造成在夜里0點被自動關機,從而引發整個 docker swarm 集群故障,造成今天凌晨 0:30 ~ 7:50 左右跑在集群上的站點無法訪問,由此給您帶來很大很大的麻煩,懇請您的諒解。受這次故障影響 ...
針對上周 docker swarm 集群的頻繁故障(詳見故障一 、故障二、故障三),我們今天對 docker swarm 集群的部署進行了如下調整。 將 docker engine 由 “17.12.0-ce, build c97c6d6” 升級至 “17.12.1-ce, build ...
今天上午 10: 40 左右,我們所使用的阿里雲 RDS 實例的 CPU 突然飆高到近 100% ,造成大量數據庫查詢操作緩慢、超時,在這個惡劣條件下大量 memcached 緩存無法建立,這樣的雪上加霜讓 Web 服務器的 CPU 跟着不堪重負,於是要么訪問緩慢,要么直接 503 。。。造成 ...