最近我們在服務器部署上使用了一些阿里雲競價服務器,比如在負載均衡中使用包年包月服務器與競價服務器相結合,服務器部署調整時先用競價服務器臨時頂替一下。使用競價服務器最大的風險是隨時可能會被釋放,今天之前我們只遇到過1次競價服務器被釋放的情況,那次被釋放了2台,也是在周五,看來周五是一個競價的高峰,使用競價服務器的朋友需留意。
今天早晨我們吃驚的發現,所有的競價服務器全沒了,一絲痕跡都沒有留下,只有 5:35 收到的多條告別短信:
【阿里雲】尊敬的用戶,您好!您競價購買的實例: i-bp1glob57mdslykpz2vq即將進入釋放狀態,請您登錄雲主機保存系統內數據。謝謝
原來所有的競價服務器同時被釋放了,無一幸免。
這些服務器的不辭而別,本來不會帶來問題。可是,不爭氣的 docker swarm 不能正確面對朝夕相伴的老友不辭而別,在剩下 3 個 manager 節點的情況下,在早上的訪問低峰 7:20 左右竟然宕機了。。。我們發現后,本以為在這樣的訪問低峰重啟節點可以恢復,結果不湊效,只能重建集群,在重建集群又遇到了麻煩,一直到 8:20 左右才恢復正常。
與此同時,由於昨天忙於處理故障,我們的找找看索引服務器未及時由競價服務器更換為包月服務器也被釋放了,造成搜索站點故障,到 9:15 左右才恢復。
又要和大家說抱歉,請大家再次諒解由此給您帶來的麻煩!
有時真的很奇怪,問題們似乎商量好的結伴而來,讓人難以招架,但我們知道每當出現這樣的問題們的團聚,是對我們解決問題能力的考驗與挑戰,只要戰勝它們,就是一次成長的飛躍。