遲到的故障公告：錯誤的緩存數據引發新版博客后台發布后的故障
10月18日晚上 22:00 ，我們對處於灰度發布階段的新版博客后台（Angular 8.2.7 + .NET Core 3.0）進行了一次發布操作，在發布后由於清除緩存 web api 的一個 bug 造成在發布后通過新版博客后台修改的博文無法訪問（404錯誤）；在發現問題后，我們回退至發布之前 ...
原文：【故障公告】新版博客后台部署時的配置問題引發故障
最近，我們對新版博客后台 Angular . . .NET Core . 進行了灰度發布，如果您訪問博客后台時跳轉到 https: i beta.cnblogs.com ，說明使用的就是新版博客后台。 今天我們在一次基於 gitlab ci 的自動化發布過程中，由於操作問題在發布前沒有對 appsettings.Production.json 的修改進行保存，造成容器在啟動時使用了舊版的配置文件 ...
2019-11-14 22:55 5 1255 推薦指數：
相關推薦
【故障公告】docker swarm 集群問題造成新版博客后台故障
非常抱歉，今天下午 16:55~17:05 左右，由於 docker swarm 集群的突發不穩定問題造成新版博客后台（目前處於灰度發布階段）無法正常使用，由此給您帶來麻煩，請您諒解。 出故障期時，新版博客后台的2個容器都無法正常啟動。 發現問題后，我們進行了刪除 stack ...
【故障公告】docker swarm 集群問題引發的故障
我們的生產環境部署了 2 個 docker swarm 集群，集群 swarm-a 用於專門跑博客站點，集群 swarm-b 用於跑其他站點，manager 節點用了阿里雲包月服務器，worker 節點用了阿里雲搶占式實例。 今天 11:03 收到阿里雲的短信通知“您的搶占式實例：實例ID(實例 ...
【故障公告】部署在 k8s 上的博客后台昨天與今天在訪問高峰多次出現 502
非常抱歉，從昨天上午開始，部署在 k8s 集群上的博客后台（基於 .NET Core 3.1 + Angular 8.2 實現）出現奇怪問題，一到訪問高峰就多次出現 502 ，有時能自動恢復，有時需要我們手動刪除 pod ，由此給您帶來麻煩，請您諒解。 我們的應用都部署在同一個 k8s 集群 ...
【故障公告】博客系統升級到 .NET 5.0 引發的故障
【更新】抱歉，是我們錯怪了 .NET 5.0 ，故障與 .NET 5.0 無關，詳見 Memcached 的惹禍，.NET 5.0 的背鍋 昨天晚上我們將博客系統從 .NET Core 3.1 升級到了 .NET 5.0 ，本來是一次很有信心的升級，但沒有想到在今天下午訪問高峰時竟然出現 ...
【故障公告】redis 服務器宕機引發博客站點故障
非常抱歉，今天下午 17:10~17:40 左右，由於博客系統所使用的 redis 服務器宕機，造成博客站點無法正常訪問，由此給您帶來很大的麻煩，請您諒解。 我們會針對這次故障改進 redis 服務器的部署，提高 redis 服務器的高可用性。目前 redis 服務是用阿里雲服務器單獨部署 ...
【故障公告】redis內存耗盡造成博客后台無法保存
非常抱歉，今天上午11:00~11:30左右，由於 redis 服務器內存耗盡造成博客后台故障——保存博文時總是提示“請求太過頻繁，請稍后再試”，由此給您帶來麻煩，請您諒解。 由於 redis 監控報警配置沒有及時更新，當 redis 服務器內存耗盡時我們沒有收到報警通知，所以未能及時發現問題 ...
【故障公告】K8s CofigMap 掛載問題引發網站故障
今天凌晨我們用阿里雲服務器自建的 kubernetes 集群出現突發異常情況，博客站點（blog-web）與博客 web api（blog-api）的 pod 無法正常啟動（CrashLoopBackOff）。 kubectl get pods -l app=blog-web ...