k8s 開船記-故障公告：自建 k8s 集群在阿里雲上大翻船
非常非常抱歉，新年上班第一天， 在今天阿里雲上氣候突變情況下，由於我們開船技術差，在今天 10:15~12:00 左右的訪問高峰，我們竟然把船給開翻了，造成近2個小時整個博客站點無法訪問，由此給您帶來很大很大的麻煩，懇請您的諒解。 翻船經過如下。 翻船前的船只情況 博客站點正在使用的 k8s ...
原文：【故障公告】部署在 k8s 上的博客后台昨天與今天在訪問高峰多次出現 502
非常抱歉，從昨天上午開始，部署在 k s 集群上的博客后台 基於 .NET Core . Angular . 實現 出現奇怪問題，一到訪問高峰就多次出現 ，有時能自動恢復，有時需要我們手動刪除 pod ，由此給您帶來麻煩，請您諒解。 我們的應用都部署在同一個 k s 集群上，就這一個應用出現這個問題，很是奇怪，估計還是應用本身的問題，我們正在進一步排查。 為了避免再次出現這個問題，今天中午我們已 ...
2020-04-08 13:45 6 3012 推薦指數：
相關推薦
K8S部署---故障處理
一、kubeadm部署K8S集群故障排查 問題1：kubeadm初始化master01失敗？ [root@k8s-master01 ~]# kubeadm init --config=new-kubeadm-config.yaml --upload-certs |tee ...
【故障公告】K8s CofigMap 掛載問題引發網站故障
今天凌晨我們用阿里雲服務器自建的 kubernetes 集群出現突發異常情況，博客站點（blog-web）與博客 web api（blog-api）的 pod 無法正常啟動（CrashLoopBackOff）。 kubectl get pods -l app=blog-web ...
【故障公告】新版博客后台部署時的配置問題引發故障
最近，我們對新版博客后台（Angular 8.2.7 + .NET Core 3.0）進行了灰度發布，如果您訪問博客后台時跳轉到 https://i-beta.cnblogs.com/ ，說明使用的就是新版博客后台。 今天我們在一次基於 gitlab-ci 的自動化發布過程中，由於操作問題 ...
【故障公告】訪問高峰數據庫服務器 CPU 100% 引發全站故障
今天上午11:10，我們又中“獎”了，我們使用的阿里雲 RDS 實例（SQL Server 2016 標准版，16核32G）突發出現 CPU 100%，引發全站故障，直到 12:15 才完全恢復，由此給您帶來很大的麻煩，請您諒解。 這是我們今年的第3次中“獎”，前2次分別發生 ...
【故障公告】突然猛增的巨量請求沖垮一共92核CPU的k8s集群
非常抱歉，今天下午2點左右開始，博客站點突然猛增的巨量請求讓k8s集群的節點服務器不堪重負，造成網站無法正常訪問，由此給您帶來麻煩，請您諒解。 當時k8s集群一共6台node服務器，2台32核64G，2台8核64G，1台8核16G，1台4核6G，博客站點一共跑了19個pod，如果不是突然猛增 ...
阿里雲k8s服務springboot項目應用升級時出現502錯誤
背景 隨着小步快跑、快速迭代的開發模式被越來越多的互聯網企業認同和采用，應用的變更、升級頻率變得越來越頻繁。為了應對不同的升級需求，保證升級過程平穩順利地進行，誕生了一系列的部署發布模式。 停機發布 - 把老版的應用實例完全停止，再發布新的版本。這種發布模式主要為了解決新老版本互不兼容 ...
部署k8s（一）
二進制部署 環境准備： 部署etcd集群 etcd是CoreOs團隊發起的開源項目，它的目標是構建一個高可用的分布式鍵值（key-value）數據庫。etcd內部采用raft協議作為一致性算法，etcd是go語言編寫 ...