問題： 注意到自己負責kafka的某個topic最小的偏移量為0，而最大的偏移量都7億多了，說明存儲在kafka里面的數據沒有定時刪除，通過登陸到kafka服務器，查看配置文件services.properties，發現log.retention.hours=876000（100年），我猜想配置 ...

　　很早之前就想動筆就這個kafka bug總結一番了，只是這個問題既不是本人發現，也不是自己動手修復，終歸是底氣不足，故而一直耽擱下來。怎奈此問題實在是含金量十足，又恰逢最近有人詢問Kafka 0.10.2都有哪些提升，我終究還是決定給這個bug寫點東西了。 事先 ...

最近幾天，遇到一個莫名其妙的問題，每天幾乎同一時段微服務自己跑着跑着就假死了，過幾個小時就又自動恢復了。 通過對定時任務、網卡、內存、磁盤、業務日志的排查分析，只有磁盤的IO在假死前一段時間偏高，經查只要到業務訪問高峰時段就會出現磁盤IO偏高的問題。 然后分 ...

Kafka最核心的思想是使用磁盤，而不是使用內存，可能所有人都會認為，內存的速度一定比磁盤快，我也不例外。在看了Kafka的設計思想，查閱了相應資料再加上自己的測試后，發現磁盤的順序讀寫速度和內存持平。 而且Linux對於磁盤的讀寫優化也比較多，包括read-ahead和write-behind ...

數據寫入方式 1. update-in-place原地更新 2. append-only btree/copy on write tree順序文件末尾追加 數據被按照特定方式放置，提升讀性能，但寫性能下降，對b+樹和hash更新時需要隨機 ...

輸入命令 du -sh /* | sort -nr 會列出根目錄文件夾的大小 看到哪個文件夾比較大 刪除相應的緩存，重啟服務器即可 ...

錯誤信息："cluster_block_exception","reason":"blocked by: [FORBIDDEN/12/index read-only / ...

前言 MySQL大量的deleted進程,導致了磁盤利用率達到100% 淘寶數據庫內核月報 步驟 具體分析,大家可以看MySQL · 特性分析 · (deleted) 臨時空間,這篇文章。 我們這里直接操作解決方法。 查看當前緩存目錄 修改緩存目錄 重啟服務 ...