ceph crush算法和crushmap淺析
1 什么是crushmap crushmap就相當於是ceph集群的一張數據分布地圖，crush算法通過該地圖可以知道數據應該如何分布；找到數據存放位置從而直接與對應的osd進行數據訪問和寫入；故障域的設置和數據冗余選擇策略等。crushmap的靈活設置顯示出了ceph的軟件定義存儲方案 ...
原文：Ceph 知識摘錄(Crush算法、PG/PGP)
Crush算法 Crush的目的 優化分配數據，高效的重組數據，靈活的約束對象副本放置，硬件故障時候最大化保證數據安全 流程 Ceph 架構中，Ceph客戶端是直接讀寫存放在OSD上的RADOS Object，因此，Ceph需要走完 Pool, Object Pool, PG OSD set OSD Disk 完整的鏈路，才能讓Ceph client知道目標數據 object的具體位置在哪里。 數 ...
2018-08-25 06:42 0 1047 推薦指數：
相關推薦
Ceph源碼解析：CRUSH算法
1、簡介 隨着大規模分布式存儲系統(PB級的數據和成百上千台存儲設備)的出現。這些系統必須平衡的分布數據和負載(提高資源利用率)，最大化系統的性能，並要處理系統的擴展和硬件失效。ceph設計了CRUSH(一個可擴展的偽隨機數據分布算法)，用在分布式對象存儲系統上，可以有效映射數據對象 ...
調整ceph的pg數（pg_num， pgp_num）
https://www.jianshu.com/p/ae96ee24ef6c 調整ceph的pg數 PG全稱是placement groups，它是ceph的邏輯存儲單元。在數據存儲到cesh時，先打散成一系列對象，再結合基於對象名的哈希操作、復制級別、PG數量，產生 ...
Ceph 存儲集群配置之 POOL、PG 和 CRUSH 配置參考
當您創建池並為每個池設置歸置組 (PG) 的數量時，如果您沒有專門覆蓋默認值，Ceph 會使用默認值。我們建議覆蓋一些默認值。具體來說，我們建議設置池的副本大小並覆蓋默認的歸置組數量。您可以在運行池命令時專門設置這些值。您還可以通過在Ceph 配置文件的[global]部分中添加新的來覆蓋默認值 ...
ceph pg知識點
Pg和pgp的含義： PG是指定存儲池存儲對象的目錄有多少個，PGP是存儲池PG的OSD分布組合個數 PG的增加會引起PG內的數據進行分裂，分裂到相同的OSD上新生成的PG當中 PGP的增加會引起部分PG的分布進行變化，但是不會引起PG內對象的變動 存儲池pg的計算 ...
Ceph學習筆記（2）- CRUSH數據分布算法
前言： 分布式存儲系統需要讓數據均勻的分布在集群中的物理設備上，同時在新設備加入，舊設備退出之后讓數據重新達到平衡狀態尤為重要。新設備加入后，數據要從不同的老設備中遷移過來。老設備退出后，數據遷 ...
ceph crush的問題
ceph crush的問題看一遍忘一遍，現將《ceph源碼分析》一書中相關章節摘抄如下： 4.2.1 層級化的Cluster Map例4-1 Cluster Map定義層級化的Cluster Map定義了OSD集群具有層級關系的靜態拓撲結構。OSD的層級使得CRUSH算法在選擇OSD時實現了機架 ...
ceph之crush map
編輯crush map： 1、獲取crush map； 2、反編譯crush map； 3、至少編輯一個設備，桶， 規則； 4、重新編譯crush map； 5、重新注入crush map； 獲取crush map 要獲取集群的crush map ...