在分布式存儲系統中，數據需要分散存儲在多台設備上，數據分片（Sharding）就是用來確定數據在多台存儲設備上分布的技術。數據分片要達到三個目的： 分布均勻，即每台設備上的數據量要盡可能相近； 負載均衡，即每台設備上的請求量要盡可能相近 ...

分布式存儲系統是為了解決單機存儲所存在的容量、性能等瓶頸，以及可用性、擴展性等方面的問題，通過把數據分散存儲在多台存儲設備上，為大規模的存儲應用提供大容量、高性能、高可用、擴展性好的存儲服務。這一系列的文章介紹一種典型的分布式存儲系統的設計和實現，該系統已經服務大量的業務，達到了數百T的存儲 ...

在分布式存儲系統中，系統可用性是最重要的指標之一，需要保證在機器發生故障時，系統可用性不受影響，為了做到這點，數據就需要保存多個副本，並且多個副本要分布在不同的機器上，只要多個副本的數據是一致的，在機器故障引起某些副本失效時，其它副本仍然能提供服務。本文主要介紹數據備份的方式，以及如何保證多個 ...

，通常還搭配RAID技術作為冗余方案。分布式系統面臨的問題則要復雜得多。借鑒至RAID技術，有副本，糾 ...

高性能分布式計算與存儲系統設計概要（上篇） 2012年底，末日之后，看到大家都在寫年末總結，我也忍不住想一試。工作已經3年半了，頭一次寫總結。雖然到現在仍是無名小碼農一名，但工作這些年，技術着實有不少積累。成長最大的，當然就是這篇文章標題提到的——高性能分布式 ...

高性能分布式計算與存儲系統設計概要（下篇） （上篇） 在上篇里，我們主要討論了，這個系統怎樣處理大數據的“讀”操作，當然還有一些細節沒有講述。下篇，我們將主要講述，“寫”操作是如何被處理的。我們都知道，如果只有“讀”，那幾乎是不用做任何數據同步的，也不會有 ...

GlusterFS分布式存儲系統 一，分布式文件系統理論基礎 1.1 分布式文件系統出現 計算機通過文件系統管理，存儲數據，而現在數據信息爆炸的時代中人們可以獲取的數據成指數倍的增長，單純通過增加硬盤個數來擴展計算機文件系統的存儲容量的方式 ...

Sheepdog，是由NTT的3名日本研究員開發的開源項目，主要用來為虛擬機提供塊設備。 其架構例如以下： 以下，我們將從架構、模塊等幾個方面來介紹下： 一、架構圖 如上圖： 採用無中心節點的全對稱架構，無單點故障，存儲容量和性能 ...