在NoSQL存儲系統中，一般都采用Key-Value的數據類型，Key-Value結構簡單，易於存儲，非常適合分布式NoSQL存儲系統。但簡單的數據類型對業務存儲的數據就有一定的局限性，比如需要存儲列表類型的數據。針對這個問題，系統對Key-Value類型的數據做了一些擴展，支持在一個Key下存儲 ...

在分布式存儲系統中，數據需要分散存儲在多台設備上，數據分片（Sharding）就是用來確定數據在多台存儲設備上分布的技術。數據分片要達到三個目的： 分布均勻，即每台設備上的數據量要盡可能相近； 負載均衡，即每台設備上的請求量要盡可能相近 ...

分布式存儲系統是為了解決單機存儲所存在的容量、性能等瓶頸，以及可用性、擴展性等方面的問題，通過把數據分散存儲在多台存儲設備上，為大規模的存儲應用提供大容量、高性能、高可用、擴展性好的存儲服務。這一系列的文章介紹一種典型的分布式存儲系統的設計和實現，該系統已經服務大量的業務，達到了數百T的存儲 ...

高性能分布式計算與存儲系統設計概要（上篇） 2012年底，末日之后，看到大家都在寫年末總結，我也忍不住想一試。工作已經3年半了，頭一次寫總結。雖然到現在仍是無名小碼農一名，但工作這些年，技術着實有不少積累。成長最大的，當然就是這篇文章標題提到的——高性能分布式 ...

高性能分布式計算與存儲系統設計概要（下篇） （上篇） 在上篇里，我們主要討論了，這個系統怎樣處理大數據的“讀”操作，當然還有一些細節沒有講述。下篇，我們將主要講述，“寫”操作是如何被處理的。我們都知道，如果只有“讀”，那幾乎是不用做任何數據同步的，也不會有 ...

在分布式存儲系統中，系統可用性是最重要的指標之一，需要保證在機器發生故障時，系統可用性不受影響，為了做到這點，數據就需要保存多個副本，並且多個副本要分布在不同的機器上，只要多個副本的數據是一致的，在機器故障引起某些副本失效時，其它副本仍然能提供服務。本文主要介紹數據備份的方式，以及如何保證多個 ...

1. 前言 分布式文件存儲系統其作用主要有兩個：其一存儲海量的文檔、圖片、視頻等blob類數據，其二作為分布式表格系統的持久化層，如 HDFS於HBase。流行的分布式文件存儲系統有很多，如google的GFS、及其開源的實現版本HDFS和Facebook的Haystack ...

GlusterFS分布式存儲系統 一，分布式文件系統理論基礎 1.1 分布式文件系統出現 計算機通過文件系統管理，存儲數據，而現在數據信息爆炸的時代中人們可以獲取的數據成指數倍的增長，單純通過增加硬盤個數來擴展計算機文件系統的存儲容量的方式 ...