Redis Cluster搭建高可用Redis服務器集群


一、Redis Cluster集群簡介 

Redis Cluster是Redis官方提供的分布式解決方案,在3.0版本后推出的,有效地解決了Redis分布式的需求,當一個節點掛了可以快速的切換到另一個節點,當遇到單機內存、並發等瓶頸時,可以采用分布式方案要解決問題。

二、集群原理


 

Redis Cluster架構圖

Redis Cluster集群采用了P2P的模式,完全去中心化,Redis把所有的Key分成了16384個slot,每個Redis實例負責其中一部分slot,集群中的所有信息(節點、端口、slot等),都通過節點之間定期的數據交換而更新,Redis客戶端可以在任意一個Redis實例發出請求,如果所需數據不在該實例中,通過重定向命令引導客戶端訪問所需的實例。

其結構特點:

  • 所有的redis節點彼此互聯(PING-PONG機制),內部使用二進制協議優化傳輸速度和帶寬。
  • 節點的fail是通過集群中超過半數的節點檢測失效時才生效。
  • 客戶端與redis節點直連,不需要中間proxy層.客戶端不需要連接集群所有節點,連接集群中任何一個可用節點即可。
  • redis-cluster把所有的物理節點映射到[0-16383]slot上(不一定是平均分配),cluster負責維護node<->slot<->value。
  • Redis集群預分好16384個桶,當需要在Redis集群中放置一個key-value 時,根據CRC16(key) mod 16384的值,決定將一個key放到哪個桶中。

三、集群搭建

要讓集群正常工作至少需要3個主節點,一共就需要6個節點,其中3個為主節點,3個為從節點,為了簡單在下面在一台機器上演示,演示使用了linux服務器上7000到7005的6個端口。

下載redis、解壓、安裝

wget http://download.redis.io/releases/redis-3.2.4.tar.gz

tar -zxvf redis-3.2.4.tar.gz

cd redis-3.2.4/

make&&makeinstall

 

將redis-trib.rb復制到/usr/local/bin目錄下

cd src

cp redis-trib.rb /usr/local/bin

 

創建Redis節點並修改配置文件

mkdir redis_cluster

cd redis_cluster/

mkdir 7000 7001 7002 7003 7004 7005

cp redis.conf redis_cluster/7000

cp redis.conf redis_cluster/7001

cp redis.conf redis_cluster/7002

cp redis.conf redis_cluster/7003

cp redis.conf redis_cluster/7004

cp redis.conf redis_cluster/7005

 

按下面提示修改6個配置文件

port7000//端口7000,7001,7002...        

bind 本機ip//默認ip為127.0.0.1 需要改為其他節點機器可訪問的ip 否則創建集群時無法訪問對應的端口,無法創建集群

daemonize    yes//redis后台運行

pidfile  /var/run/redis_7000.pid//pidfile文件對應7000,7001,7002

cluster-enabled  yes//開啟集群  把注釋#去掉

cluster-config-filenodes.conf//集群的配置  配置文件首次啟動自動生成

cluster-node-timeout15000//請求超時  默認15秒,可自行設置

appendonly  yes//aof日志開啟  有需要就開啟,它會每次寫操作都記錄一條日志 

dir /root/redis-3.2.4/redis_cluster/7000//目錄,端口7000,7001,7002... ,必須配置,否則無法啟動   

 

  

啟動6個Redis實例,並且要指定配置文件,這些配置文件分別在各自的子目錄下面

./src/redis-serverredis_cluster/7000/redis.conf

./src/redis-serverredis_cluster/7001/redis.conf

./src/redis-serverredis_cluster/7002/redis.conf

./src/redis-serverredis_cluster/7003/redis.conf

./src/redis-serverredis_cluster/7004/redis.conf

./src/redis-serverredis_cluster/7005/redis.conf

 

安裝ruby

yuminstallruby

yuminstall-y rubygems

geminstallredis -v3.2.2

 

使用redis-trib.rb創建集群

cd /usr/local/bin

./redis-trib.rb create --replicas 1 192.168.0.204:7000 192.168.0.204:7001 192.168.0.204:7002 192.168.0.204:7003 192.168.0.204:7004 192.168.0.204:7005

 

運行結果如下:


 

Redis Cluster啟動成功截圖

如果一切順利,你會看到類似截圖上的消息: [OK] All 16384 slots covered, 這說明Redis的Cluster集群環境搭建成功。

簡單解釋一下這個命令:調用 ruby 命令來進行創建集群,--replicas 1 表示主從節點比例為 1:1,即一個主節點對應一個從節點;然后,默認給我們分配好了每個主節點和對應從節點服務,以及solt的大小,因為在Redis集群中有且僅有16383個solt,默認情況會給我們平均分配,當然你可以指定,后續的增減節點也可以重新分配。

M: 5237fa04bd793832b605d92ceb1d2f493da22e43 為主節點Id

S: b6b696c11bbffa8f9d4e6397ef4d27b0b54fea32 192.168.0.204:7003 replicates 5237fa04bd793832b605d92ceb1d2f493da22e43 從節點下對應主節點Id

目前來看,7000-7002 為主節點,7003-7005 為從節點,並向你確認是否同意這么配置,輸入yes后,會開始集群創建。

四、驗證集群

通過Cluster Nodes命令和Cluster Info命令來看看集群效果

./redis-cli -c  -h 192.168.0.204 -p 7001

cluster info

cluster nodes

運行結果如下:


 

運行成功截圖

在集群上通過增加數據來測試集群效果

運行結果如下:


 

 

限時領取免費Java相關資料,涵蓋了Java、Redis、MongoDB、MySQL、Zookeeper、Spring Cloud、Dubbo/Kafka、Hadoop、Hbase、Flink等高並發分布式、大數據、機器學習等技術。

資料傳送門:https://mp.weixin.qq.com/s/u2b_NVNuMuAPE0w4lc45fw

 

關注下方公眾號即可免費領取:

Java碎碎念公眾號

 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM