集群原理-redis-cluster架構圖
架構細節:
(1)所有的redis節點彼此互聯(PING-PONG機制),內部使用二進制協議優化傳輸速度和帶寬.
(2)節點的fail是通過集群中超過半數的節點檢測失效時才生效.
(3)客戶端與redis節點直連,不需要中間proxy層.客戶端不需要連接集群所有節點,連接集群中任何一個可用節點即可
(4)redis-cluster把所有的物理節點映射到[0-16383]slot上,cluster 負責維護node<->slot<->value
Redis 集群中內置了 16384 個哈希槽，當需要在 Redis 集群中放置一個 key-value 時，redis 先對 key 使用 crc16 算法算出一個結果，然后把結果對 16384 求余數，這樣每個 key 都會對應一個編號在 0-16383 之間的哈希槽，redis 會根據節點數量大致均等的將哈希槽映射到不同的節點
redis-cluster投票:容錯
(1)領着投票過程是集群中所有master參與,如果半數以上master節點與master節點通信超過(cluster-node-timeout),認為當前master節點掛掉.
(2):什么時候整個集群不可用(cluster_state:fail)?
a:如果集群任意master掛掉,且當前master沒有slave.集群進入fail狀態,也可以理解成集群的slot映射[0-16383]不完成時進入fail狀態. ps : redis-3.0.0.rc1加入cluster-require-full-coverage參數,默認關閉,打開集群兼容部分失敗.
b:如果集群超過半數以上master掛掉，無論是否有slave集群進入fail狀態.
ps:當集群不可用時,所有對集群的操作做都不可用，收到((error) CLUSTERDOWN The cluster is down)錯誤
1.搭建集群需要的環境
搭建集群需要使用到官方提供的ruby腳本。
需要安裝ruby的環境。
安裝ruby
yum install ruby
yum install rubygems
redis集群管理工具redis-trib.rb
[root@bogon ~]# cd redis-3.0.0
[root@bogon redis-3.0.0]# cd src
[root@bogon src]# ll *.rb
-rwxrwxr-x. 1 root root 48141 Apr 1 07:01 redis-trib.rb
[root@bogon src]#
redis-trib.rb腳本需要的ruby包：
需要上傳到linux服務。
安裝ruby的包：
gem install redis-3.0.0.gem
[root@bogon ~]# gem install redis-3.0.0.gem
Successfully installed redis-3.0.0
1 gem installed
Installing ri documentation for redis-3.0.0...
Installing RDoc documentation for redis-3.0.0...
gem下載地址http://download.csdn.net/detail/u012599988/8597787
2.集群的搭建
第一步：創建6個redis實例，端口號從7001~7006
先創建個目錄
dump.rdb是快照形式把狀態保存，另一種是aof保存命令的。
第二步：修改redis的配置文件
1、修改端口號
2、打開cluster-enable前面的注釋。
接下來復制6個節點
說明：
redis集群至少需要3個主節點，每個主節點有一個從節點總共6個節點
replicas指定為1表示每個主節點有一個從節點
別忘了吧6個節點的端口號都改了
第三步：把創建集群的ruby腳本復制到redis-cluster目錄下。
然后需要把Redis src目錄下的 redis-trib.rb集群管理工具復制到Redis-cluster下面
第四步：啟動6個redis實例
寫個腳本批量啟動6個redis節點
startall的腳本內容
設置為可執行的文件
同理可以創建個關閉集群的腳本
第五步：創建集群。
./redis-trib.rb create --replicas 1 192.168.188.131:7001 192.168.188.131:7002 192.168.188.131:7003 192.168.188.131:7004 192.168.188.131:7005 192.168.188.131:7006
[root@bogon redis-cluster]# ./redis-trib.rb create --replicas 1 192.168.188.131:7001 192.168.188.131:7002 192.168.188.131:7003 192.168.188.131:7004 192.168.188.131:7005 192.168.188.131:7006
>>> Creating cluster
Connecting to node 192.168.188.131:7001: OK
Connecting to node 192.168.188.131:7002: OK
Connecting to node 192.168.188.131:7003: OK
Connecting to node 192.168.188.131:7004: OK
Connecting to node 192.168.188.131:7005: OK
Connecting to node 192.168.188.131:7006: OK
>>> Performing hash slots allocation on 6 nodes... 連接6個節點成功
Using 3 masters: 7001-7003作為主節點
192.168.188.131:7001
192.168.188.131:7002
192.168.188.131:7003
Adding replica 192.168.188.131:7004 to 192.168.188.131:7001 7004作為7001的從節點
Adding replica 192.168.188.131:7005 to 192.168.188.131:7002 7005作為7002的從節點
Adding replica 192.168.188.131:7006 to 192.168.188.131:7003 7006作為7003的從節點
M: 5a8523db7e12ca600dc82901ced06741b3010076 192.168.188.131:7001
slots:0-5460 (5461 slots) master 給7001主節點分配0-5460 的槽
M: bf6f0929044db485dea9b565bb51e0c917d20a53 192.168.188.131:7002
slots:5461-10922 (5462 slots) master 給7002主節點分配5461-10922 的槽
M: c5e334dc4a53f655cb98fa3c3bdef8a808a693ca 192.168.188.131:7003
slots:10923-16383 (5461 slots) master 給7003主節點分配10923-16383 的槽
S: 2a61b87b49e5b1c84092918fa2467dd70fec115f 192.168.188.131:7004 7004，7005，7006是從節點槽和主節點的一樣，從節點是備份用的
replicates 5a8523db7e12ca600dc82901ced06741b3010076
S: 14848b8c813766387cfd77229bd2d1ffd6ac8d65 192.168.188.131:7005
replicates bf6f0929044db485dea9b565bb51e0c917d20a53
S: 3192cbe437fe67bbde9062f59d5a77dabcd0d632 192.168.188.131:7006
replicates c5e334dc4a53f655cb98fa3c3bdef8a808a693ca
Can I set the above configuration? (type 'yes' to accept): yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join.....
>>> Performing Cluster Check (using node 192.168.188.131:7001)
M: 5a8523db7e12ca600dc82901ced06741b3010076 192.168.188.131:7001
slots:0-5460 (5461 slots) master
M: bf6f0929044db485dea9b565bb51e0c917d20a53 192.168.188.131:7002
slots:5461-10922 (5462 slots) master
M: c5e334dc4a53f655cb98fa3c3bdef8a808a693ca 192.168.188.131:7003
slots:10923-16383 (5461 slots) master
M: 2a61b87b49e5b1c84092918fa2467dd70fec115f 192.168.188.131:7004
slots: (0 slots) master
replicates 5a8523db7e12ca600dc82901ced06741b3010076
M: 14848b8c813766387cfd77229bd2d1ffd6ac8d65 192.168.188.131:7005
slots: (0 slots) master
replicates bf6f0929044db485dea9b565bb51e0c917d20a53
M: 3192cbe437fe67bbde9062f59d5a77dabcd0d632 192.168.188.131:7006
slots: (0 slots) master
replicates c5e334dc4a53f655cb98fa3c3bdef8a808a693ca
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
[root@bogon redis-cluster]#
3.測試集群
[root@bogon redis-cluster]# redis01/redis-cli -h 192.168.188.131 -p 7002 -c -h是指定ip -p指定端口 -c代表要連接集群
注：連集群的時候必須加-c，否則set的時候會出現(error)MOVED的錯誤
192.168.188.131:7002>
[root@bogon redis-cluster]# redis01/redis-cli -h 192.168.188.131 -p 7002 -c
192.168.188.131:7002> set a 100
-> Redirected to slot [15495] located at 192.168.188.131:7003
OK
192.168.188.131:7003>
4.圖形化界面客戶端
只支持單機版，不支持集群。可以在開發的時候連接單機版，生產環境換成集群