使用docker搭建redis-cluster環境



    臨時接到一個測試任務,而測試需要用到redis-cluster環境,卻沒有現成的環境可用,於是只能自力更生搭建測試環境。一開始想采用在宿主機上硬搭,但苦於沒有那么多的服務器,於是決定試試docker。以下為詳細搭建步驟:

基礎環境信息

  基礎環境如下所示:

CentOS Linux release 7.5.1804
Docker version 18.09.4

  以下操作均在root用戶下面操作,如果是非root用戶,需要在各命令前面添加sudo

搭建步驟

  • 1、下載redis鏡像

docker pull redis

  如果需要拉取指定版本,需要在redis后面添加版本號,如果不指定則拉取最新版本鏡像,可以使用docker search redis來搜索鏡像

01 dockerSearchRedis.png

  查看本地鏡像,可以使用命令docker images

02ShowLocalImages.png

  • 2、創建虛擬網卡

  創建虛擬網卡,主要是用於redis-cluster能於外界進行網絡通信,一般常用橋接模式。

docker network create redis-net

  查看docker的網卡信息,可使用命令docker network ls

03ShowDockerNetwork.png

  查看dockerr網絡詳細信息,可使用命令docker network inspect redis-net

04InspectNICInfo.png

  • 3、創建redis配置文件模板

mkdir -p /home/redis-cluster
cd /home/redis-cluster
vim redis-cluster.tmpl

在redis-cluster.tmpl中輸入以下內容

port ${PORT}
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
cluster-announce-ip 192.168.168.131
cluster-announce-port ${PORT}
cluster-announce-bus-port 1${PORT}
appendonly yes

各節點解釋如下所示:

  • port:節點端口,即對外提供通信的端口
  • cluster-enabled:是否啟用集群
  • cluster-config-file:集群配置文件
  • cluster-node-timeout:連接超時時間
  • cluster-announce-ip:集群各節點IP地址
  • cluster-announce-port:集群節點映射端口
  • cluster-announce-bus-port:集群總線端口
  • appendonly:持久化模式

cluster-announce-ip:這個IP需要特別注意一下,如果要對外提供訪問功能,需要填寫宿主機的IP,如果填寫docker分配的IP(172.x.x.x),可能會導致部分集群節點在跳轉時失敗。

  • 4、創建節點配置文件

  在redis-cluser中執行以下命令

for port in $(seq 8010 8015); \
do \
  mkdir -p ./${port}/conf  \
  && PORT=${port} envsubst < ./redis-cluster.tmpl > ./${port}/conf/redis.conf \
  && mkdir -p ./${port}/data; \
done

  驗證上述命令執行的結果是否正確

05CheckConfigFile.png

06CheckRedisConf.png

  • 5、創建redis節點容器

  執行以下命令即可

for port in $(seq 8010 8015); \
do \
   docker run -it -d -p ${port}:${port} -p 1${port}:1${port} \
  --privileged=true -v /home/redis-cluster/${port}/conf/redis.conf:/usr/local/etc/redis/redis.conf \
  --privileged=true -v /home/redis-cluster/${port}/data:/data \
  --restart always --name redis-${port} --net redis-net \
  --sysctl net.core.somaxconn=1024 redis redis-server /usr/local/etc/redis/redis.conf; \
done

  驗證容器是否創建成功

07CreateRedisContainers.png

  查看docker給每個節點分配的IP信息

08ShowInternalIP.png

  • 6、創建redis-cluster集群

  進入一個容器節點

docker exec -it redis-8010 bash

  在進入容器后,執行以下命令:

cd /usr/local/bin/

redis-cli --cluster create 192.168.168.131:8010 192.168.168.131:8011 192.168.168.131:8012 192.168.168.131:8013 192.168.168.131:8014 192.168.168.131:8015

出現選擇提示信息,輸入yes,結果如下所示:

09CreateRedisCluster.png

  • 7、連接redis-cluster,並添加數據到redis

在節點8010中輸入以下命令

redis-cli -c -h 192.168.168.131 -p 8010

10SetValueForRedis.png

  • 8、驗證集群是否可以任意地方訪問

以下驗證是基於Windows版本的redis。其下載地址如下:

https://github.com/microsoftarchive/redis/releases

在Windows中驗證的結果如下所示:

11TestRedisCluster.png

搭建中遇到的問題

  • 1、所有都搭建完成后,在創建redis-cluster時一直報錯

Could not connect to Redis at 192.168.168.131:8010: No route to host

這個原因是因為宿主機的防火牆未關,導致相應的端口被阻止,創建的時候臨時關閉防火牆,后面再允許相應的端口即可。
  • 2、在成功創建完redis-cluster后,可以成功連接,但在獲取值時,一直處於跳轉中,導致最終出現TTL exhaust

-> Redirected to slot [15495] located at 172.18.0.7:8015

這種情況通常是因為在前面寫配置文件,將cluster-announce-ip寫成了docker分配的IP,只需要將該IP換為宿主機的IP即可。

其他參考

    在搭建過程,可能在出現問題后,需要停止或直接刪除docker容器,可以使用以下參考命令

批量停止docker 容器:

docker ps -a | grep -i "redis-801*" | awk '{print $1}' | xargs docker stop

批量刪除docker 容器:

docker ps -a | grep -i "redis-801*" | awk '{print $1}' | xargs docker rm -f

批量刪除文件

rm -rf 801{0..5}/conf/redis.conf

    以上就是基於docker搭建redis-cluster的簡單步驟,實際應用中可能並沒有這么簡單,該文也僅用於參考。

本文同步在微信訂閱號上發布,如各位小伙伴們喜歡我的文章,也可以關注我的微信訂閱號:woaitest,或掃描下面的二維碼添加關注:
MyQRCode.jpg


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM