【Docker】Redis集群扩缩容配置

迈不过友情╰ 2024-04-03 11:07 129阅读 0赞

#### 文章目录 ####

*  3主3从搭建
 *  集群数据插入错误的解决
 *  主从容错切换迁移
 *  主从扩容
 *  主从缩容

## 3主3从搭建 ##

使用docker能快速的扩缩容redis集群。  
使用docker创建3主3从的Redis集群配置首先要求先从docker的仓库中下载redis的镜像。  
使用如下命令拉取redis镜像文件。

docker pull redis

redis镜像拉取完毕之后，就可以快速的开启多个redis容器了，而想要配置3主3从的redis集群首先就需要先创建6个redis容器。  
使用如下命令可以快速创建完毕6个redis容器

docker run -d --name redis-node-1 --net host --privileged=true -v /data/redis/share/redis-node-1:/data redis:latest --cluster-enabled yes --appendonly yes --port 6381
    docker run -d --name redis-node-2 --net host --privileged=true -v /data/redis/share/redis-node-2:/data redis:latest --cluster-enabled yes --appendonly yes --port 6382
    docker run -d --name redis-node-3 --net host --privileged=true -v /data/redis/share/redis-node-3:/data redis:latest --cluster-enabled yes --appendonly yes --port 6383
    docker run -d --name redis-node-4 --net host --privileged=true -v /data/redis/share/redis-node-4:/data redis:latest --cluster-enabled yes --appendonly yes --port 6384
    docker run -d --name redis-node-5 --net host --privileged=true -v /data/redis/share/redis-node-5:/data redis:latest --cluster-enabled yes --appendonly yes --port 6385
    docker run -d --name redis-node-6 --net host --privileged=true -v /data/redis/share/redis-node-6:/data redis:latest --cluster-enabled yes --appendonly yes --port 6386

![在这里插入图片描述][8f9f00ae5583465b8aec354dad8d15b7.png]  
创建完毕redis容器之后，进入其中某一个redis容器之中，并且进行集群的构建。

redis-cli --cluster create 192.168.146.119:6381 192.168.146.119:6382 192.168.146.119:6383 192.168.146.119:6384 192.168.146.119:6385 192.168.146.119:6386 --cluster-replicas 1

![在这里插入图片描述][e9a718eeb4a149c291b648c6065b2fde.png]  
![在这里插入图片描述][f414b65ddca84e57af6f77a6ef9eac1e.png]  
如果显示如上内容说明集群主从配置已经配置成功了，3主3从已经配置成功了。  
然后使用如下命令就可以查看集群状态了

redis-cli -p 6381
    cluster info

![在这里插入图片描述][62bc27a28e674e5d912f6b9ec7e5fdd9.png]  
使用cluster nodes就可以查看每个集群的哈希槽的分配范围以及主从关系。  
其中第一个UUID是该redis的id，第一个UUID就是从机对应的主机的id。  
例如6385端口的redis的主机就是37ff也就是6383端口对应的redis。  
6381----》6386  
6382----》6384  
6383----》6385  
![在这里插入图片描述][e87ad53da2d14db0a6ebdd7df6e86dd9.png]

## 集群数据插入错误的解决 ##

在按照如上方式配置完毕3主3从之后，向redis插入数据的时候就会经过哈希槽了，而不是直接向登录的redis客户端进行数据插入，因此登录某个客户端插入数据的时候，如果根据哈希算法分配到的redis节点不是当前登录的redis客户端，那么就会报错，如下  
![在这里插入图片描述][5474010ae6c64b65815b8a83b3748fd6.png]  
因此必须有一个办法去解决这种情况。  
而这种解决方法就是在登录客户端的时候以集群环境登录，如下  
![在这里插入图片描述][4b082b6aff4843a39f22bf613f0d11da.png]  
此时如果当前key对应的槽位不为当前的redis客户端，那么这个key就会自动被路由到对应的槽位对应的redis中去，因此我们当前登录的redis客户端将无法查询到被重定向到其他redis客户端的数据，情况如下  
![在这里插入图片描述][2d7250af8d854c5e88691dc550e77321.png]  
登录到6382对应的redis之后就可以发现我在6381端口的redis中插入的数据被重定向到6382了，当然，只要你读取的key在这些redis节点中，那么查询请求也会自动重定向过去  
![在这里插入图片描述][aab86dce481e4691a91366bdbd39d1af.png]

## 主从容错切换迁移 ##

使用如下命令可以查看目前集群的情况，可以分析得出每个节点的主从关系。

redis-cli --cluster check ip:端口 # 查看集群配置

![在这里插入图片描述][cf4cdc29c2da4303a4a0a7d30f385574.png]  
而设置主从集群，首先就是为了应付大数据量的存储的同时还能防止由于redis服务器宕机导致的服务失效问题，因此主从集群要求主节点宕机之后从节点代替主节点的位置，也就是进行主从之间的迁移，让从机代替主机的位置，在没有集群模式之前，哨兵模式可以解决这个问题，主从模式虽然可以解决这个问题，但是却要求运维人员手动进行故障切换，因此集群模式合并了哨兵与主从模式的优点，会自动的进行故障迁移。  
目前情况是，6381（主机）的从机是6386。因此我们需要验证6381下机之后，6386是否会变为主机，同时在6381恢复之后6381是否会变为6386的从机。  
首先对6381进行下线。

docker stop redis-node-1

![在这里插入图片描述][cff03c5afc5d4af1b0bf5e97356cca8c.png]  
此时可以登录6382进行验证，来判定6386是否变为了主节点，同时判定6381下机之后6386是否保留了原有的存留在6381节点里的数据。  
![在这里插入图片描述][744eab329de944c4b3a781dac6db470a.png]使用cluster nodes命令对目前集群节点进行状态查看，可以发现6386成功上位变为了master，而6381的状态为fail

![在这里插入图片描述][ec4fb787d18f4721b39538e156809219.png]  
之后我们重启6381  
![在这里插入图片描述][067fb79e3975452d9b4c2bdd97449536.png]  
可以发现6381变为了6386的从机，6386上位成功。  
![在这里插入图片描述][684bcc705ae24f10babd591146f63df6.png]  
之所以6386在6381上线之后会继续保持主机的位置是由于6386在得知主机下线之后被redis服务器设定了slave of noone命令，也就是6386再也不做从机了，并且redis服务器会在6381上线之后对6381发送slave of 6386的命令，因此6381一上线就是6386的从机。

## 主从扩容 ##

有的时候可能3主3从的redis集群也已经不够用了，此时就需要对集群进行扩容，例如变为4主4从redis集群。  
但是有一个问题就是在3主3从的时候redis的哈希槽已经分配完毕了，那么如果此时再添加一个redis主从结构，应该怎么做呢?  
首先，就是先添加两台redis服务器，方法按照上面的即可  
![在这里插入图片描述][f0b0fc68eb644c2aab5df4189fe13acc.png]  
此时这两台redis服务器与原本的redis集群并没有联系。  
那么就先进入新增的节点进行配置。

docker exec -it redis-node-7 bash

然后我们先将6387添加到集群中。

redis-cli --cluster add-node 192.168.146.119:6387 192.168.146.119:6381

![在这里插入图片描述][ee3b85b583bb4279ae8bea7a8aeac810.png]  
添加完毕之后先检查一下集群状态，可以发现已经变为了四台主机

redis-cli --cluster check 192.168.146.119:6381

![在这里插入图片描述][4aaf5ec139cf40c4b660dd825f2ea3bb.png]  
其中认真看可以发现新加入的节点的槽位是0，也就是还没有被分配槽位，那么此时由于这个节点没有槽位，那么无论插入什么样子的数据都不会被分配到该redis节点进行存储，因此之后我们需要对这个redis节点进行槽位的分配。  
![在这里插入图片描述][b00e097144b54035a6c9dfe17d7a3c6c.png]  
我们可以使用如下命令进行槽位的重新分配

redis-cli --cluster  reshard 192.168.146.119:6381

进行槽位的重新分配的时候，会出现提示询问要分配多少个槽位给每个的主机，此时一共又16384个，我们除以主机数4得到4096  
之后会询问要接收这4096个槽位的redis的id，那么我们就输入6387对应的redis的id即可。  
之后会询问选择那些redis来为新的节点提供槽位，那么我们直接选择all，让每一个原先的redis主机平均分配一点节点给新redis节点。  
当然，如果你了解redis的槽位分配的话，也可以自己手动的进行槽位的分配，比较麻烦就是了。  
![在这里插入图片描述][26a732ed3b3e4a1398dcd1bf63296aff.png]  
分配完毕之后再次查看集群状态，可以发现6387已经有了三个槽位了。  
![在这里插入图片描述][860ab59ae6484e2e813042fb0f497625.png]  
槽位分配完毕之后，我们就可以把6388这个从机添加到集群中作为6387的从机了。

redis-cli --cluster add-node 192.168.146.119:6388 192.168.146.119:6387 --cluster-slave --cluster-master-id 5918d8ddce56e58c035763704fad06d7ecc1efd0

![在这里插入图片描述][4435f94428a24d6098a1f222eca22f75.png]  
到此位置集群扩容已经完成了。

## 主从缩容 ##

主从缩容的问题在于，槽位如何重新分配以及先删从节点还是先删主节点。  
这里先删除从节点

redis-cli --cluster del-node 192.168.146.119:6388 33768461763aae07b412be731e2782bead0b82c

![在这里插入图片描述][660fcfe5c5cc4b678e173c51eca59b9c.png]

redis-cli --cluster reshard 192.168.146.119:6381

之后输入要重新分配的槽位大小，这里我们刚才新添加的节点的槽位大小为4096  
第二个参数填写需要被分配这些槽位的redis的id，这里填写6386，他是一个主机  
下一个参数填写需要分配出去空间的redis的id，这里填写6387，然后输入done表示确认。  
![在这里插入图片描述][e07904c9b17f49cb884d6061d67e36e2.png]  
![在这里插入图片描述][81640f57916c4578aedaf9e4701e36d8.png]  
此时再把6387给删除就没有问题了

redis-cli --cluster del-node 192.168.146.119:6387 5918d8ddce56e58c035763704fad06d7ecc1efd0

![在这里插入图片描述][e7ec5f8135284241ac8c0483824d72cf.png]  
再次查看集群状态可以发现集群以及变为了3主3从了。  
![在这里插入图片描述][4669d6b558e54ce480d3741506936cd7.png]

[8f9f00ae5583465b8aec354dad8d15b7.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/6f9a00e4c3af45b2bb101d3abd1ef152.png
[e9a718eeb4a149c291b648c6065b2fde.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/f25910b026474a75ac45cc15eb237888.png
[f414b65ddca84e57af6f77a6ef9eac1e.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/bfbd71673c2a4d2fade965f55a6028c9.png
[62bc27a28e674e5d912f6b9ec7e5fdd9.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/1cbab13c674e4f5b92bd97355aeadd88.png
[e87ad53da2d14db0a6ebdd7df6e86dd9.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/652e1809016041efa7d7c38da537aaef.png
[5474010ae6c64b65815b8a83b3748fd6.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/b26713d3a5fa4aaab9bf1c64fe8d5392.png
[4b082b6aff4843a39f22bf613f0d11da.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/68409b9517fd4f1bba027ab24b4b614b.png
[2d7250af8d854c5e88691dc550e77321.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/93898fcae3544964afb4f1233e0f5705.png
[aab86dce481e4691a91366bdbd39d1af.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/52b56e05d5e14edd980541df1fd84503.png
[cf4cdc29c2da4303a4a0a7d30f385574.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/061d355b32d84f1d9bf2a07a323c8b38.png
[cff03c5afc5d4af1b0bf5e97356cca8c.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/7c944efe89b74a79af3905579f2e7d8e.png
[744eab329de944c4b3a781dac6db470a.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/0c236965e7e34ee98ebfd8cfb9fc4fba.png
[ec4fb787d18f4721b39538e156809219.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/5c7b320e56cc45ffa29ffde0a8d19168.png
[067fb79e3975452d9b4c2bdd97449536.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/47b3f105f8444a32abebd6d8c976e6fb.png
[684bcc705ae24f10babd591146f63df6.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/b85e0d6fad8e48e7bbb4189087b98f18.png
[f0b0fc68eb644c2aab5df4189fe13acc.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/773494415fd544edaead8a751e58a257.png
[ee3b85b583bb4279ae8bea7a8aeac810.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/8facf02132174fccaeaba056570d75ad.png
[4aaf5ec139cf40c4b660dd825f2ea3bb.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/a0dfd884e7444a06a61457dc933be062.png
[b00e097144b54035a6c9dfe17d7a3c6c.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/d9d1613dbc994f249c624d7e2e6d0dbd.png
[26a732ed3b3e4a1398dcd1bf63296aff.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/164fdb90448c43b8a41235da56c7e90f.png
[860ab59ae6484e2e813042fb0f497625.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/80d3e4df5b3e43afbad76152b38f7432.png
[4435f94428a24d6098a1f222eca22f75.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/3cbb3124feb3468ab07eac74c56f940b.png
[660fcfe5c5cc4b678e173c51eca59b9c.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/04f5de85cf474be4a95e785083f77b41.png
[e07904c9b17f49cb884d6061d67e36e2.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/c398c223ca2441499079323eff3c7f0d.png
[81640f57916c4578aedaf9e4701e36d8.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/03cba599a0b54bf6afd244eabbf295ac.png
[e7ec5f8135284241ac8c0483824d72cf.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/e1fd46ced2e84db193d8f14f04e09a08.png
[4669d6b558e54ce480d3741506936cd7.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/67d35a94d22f488683ada13ef391bdc8.png