Redis集群生产环境源码安装

电玩女神 2023-10-08 10:29 21阅读 0赞

安装redis集群 根据各人单位生产环境用户搭建  
一、安装环境  
操作系统：centos7.6  
关闭防火墙、关闭selinux  
redis1:192.168.26.128  
redis2：192.168.26.129  
二、用户环境  
groupadd usr  
useradd -g usr -md /usr/users/sw sw  
cd /usr/users/sw/  
mkdir app;mkdir backup  
cd app  
mkdir redis  
make /applog  
chown -R sw:usr /usr/users/sw  
chown -R sw:usr /applog  
三、系统参数修改，有几个系统参数需要调整，否则，在启动redis时会有几个WARNING：  
1.redis的配置文件中，默认的最大客户端连接数为10000，要求至少最大文件描述符要10032个，我 们一般系统都会设置为65535  
vim /etc/security/limits.conf添加以下内容  
\* soft nproc 12000  
\* hard nproc 12000  
\* soft nofile 65535  
\* hard nofile 65535  
\* hard stack 10240  
\* soft stack 10240  
\* hard sigpending 127934  
\* soft sigpending 127934  
vim /etc/security/limits.d/20-nproc.conf 修改  
\* soft nproc 12000  
2.在/etc/sysctl.conf中加入 net.core.somaxconn=511 ，然后执行 sysctl ‐p 生效，解决默认设 置为一个较低的值128的警告。  
3. overcommit\_memory 设置为0，在低内存环境下的后台保存可能失败。在文件 /etc/sysctl.conf 中添 加 vm.overcommit\_memory = 1 ，然后重启或运行命令 sysctl vm.overcommit\_memory=1  
4.如果服务器的"Transparent Huge Pages (THP)"支持在内核中启用了。这将在使用Redis时造成延迟和 内存使用问题。使用root运行命令  
echo never > /sys/kernel/mm/transparent\_hugepage/enabled ，并且将它添加到你的/etc/rc.local中使在 重启后仍然保持生效来修复这个问题。在THP禁用之后Redis必须重启。  
四、安装GCC编译工具，不然会有编译不过的问题  
yum install gcc g++ gcc-c++ make -y  
五、下载、解压、编译安装  
su - sw  
cd backup  
wget http://download.redis.io/releases/redis-4.0.1.tar.gz  
tar -xvf redis-4.0.1.tar.gz  
cd redis-4.0.1  
make  
make PREFIX=/usr/users/sw/app/redis install  
编译完成，redis已经安装在/usr/users/sw/app/redis/bin下面，几个文件大致作用为  
redis‐benchmark：性能测试工具，测试Redis在你的系统及配置下的读写性能  
redis‐check‐aof：用于修复出问题的AOF文件  
redis‐check‐dump：用于修复出问题的dump.rdb文件  
redis‐cli：Redis命令行交互客户端  
redis‐sentinel：redis‐server别名  
redis‐server：Redis服务器启动程序  
六、redis的配置修改  
在源码目录中，将配置文件模板redis.conf复制到redis配置文件目录中app/redis/conf/,因为一个虚拟机要启动单个  
redis节点，所以配置文件要复制三份，分别用于用于规划的服务器端口号命名区别  
mkdir ~/app/redis/conf  
cp backup/redis-4.0.1/redis.conf ~/app/redis/conf/redis8601.conf  
七、编辑redis8601.conf文件  
1. 设置bind地址为本机IP，&&为本机IP，需要改为其他节点机器可访问的ip，否则创建集群时无法访问对应的端口，无法创建集群  
bind 192.168.26.\*  
2. 修改daemonize为yes，即以后台程序方式运行  
daemonize yes  
3. 修改服务端口  
port 8601  
4. 修改pid生成路径  
pidfile "/usr/uses/sw/app/redis/run/redis8601.pid"  
需要手动创建run目录存放pid路径  
mkdir /usr/users/sw/app/redis/run/  
5. 修改日志文件的位置  
logfile "/applog/redis8601/redis.log"  
需要手动创建日志目录  
mkdir /applog/redis8601/  
6. 修改工作目录，数据文件，append only文件等会在该目录生成  
dir "/applog/redisdump"  
需要手动创建该目录  
mkdir /applog/redisdump  
7. 数据文件名  
dbfilename "dump8601.rdb"  
8. 是否每次更新操作进行日志记录  
appendonly yes  
文件名设置  
appendfilename "appendonly8601.aof"  
9. 是否支持集群  
cluster-enabled yes  
10. 集群配置文件名  
cluster-config-file "nodes-8601.conf"  
八、复制redis8601.conf文件为另外两个节点修改  
1. cp redis8601.conf redis8602.conf  
cp redis8601.conf redis8603.conf  
2.统一替换配置文件redis8602.conf和redis8603.conf的8601为8602和8603  
sed -i 's/8601/8602/g' redis8602.conf  
sed -i 's/8601/8603/g' redis8603.conf  
3.要手动创建8602和8603的日志目录  
mkdir /applog/redis8602  
mkdir /applog/redis8603  
九、启动redis各节点服务  
1、cd ~/app/redis/bin  
./redis-server ~/app/redis/conf/redis8601.conf  
./redis-server ~/app/redis/conf/redis8602.conf  
./redis-server ~/app/redis/conf/redis8603 .conf  
十、脚本启动  
mkdir ~/bin  
vim redis.sh  
\#!/bin/bash  
case $1 in  
start)  
cd /usr/users/sw/app/redis/bin  
./redis-server /usr/users/sw/app/redis/conf/redis8601.conf  
./redis-server /usr/users/sw/app/redis/conf/redis8602.conf  
./redis-server /usr/users/sw/app/redis/conf/redis8603.conf

if \[ "$?" -eq 0 \];then  
ps -ef|grep redis|grep -v grep  
echo "redis is started"  
else  
echo "redis is error"  
exit 10  
fi  
;;  
stop)  
for pid in $(ps -ef|grep redis|grep -v "grep"|egrep -v "$\{0\}"|awk -F " " '\{print $2\}'|uniq);do  
kill -9 $pid >> /dev/null 2>&1  
done  
\#echo "redis is stopped"  
;;  
restart)  
$\{0\} stop  
$\{0\} start  
;;  
esac

十一、集群搭建  
1.yum -y install ruby-devel ruby-irb ruby-libs ruby-rdoc ruby rubygems-devel rubygems  
2. 下载redis的gem并上传至服务器  
https://rubygems.org/downloads/redis-3.3.0.gem  
安装redis-gem  
gem install --local redis‐3.3.3.gem  
查看安装  
gem list redis  
3.使用 redis‐trib.rb 脚本创建集群 redis‐trib.rb 在redis的源码包的src目录中:  
cd ~/backup/redis-4.0.1/src/  
十二、 为redis各节点设置密码 为redis各节点设置密码，应用设置里也要设置redis的密码，如果密码不匹配，则应用无法连接上 redis。  
密码均设置为：111111 修改配置文件 直接修改配置文件的方法，需要修改完后重启redis服务。  
1.在每个节点的配置文件末尾加上： 然后重启所有节点的redis使密码生效即可。 masterauth "111111" requirepass "111111"  
vim redis8601.conf 添加  
masterauth "111111"  
requirepass "111111"  
2. 已设置了密码的节点创建集群,但此时创建集群，redis‐trib.rb脚本会提示无法连接到redis节点，这是因为ruby的redis gem中默认的客户 端连接密码为空，  
所以导致redis‐trib.rb脚本无法创建集群。 可以修改ruby的redis gem的默认redis客户端密码即可  
vi /usr/local/share/gems/gems/redis-3.3.3/lib/redis/client.rb 如果redis‐3.3.3.gem是使用非root安装的，则在用户主目录下搜索client.rb即可找到。  
使用root编辑redis gem 里的client.rb文件： 第15行为设置密码，默认为空： :password => "111111", 修改完后，再回去执行redis‐trib.rb即可连接上redis进行集群操作。  
vi /usr/local/share/gems/gems/redis-3.3.3/lib/redis/client.rb  
15 :password => "111111",  
3.然后进行集群搭建  
./redis-trib.rb create --replicas 1 192.168.26.128:8601 192.168.26.128:8602 192.168.26.128:8603 192.168.26.129:8601 192.168.26.129:8602 192.168.26.129:8603  
4.如果有报错\[ERR\] Node 192.168.26.129:8601 is not empty. Either the node already knows other nodes (check with CLUSTER NODES) or contains some key in database 0.  
删除各个节点下面的redis.log和dump下面的aof，rdb，conf文件  
十三、查看集群状态  
./redis-trib.rb check 192.168.26.129:8602