Redis集群和优化

你的名字 2022-02-05 10:19 283阅读 0赞

# 1、Redis介绍 #

*  Redis服务器程序采用单进程模型（同一时刻只能处理一个请求）处理客户端请求
 *  Redis基于内存并且支持多达六种数据类型
 *  Redis是一款非常优秀的NoSQL数据库
 *  Redis可以与Lua脚本结合爆发出强大的功能点

# 2、Redis安装 #

*  详见：[https://www.runoob.com/redis/redis-install.html][https_www.runoob.com_redis_redis-install.html]

# 3、Redis之Java客户端 #

*  官方推荐之Jedis
 *  优秀的第三方客户端，比如：Redisson
 *  优秀的第三方代理，比如Twemproxy、***Codis***
 *  Codis使用文档：[https://github.com/CodisLabs/codis/blob/release3.2/doc/tutorial\_zh.md][https_github.com_CodisLabs_codis_blob_release3.2_doc_tutorial_zh.md]

## 3.1、Codis介绍 ##

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70][]

*  Codis是豌豆荚开发的分布式Redis解决方案
 *  线上动态配置实现无限扩容、插槽分配和漂移
 *  单节点和集群操作对客户端透明
 *  线上可以在一定程序上达到一个资源漂移的效果

## 3.2、Codis组成部分 ##

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70 1][]

## 3.3、安装Codis及所属依赖 ##

所有文件安装包：[https://download.csdn.net/download/weixin\_43192102/11161190][https_download.csdn.net_download_weixin_43192102_11161190]

### 3.3.1、Go语言环境部署 ###

1.  解压压缩包，并配置环境变量（注：Go语言默认是在/usr/local目录下，因此如果解压到这个目录下不需要配置环境变量）
2.  vi /etc/profile 进入配置文件最下面配置环境变量：

export GOROOT=/usr/local/install/go  （自己的安装目录）

export GOPATH=/usr/local/install/go\_path/codis  （创建没有的目录）

export PATH=$PATH:$GOROOT/bin

3. source /etc/profile  （刷新）

### 3.3.2、glibc部署升级 ###

1.  解压文件
2.  进入解压后的文件，创建目录build：mkdir build
3.  进入build目录然后安装：../configure --prefix=/usr    （放到默认目录）
4.  make -j2
5.  make install
6.  如果安装出错有可能是版本问题，更换版本即可

### 3.3.3、Zookeeper安装部署  ###

1.  解压到安装目录
2.  进入解压后目录的conf目录，修改zoo\_sample.cfg --> zoo.cfg
3.  启动zookeeper：进入bin目录： ./zkServer.sh start
4.  jps 查看是否启动

### 3.3.4、Codis-Server配置和启动 ###

1.  将codis解压到/usr/local/install/go\_path/codis目录
2.  进入解压后的目录，创建文件夹：mkdir -p conf/redis/redis\_6381  和  mkdir -p conf/redis/redis\_6382
3.  将安装的redis目录下的配置文件redis.conf拷贝到redis\_6381和redis\_6382两个目录下
4.  修改配置文件：

*  注释掉   bind 127.0.0.1     
 *  将protected-mode 改为no
 *  将端口号port改为对应的6381或6382
 *  将daemonize 改为yes

5. 启动codis：./codis-server conf/redis/redis\_6381/redis.conf

注意：redis配置文件版本要与codis版本适配

### 3.3.5、Codis-dashboard（集群管理工具）配置和启停 ###

1.  生成配置文件：./codis-dashboard --default-config | tee conf/dashboard.toml
2.  编辑生成的配置文件：vim conf/dashboard.toml![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70 2][]
3.  创建日志目录：mkdir logs
4.  后台启动（启动前要先启动zookeeper）：nohup ./codis-dashboard --config=conf/dashboard.toml --log=logs/dashboard.log --log-level=WARN --ncpu 2 &
5.  关闭dashboard：./codis-admin --dashboard=192.168.1.18:18080 --shutdown

### 3.3.6、Codis-proxy配置和启动 ###

1.  生成配置文件：./codis-proxy --default-config | tee conf/proxy.toml
2.  修改配置文件：vim conf/proxy.toml

![20190507111637298.png][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70 3][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70 4][]

3. 后台启动： nohup ./codis-proxy --config=conf/proxy.toml --log=logs/proxy.log --log-level=WARN --ncpu 2 &

4. 关联dashboard：./codis-admin --dashboard=192.168.1.18:18080 --create-proxy -x192.168.1.18:11080

### 3.3.7、Codis-FE配置启动 ###

1.  生成配置文件：./codis-admin --dashboard-list --zookeeper=192.168.1.18:2181 | tee conf/codis.json
2.  后台启动FE助手：nohup ./codis-fe --ncpu=2 --log=logs/fe.log --log-level=WARN --dashboard-list=conf/codis.json --listen=192.168.1.18:10010（端口号随意） &
3.  去浏览器访问：192.168.1.18:10010
4.  添加Group

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70 5][]

5. 修改错误，因为只能有一个Master

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70 6][]

6. 分配插槽

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70 7][]

***注意：***

*  Dashboard在所有集群节点里唯一
 *  Proxy可以有多个，但是同时起作用的只有一个
 *  Server也可以起多个

## 3.4、客户端连接Codis集群演示 ##

Codis是只需操作第三方代理就可以操作N个集群

### 3.4.1、Jedis客户端连接 ###

public class JedisTest {
    
        public static void main(String[] args) {
            // 开启Jedis连接池
            JedisPoolConfig jpc = new JedisPoolConfig();
            jpc.setMaxTotal(50);
            jpc.setMinIdle(10);
            JedisPool jp = new JedisPool(jpc,"192.168.1.18",19000);
    
            // 开启Jedis客户端
            Jedis jedis = jp.getResource();
    
            jedis.set("k1","v1");
            System.out.println(jedis.get("k1"));
    
            jedis.close();
        }
    
    
    }

### 3.4.2、Redisson客户端连接 ###

public class RedissonTest {
    
        public static void main(String[] args) {
    
            Config config = new Config();
            config.setCodec(new org.redisson.client.codec.StringCodec());
            config. useSingleServer().setAddress("192.168.1.18:19000");
    
            RedissonClient redisson = Redisson.create(config);
            RBucket<String> keyObject = redisson.getBucket("k2");
    
            keyObject.set("v2");
    
            System.out.println(keyObject.get());
    
            redisson.shutdown();
        }
    
    }

进入Codis客户端查看：./redis-cli -p 6381   或   ./redis-cli -p 6382

## 3.5、Tomcat与Redis集群构建演示 ##

1. 下载相关配置文件：[https://github.com/ran-jit/tomcat-cluster-redis-session-manager/wiki][https_github.com_ran-jit_tomcat-cluster-redis-session-manager_wiki]

2. 更改redis-data-cache.properties配置文件中的redis.hosts

#-- Redis data-cache configuration
    
    #- redis hosts ex: 127.0.0.1:6379, 127.0.0.2:6379, 127.0.0.2:6380, ....
    redis.hosts=192.168.1.18:19000
    
    #- redis password (for stand-alone mode)
    #redis.password=
    
    #- set true to enable redis cluster mode
    redis.cluster.enabled=false
    
    #- redis database (default 0)
    #redis.database=0
    
    #- redis connection timeout (default 2000)
    #redis.timeout=2000

3. 将下载的tomcat-cluster-redis-session-manager中的jar包拷贝到tomcat/lib/目录下

4. 将redis-data-cache.properties文件拷贝到tomcat/conf/目录下

5. 修改Tomcat中的/conf/context.xml配置文件，添加以下内容到配置文件：

6. 拷贝两份相同的Tomcat分别启动，如此一个小的集群就搭建完成了（注意两个Tomcat的端口号不能相同）

### \------扫码进群，怕你禁不住福利的诱惑------ ###

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70 8][]

[https_www.runoob.com_redis_redis-install.html]: https://www.runoob.com/redis/redis-install.html
[https_github.com_CodisLabs_codis_blob_release3.2_doc_tutorial_zh.md]: https://github.com/CodisLabs/codis/blob/release3.2/doc/tutorial_zh.md
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70]: /images/20220205/a3849b9eba7f40669412d6c7882d5b15.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70 1]: /images/20220205/a7befb76048d4988bf886452c909089a.png
[https_download.csdn.net_download_weixin_43192102_11161190]: https://download.csdn.net/download/weixin_43192102/11161190
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70 2]: /images/20220205/e711c8a75f1d4c01b691f452d5824d5e.png
[20190507111637298.png]: /images/20220205/966d4889a4044c17925fd1c94a88a3e7.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70 3]: /images/20220205/02719826c79e4447b6ccf039b745d126.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70 4]: /images/20220205/25a723214364409abcfee82e05042108.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70 5]: /images/20220205/ffdf6632b69442a28c1410796aa6ac1c.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70 6]: /images/20220205/7679d3cee4df42e6a3990532a87d8f8e.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70 7]: /images/20220205/2bd83214797a4149b2a5005306d70fd7.png
[https_github.com_ran-jit_tomcat-cluster-redis-session-manager_wiki]: https://github.com/ran-jit/tomcat-cluster-redis-session-manager/wiki
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzE5MjEwMg_size_16_color_FFFFFF_t_70 8]: /images/20220205/3ebf882d455a41b58280572828be7a4d.png