MySQL-分库分表详解（七）

水深无声 2023-10-13 17:53 13阅读 0赞

> ♥️**作者：小刘在C站**
> 
> ♥️**个人主页：[ 小刘主页 ][Link 1]**
> 
> ♥️**努力不一定有回报，但一定会有收获加油！一起努力，共赴美好人生！**
> 
> ♥️**学习两年总结出的运维经验，以及思科模拟器全套网络实验教程。专栏：**[云计算技术][Link 2]
> 
> **♥️小刘私信可以随便问，只要会绝不吝啬，感谢CSDN让你我相遇！**

**前言**

上章讲到MySQL-[分库分表][Link 3]详解（六）

**目录**

5.3.7 字符串hash解析算法

1). 介绍

2). 配置

3). 测试

5.3.8 按天分片算法

1). 介绍

2). 配置

3). 测试

5.3.9 自然月分片

1). 介绍

编辑

2). 配置

3). 测试

6 MyCat管理及监控

6.1 MyCat原理

6.2 MyCat管理

6.3 MyCat-eye

6.3.1 介绍

6.3.2 安装

6.3.3 访问

6.3.4 配置

6.3.5 测试

A. 性能监控

B. 物理节点

C. SQL统计

编辑

D. SQL表分析

E. SQL监控

编辑

F. 高频SQL

--------------------

### **5.3.7** **字符串****hash****解析算法**  ###

#### 1). 介绍 ####

截取字符串中的指定位置的子字符串 ,  进行 hash 算法， 算出分片。

![05a0060f1ad44bfc82ded10122ba741b.png][]

###### 2). 配置 ######

schema.xml 中逻辑表配置：

<table name="tb_strhash" dataNode="dn4,dn5" rule="sharding-by-stringhash" />

schema.xml 中数据节点配置：

rule.xml 中分片规则配置：

<tableRule name="sharding-by-stringhash">
    <rule>
    <columns>name</columns>
    <algorithm>sharding-by-stringhash</algorithm>
    </rule>
    </tableRule>
    <function name="sharding-by-stringhash"
    class="io.mycat.route.function.PartitionByString">
    <property name="partitionLength">512</property> 
    <property name="partitionCount">2</property>
    <property name="hashSlice">0:2</property>
    </function>

分片规则属性含义：

![40858a60f5de48e9b36d917ed05e326a.png][]

示例说明：

![945894b6d4424613b20b2b954d746dbe.png][]

###### 3). 测试  ######

配置完毕后，重新启动 MyCat ，然后在 mycat 的命令行中，执行如下 SQL 创建表、并插入数据，查看数据分布情况。

create table tb_strhash(
    name varchar(20) primary key,
    content varchar(100)
    )engine=InnoDB DEFAULT CHARSET=utf8mb4;
    INSERT INTO tb_strhash (name,content) VALUES('T1001', UUID());
    INSERT INTO tb_strhash (name,content) VALUES('ROSE', UUID());
    INSERT INTO tb_strhash (name,content) VALUES('JERRY', UUID());
    INSERT INTO tb_strhash (name,content) VALUES('CRISTINA', UUID());
    INSERT INTO tb_strhash (name,content) VALUES('TOMCAT', UUID());

### **5.3.8** **按天分片算法**  ###

###### 1). 介绍  ######

按照日期及对应的时间周期来分片。

![ec453ce7440242e6a61b5a42025dec6e.png][]

###### 2). 配置  ######

schema.xml 中逻辑表配置：

<table name="tb_datepart" dataNode="dn4,dn5,dn6" rule="sharding-by-date" />

schema.xml 中数据节点配置：

rule.xml 中分片规则配置：

<tableRule name="sharding-by-date">
    <rule>
    <columns>create_time</columns>
    <algorithm>sharding-by-date</algorithm>
    </rule>
    </tableRule>
    <function name="sharding-by-date"
    class="io.mycat.route.function.PartitionByDate">
    <property name="dateFormat">yyyy-MM-dd</property>
    <property name="sBeginDate">2022-01-01</property>
    <property name="sEndDate">2022-01-30</property>
    <property name="sPartionDay">10</property>
    </function>

分片规则属性含义：

![9ef1521d4ca34196831e6569e8328c12.png][]

###### 3). 测试 ######

配置完毕后，重新启动 MyCat ，然后在 mycat 的命令行中，执行如下 SQL 创建表、并插入数据，查看数据分布情况。

create table tb_datepart(
    id bigint not null comment 'ID' primary key,
    name varchar(100) null comment '姓名',
    create_time date null
    );
    insert into tb_datepart(id,name ,create_time) values(1,'Tom','2022-01-01');
    insert into tb_datepart(id,name ,create_time) values(2,'Cat','2022-01-10');
    insert into tb_datepart(id,name ,create_time) values(3,'Rose','2022-01-11');
    insert into tb_datepart(id,name ,create_time) values(4,'Coco','2022-01-20');
    insert into tb_datepart(id,name ,create_time) values(5,'Rose2','2022-01-21');
    insert into tb_datepart(id,name ,create_time) values(6,'Coco2','2022-01-30');
    insert into tb_datepart(id,name ,create_time) values(7,'Coco3','2022-01-31');

### **5.3.9** **自然月分片**  ###

###### 1). 介绍 ######

使用场景为按照月份来分片 ,  每个自然月为一个分片。

###### ![1cbf19ebdb49418eb980dd1c5e1d3142.png][] ######

###### 2). 配置 ######

schema.xml 中逻辑表配置：

<table name="tb_monthpart" dataNode="dn4,dn5,dn6" rule="sharding-by-month" />

schema.xml 中数据节点配置：

rule.xml中分片规则配置：

<tableRule name="sharding-by-month">
    <rule>
    <columns>create_time</columns>
    <algorithm>partbymonth</algorithm>
    </rule>
    </tableRule>
    <function name="partbymonth" class="io.mycat.route.function.PartitionByMonth">
    <property name="dateFormat">yyyy-MM-dd</property>
    <property name="sBeginDate">2022-01-01</property>
    <property name="sEndDate">2022-03-31</property>
    </function>

分片规则属性含义：

![6c5d1e404d734992b40158c308c80df4.png][]

###### 3). 测试 ######

配置完毕后，重新启动 MyCat ，然后在 mycat 的命令行中，执行如下 SQL 创建表、并插入数据，查看数据分布情况。

create table tb_monthpart(
    id bigint not null comment 'ID' primary key,
    name varchar(100) null comment '姓名',
    create_time date null
    );
    insert into tb_monthpart(id,name ,create_time) values(1,'Tom','2022-01-01');
    insert into tb_monthpart(id,name ,create_time) values(2,'Cat','2022-01-10');
    insert into tb_monthpart(id,name ,create_time) values(3,'Rose','2022-01-31');
    insert into tb_monthpart(id,name ,create_time) values(4,'Coco','2022-02-20');
    insert into tb_monthpart(id,name ,create_time) values(5,'Rose2','2022-02-25');
    insert into tb_monthpart(id,name ,create_time) values(6,'Coco2','2022-03-10');
    insert into tb_monthpart(id,name ,create_time) values(7,'Coco3','2022-03-31');
    insert into tb_monthpart(id,name ,create_time) values(8,'Coco4','2022-04-10');
    insert into tb_monthpart(id,name ,create_time) values(9,'Coco5','2022-04-30');

### **6 MyCat****管理及监控** ###

#### **6.1 MyCat****原理**  ####

![0542960ea040447dbc05622ed03db5e9.png][]

> 在MyCat中，当执行一条SQL语句时，MyCat需要进行SQL解析、分片分析、路由分析、读写分离分析等操作，最终经过一系列的分析决定将当前的SQL语句到底路由到那几个(或哪一个)节点数据库，数据库将数据执行完毕后，如果有返回的结果，则将结果返回给MyCat，最终还需要在MyCat中进行结果合并、聚合处理、排序处理、分页处理等操作，最终再将结果返回给客户端。 
> 
> 而在 MyCat 的使用过程中， MyCat 官方也提供了一个管理监控平台 MyCat-Web （ MyCat-eye ）。Mycat-web  是  Mycat  可视化运维的管理和监控平台，弥补了  Mycat  在监控上的空白。帮  Mycat分担统计任务和配置管理任务。 Mycat-web  引入了  ZooKeeper  作为配置中心，可以管理多个节点。 Mycat-web  主要管理和监控  Mycat  的流量、连接、活动线程和内存等，具备  IP  白名单、邮  件告警等模块，还可以统计  SQL  并分析慢  SQL  和高频  SQL  等。为优化  SQL  提供依据。

#### **6.2 MyCat****管理** ####

Mycat 默认开通 2 个端口，可以在 server.xml 中进行修改。

8066  数据访问端口，即进行  DML  和  DDL  操作。

9066  数据库管理端口，即  mycat  服务管理控制功能，用于管理 mycat 的整个集群状态

连接 MyCat 的管理控制台：

mysql -h 192.168.200.210 -p 9066 -uroot -p123456

###  ###

### **6.3 MyCat-eye**  ###

#### **6.3.1** **介绍**  ####

Mycat-web(Mycat-eye) 是对 mycat-server 提供监控服务，功能不局限于对 mycat-server 使

用。他通过 JDBC 连接对 Mycat 、 Mysql 监控，监控远程服务器 ( 目前仅限于 linux 系统 ) 的 cpu 、内

存、网络、磁盘。

Mycat-eye 运行过程中需要依赖 zookeeper ，因此需要先安装 zookeeper 。

#### **6.3.2** **安装** ####

1). zookeeper 安装

2). Mycat-web 安装

#### **6.3.3** **访问**  ####

**http://192.168.200.210:8082/mycat**

![175929c791eb40a6a65d7b8a1f7c2fc4.png][]

#### **6.3.4** **配置**  ####

1).  开启 MyCat 的实时统计功能 (server.xml)

2).  在 Mycat 监控界面配置服务地址

![0e6cdaf6e1a947ca84934d6ee918457e.png][]

#### **6.3.5** **测试**  ####

配置好了之后，我们可以通过 MyCat 执行一系列的增删改查的测试，然后过一段时间之后，打开

mycat-eye 的管理界面，查看 mycat-eye 监控到的数据信息。

#### A. 性能监控 ####

![796cc77b09554bcea9ae9df25ad5b71e.png][]

#### B. 物理节点  ####

![500f557158f54f3aad5adcf03dcf3371.png][]

#### C. SQL统计 ####

#### ![c9da0c35065e4bf695920d0b44781d66.png][] ####

#### D. SQL表分析  ####

![ab0543ced2f8498d99ea7f1653b4ff12.png][]

#### E. SQL监控 ####

#### ![91d7bd8b1af3423886026faff0eca37b.png][] ####

#### F. 高频SQL ####

![f41f4cb8746d4d22a38befb0a4512dd5.png][]

> ♥️关注，就是我创作的动力
> 
> ♥️点赞，就是对我最大的认可
> 
> ♥️这里是小刘，励志用心做好每一篇文章，谢谢大家

[Link 1]: https://blog.csdn.net/lzl10211345?type=blog
[Link 2]: https://blog.csdn.net/lzl10211345/category_12064749.html?spm=1001.2014.3001.5482
[Link 3]: https://so.csdn.net/so/search?q=%E5%88%86%E5%BA%93%E5%88%86%E8%A1%A8&spm=1001.2101.3001.7020
[05a0060f1ad44bfc82ded10122ba741b.png]: https://img-blog.csdnimg.cn/05a0060f1ad44bfc82ded10122ba741b.png
[40858a60f5de48e9b36d917ed05e326a.png]: https://img-blog.csdnimg.cn/40858a60f5de48e9b36d917ed05e326a.png
[945894b6d4424613b20b2b954d746dbe.png]: https://img-blog.csdnimg.cn/945894b6d4424613b20b2b954d746dbe.png
[ec453ce7440242e6a61b5a42025dec6e.png]: https://img-blog.csdnimg.cn/ec453ce7440242e6a61b5a42025dec6e.png
[9ef1521d4ca34196831e6569e8328c12.png]: https://img-blog.csdnimg.cn/9ef1521d4ca34196831e6569e8328c12.png
[1cbf19ebdb49418eb980dd1c5e1d3142.png]: https://img-blog.csdnimg.cn/1cbf19ebdb49418eb980dd1c5e1d3142.png
[6c5d1e404d734992b40158c308c80df4.png]: https://img-blog.csdnimg.cn/6c5d1e404d734992b40158c308c80df4.png
[0542960ea040447dbc05622ed03db5e9.png]: https://img-blog.csdnimg.cn/0542960ea040447dbc05622ed03db5e9.png
[175929c791eb40a6a65d7b8a1f7c2fc4.png]: https://img-blog.csdnimg.cn/175929c791eb40a6a65d7b8a1f7c2fc4.png
[0e6cdaf6e1a947ca84934d6ee918457e.png]: https://img-blog.csdnimg.cn/0e6cdaf6e1a947ca84934d6ee918457e.png
[796cc77b09554bcea9ae9df25ad5b71e.png]: https://img-blog.csdnimg.cn/796cc77b09554bcea9ae9df25ad5b71e.png
[500f557158f54f3aad5adcf03dcf3371.png]: https://img-blog.csdnimg.cn/500f557158f54f3aad5adcf03dcf3371.png
[c9da0c35065e4bf695920d0b44781d66.png]: https://img-blog.csdnimg.cn/c9da0c35065e4bf695920d0b44781d66.png
[ab0543ced2f8498d99ea7f1653b4ff12.png]: https://img-blog.csdnimg.cn/ab0543ced2f8498d99ea7f1653b4ff12.png
[91d7bd8b1af3423886026faff0eca37b.png]: https://img-blog.csdnimg.cn/91d7bd8b1af3423886026faff0eca37b.png
[f41f4cb8746d4d22a38befb0a4512dd5.png]: https://img-blog.csdnimg.cn/f41f4cb8746d4d22a38befb0a4512dd5.png