TiDB亿级数据亚秒响应查询扩缩容

男娘i 2024-03-16 16:10 49阅读 0赞

#### 目录 ####

*  1 查看数据分布
 *  2 当前集群部署拓扑
 *  3 扩容TiKV节点
 *   *  3.1 编写扩容脚本
     *  3.2 执行扩容命令
     *   *  3.2.1 命令格式
         *  3.2.2 执行命令
     *  3.3 验证扩容信息
     *   *  3.3.1 查看节点信息
         *  3.3.2 通过dashboard查看
 *  4 缩容TiKV节点
 *   *  4.1 查看节点信息
     *  4.2 执行缩容操作
     *   *  4.2.1 缩容命令
         *  4.2.2 执行命令
     *  4.3 验证缩容信息
     *   *  4.3.1 查看节点信息
         *  4.3.2 通过dashboard查看

--------------------

## 1 查看数据分布 ##

![在这里插入图片描述][8c8e4e638cbb42f8b4c8719994775220.png]

> 可以在gafana中的`tidb-cluster-tikv-summary`查看tidb的数据在服务器中的分布情况

![在这里插入图片描述][c535d6d5b89a49419d9f4d97dddaa072.png]

## 2 当前集群部署拓扑 ##

<table> 
 <thead> 
  <tr> 
   <th>实例</th> 
   <th>IP</th> 
   <th>端口</th> 
   <th>存储路径</th> 
   <th>部署路径</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>grafana</td> 
   <td>192.168.10.30</td> 
   <td>3000</td> 
   <td>–</td> 
   <td>/tidb-deploy/grafana-3000</td> 
  </tr> 
  <tr> 
   <td>pd</td> 
   <td>192.168.10.30</td> 
   <td>2379/2380</td> 
   <td>/tidb-data/pd-2379</td> 
   <td>/tidb-deploy/pd-2379</td> 
  </tr> 
  <tr> 
   <td>prometheus</td> 
   <td>192.168.10.30</td> 
   <td>9090</td> 
   <td>/tidb-data/prometheus-9090</td> 
   <td>/tidb-deploy/prometheus-9090</td> 
  </tr> 
  <tr> 
   <td>tidb</td> 
   <td>192.168.10.30</td> 
   <td>4000/10080</td> 
   <td>–</td> 
   <td>/tidb-deploy/tidb-4000</td> 
  </tr> 
  <tr> 
   <td>tiflash</td> 
   <td>192.168.10.30</td> 
   <td>9000/8123/3930/20170/20292/8234</td> 
   <td>/tidb-data/tiflash-9000</td> 
   <td>/tidb-deploy/tiflash-9000</td> 
  </tr> 
  <tr> 
   <td>tikv</td> 
   <td>192.168.10.30</td> 
   <td>20160/20180</td> 
   <td>/tidb-data/tikv-20160</td> 
   <td>/tidb-deploy/tikv-20160</td> 
  </tr> 
  <tr> 
   <td>tikv</td> 
   <td>192.168.10.30</td> 
   <td>20161/20181</td> 
   <td>/tidb-data/tikv-20161</td> 
   <td>/tidb-deploy/tikv-20161</td> 
  </tr> 
  <tr> 
   <td>tikv</td> 
   <td>192.168.10.30</td> 
   <td>20162/20182</td> 
   <td>/tidb-data/tikv-20162</td> 
   <td>/tidb-deploy/tikv-20162</td> 
  </tr> 
 </tbody> 
</table>

## 3 扩容TiKV节点 ##

> 需要扩容一个TiKV节点

<table> 
 <thead> 
  <tr> 
   <th>实例</th> 
   <th>IP</th> 
   <th>端口</th> 
   <th>存储路径</th> 
   <th>部署路径</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>tikv</td> 
   <td>192.168.10.30</td> 
   <td>20163/20183</td> 
   <td>/tidb-data/tikv-20163</td> 
   <td>/tidb-deploy/tikv-20163</td> 
  </tr> 
 </tbody> 
</table>

### 3.1 编写扩容脚本 ###

> 在 scale-out.yaml 文件添加扩容拓扑配置

[root@linux30 tidb]# vi scale-out.yaml
    xxxxxxxxxx
    tikv_servers:
      - host: 192.168.10.30
        ssh_port: 22
        port: 20163
        status_port: 20183
        deploy_dir: /opt/tidb/tidb-deploy/tikv-20163
        data_dir: /opt/tidb/tidb-data/tikv-20163
        config:
            server.labels:
                host: logic-host-4

### 3.2 执行扩容命令 ###

#### 3.2.1 命令格式 ####

tiup cluster scale-out <cluster-name> scale-out.yaml -p

*  cluster-name：TiDB集群名称
 *  p：使用密码方式登录当前机器

#### 3.2.2 执行命令 ####

[root@linux30 tidb]# tiup cluster scale-out tidb-cluster scale-out.yaml -p

> 输入命令后，确认输入机器密码

![在这里插入图片描述][def555010a314e3f875ef4129041e053.png]

> 出现`successfully`表示节点扩容成功

### 3.3 验证扩容信息 ###

#### 3.3.1 查看节点信息 ####

tiup cluster display tidb-cluster

> 我们看到Tikv已经增加了一个节点

![在这里插入图片描述][483fffed4eab4a9e91cf7f112de50140.png]

#### 3.3.2 通过dashboard查看 ####

> 也可以看到扩容的节点信息

![在这里插入图片描述][f6dcbf78846b411588496c5ebcda5a5e.png]

## 4 缩容TiKV节点 ##

### 4.1 查看节点信息 ###

[root@linux30 tidb]# tiup cluster display tidb-cluster

> 当前TiKV是4个节点

![在这里插入图片描述][b16b570fda4044bda727266c5c46f890.png]

### 4.2 执行缩容操作 ###

#### 4.2.1 缩容命令 ####

tiup cluster scale-in <cluster-name> --node 192.168.64.152:20163

> 参数解释

*  cluster-name：集群名称
 *  node：需要删除的节点地址

#### 4.2.2 执行命令 ####

[root@linux30 tidb]# tiup cluster scale-in tidb-cluster --node 192.168.10.30:20163

> 出现确认操作后，输入y确认执行就可以执行缩容操作了

![在这里插入图片描述][31d9fad36bfe4e9388e3f54e11c11646.png]

### 4.3 验证缩容信息 ###

#### 4.3.1 查看节点信息 ####

tiup cluster display tidb-cluster

> 我们看到需要缩容的节点状态是`Tombstone`说明已经下线，下线需要一定时间，下线节点的状态变为 `Tombstone` 就说明下线成功

![在这里插入图片描述][1e6c429d802343f2bb895c6019988ad4.png]

#### 4.3.2 通过dashboard查看 ####

> 也可以看到缩容的节点已经不存在了，说明缩容成功

![在这里插入图片描述][d4e424aa408c448ab76fd550bb7794bb.png]

[8c8e4e638cbb42f8b4c8719994775220.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/a023ce52ee534969b93eefcc267e452b.png
[c535d6d5b89a49419d9f4d97dddaa072.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/c4bcd1d9d0ab463792b7a97a89a6ab9f.png
[def555010a314e3f875ef4129041e053.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/a4939ceb1e81405e846bf559791c2bc2.png
[483fffed4eab4a9e91cf7f112de50140.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/bffcd65081644609b2a7dc4ac478e12a.png
[f6dcbf78846b411588496c5ebcda5a5e.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/2ab5197e4341429bb94085d523921250.png
[b16b570fda4044bda727266c5c46f890.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/4a38d456f5d0487c9badc1c3fb84e6ec.png
[31d9fad36bfe4e9388e3f54e11c11646.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/d28e1521cee54db5b340b5c40643c7c8.png
[1e6c429d802343f2bb895c6019988ad4.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/fe0de59ba0874e9d90a6240efea308a7.png
[d4e424aa408c448ab76fd550bb7794bb.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/799fc233b69b420788d52966ebba4848.png