Mysql Cluster 集群搭建和开机自启

骑猪看日落 2022-12-11 07:25 219阅读 0赞

## 一、前言 ##

MySQL的集群方案有很多，比如自带的MySQL Replication，官方的MySQL Fabirc、MySQL Cluster，还有三方的MMM、MHA等等，每个方案都是各自的优缺点，选型无非是要考虑高可用性、可伸缩性、负载均衡等等。

### 二、介绍 ###

MySQL Cluster 是MySQL 官方集群部署方案，它的历史较久。支持通过自动分片支持读写扩展，通过实时备份冗余数据，是可用性最高的方案，声称可做到99.999%的可用性。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIxMTUzNjE5_size_16_color_FFFFFF_t_70][]

MySQL NDB Cluster架构按照节点类型分为三部分：

**管理节点（Management node）**

管理节点通过对配置文件conifg.ini的维护来对其他节点进行管理。该文件可以用来配置有多少副本需要维护、在数据节点上为数据和索引分配多少内存、数据节点的位置、数据节点上保存数据的磁盘的位置，SQL节点的位置信息等，管理节点只能有一个。  
**SQL节点（SQL node）**

SQL节点可以理解为应用程序和数据节点的一个桥梁，应用程序不能直接访问数据节点，只能先访问SQL节点，然后SQL节点再去访问数据节点来返回数据，Cluster中可以有多个SQL节点，通过每个SQL节点查询到的数据都是一致的，一般来说，SQL节点越多，分配到每个SQL节点的负载就越小，系统的整体性能就越好；

**数据节点（Data node）**

数据节点用来存放数据，可有多个数据节点。

## 三、 Mysql Cluster搭建 ##

**1、环境准备**

172.8.10.105 siger-data1.test.com    管理节点

172.8.10.106 siger-data2.test.com    mysql节点，ndb节点

172.8.10.107 siger-data2.test.com    mysql节点，ndb节点

**2****、解压**

cd /opt/

tar -zxvf mysql-cluster-8.0.20-linux-glibc2.12-x86\_64.tar.gz

mv /opt/mysql-cluster-8.0.20-linux-glibc2.12-x86\_64 /usr/local/mysql/

**3、分发**

scp -r /usr/local/mysql/ [root@172.8.10.106:/usr/local/][root_172.8.10.106_usr_local]

scp -r /usr/local/mysql/ [root@172.8.10.107:/usr/local/][root_172.8.10.107_usr_local]

4、**安装管理节点（****105****节点）**

\# 将需要的文件取出

cd  /usr/local/mysql/

cp bin/ndb\_mgm\* /usr/local/bin

cd /usr/local/bin

chmod +x ndb\_mgm\*

\#新建配置文件并且初始化管理节点

mkdir /var/lib/mysql-cluster

vim /var/lib/mysql-cluster/config.ini

[ndbd default]
    #设置冗余的分数
    NoOfReplicas=2
    #指定存放数据的内存段大小
    DataMemory=1024M
    #制定索引的内存段大小
    IndexMemory=512M
    #将进程锁定在内存中，以避免与磁盘的交换
    LockPagesInMainMemory=1
    #该参数为作为整体的簇设置了最大表对象数目。该参数的默认值为128。最小值为8，最大值为20320，每个表对象每节点约需20KB的空间。
    MaxNoOfTables=4096
    #设置哈希索引在系统中同意时间被使用的总数，该参数的默认值为128。
    MaxNoOfOrderedIndexes=2048
    #设置最大的唯一索引的总数，默认值为64，最大值为4294967294。
    MaxNoOfUniqueHashIndexes=2048
    #定义了可在簇中定义的属性数目
    MaxNoOfAttributes=20480
    #该参数用于设置簇中触发程序对象的最大数目。该参数的默认值为768.
    MaxNoOfTriggers=10240
    
    [ndb_mgmd]
    NodeId=1
    HostName=172.8.10.105
    DataDir=/var/lib/mysql-cluster
    
    [ndbd]
    NodeId=2
    HostName=172.8.10.106
    DataDir=/var/lib/mysql-cluster
    
    [ndbd]
    NodeId=3
    HostName=172.8.10.107
    DataDir=/var/lib/mysql-cluster
    
    [mysqld]
    NodeId=4
    HostName=172.8.10.106
    
    [mysqld]
    NodeId=5
    HostName=172.8.10.107
    
    #必须有空的mysqld节点，不然数据节点断开后启动有报错
    [mysqld]
    nodeid=6
     
    [mysqld]
    nodeid=7

\#使用配置文件初始化管理节点

/usr/local/bin/ndb\_mgmd -f /var/lib/mysql-cluster/config.ini –initial

![20200929095232607.png][]

注：报以上错，是因为没找到libcrypto.so.1.1，将mysql的报复制到/usr/lib64/目录

cp /usr/local/mysql/lib/private/libssl.so.1.1 /usr/lib64/

cp /usr/local/mysql/lib/private/libcrypto.so.1.1 /usr/lib64/

\# 重新执行初始化命令

/usr/local/bin/ndb\_mgmd -f /var/lib/mysql-cluster/config.ini –initial

![20200929095302122.png][]

\#查看管理情况

任意目录执行 ndb\_mgm

ndb\_mgm>show

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIxMTUzNjE5_size_16_color_FFFFFF_t_70 1][]

**5、安装数据节点和mysql节点**

**以下的所有操作需要在所有的集群节点都要进行相同的操作**

\#新增用户组mysql和用户msyql

groupadd mysql

useradd -g mysql -s /bin/false mysql

\#新建文件夹并赋予权限

mkdir /var/lib/mysql-cluster

chown root:mysql /var/lib/mysql-cluster

\#初始化mysql

tar xvf mysql-cluster-8.0.20-linux-glibc2.12-x86\_64.tar.gz

ln -s /usr/local/mysql-cluster-8.0.20-linux-glibc2.12-x86\_64 /usr/local/mysql

cd /usr/local/mysql/bin/

./mysqld --initialize

172.8.10.106：

![20200929095408960.png][]

172.8.10.107：

![20200929095440404.png][]

会提示一个随机生成的数据库密码，此时需要记住这个密码，之后登录数据库需要使用这个密码！！！

\#修改权限

cd /usr/local/mysql/

chown -R root .

chown -R mysql data

chgrp -R mysql .

cp support-files/mysql.server /etc/rc.d/init.d/

chmod +x /etc/rc.d/init.d/mysql.server

chkconfig --add mysql.server

\#配置数据节点

vim /etc/my.cnf

<table> 
 <tbody> 
 <tr> 
 <td style="vertical-align:top;width:414.8pt;"> [client] port = 3306 socket =/tmp/mysql.sock &nbsp; [mysqld] basedir=/usr/local/mysql/ datadir=/usr/local/mysql/data user=root port=3306 socket=/tmp/mysql.sock server-id = 1&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; # 另一个改成2 ndbcluster ndb-connectstring=172.8.10.105&nbsp; # 管理节点IP tmp_table_size = 10240M max_heap_table_size = 10240M &nbsp; [mysql_cluster] ndb-connectstring=172.8.10.105&nbsp;&nbsp; #管理节点IP &nbsp; [mysqld_safe] log-error=/var/log/mysqld.log pid-file=/var/run/mysqld/mysqld.pid </td> 
 </tr> 
 </tbody> 
</table>

**\#启动mysql**

service mysql start

**\#查看状态**

service mysql status

![20200929095843151.png][]

**\#****登录****mysql**

cd /usr/local/mysql/bin/

./mysql -u root -p

注意：用随机生成的密码

**\#****设置新密码**

alter user 'root'@'localhost' identified by 'xx';

CREATE USER 'root'@'%'IDENTIFIED BY 'xx';

GRANT ALL PRIVILEGES ON \*.\* TO 'root'@'%';

flush privileges;

**\#****启动ndbd**

./ndbd –initial

172.8.10.106:

![20200929095929981.png][]

172.8.10.107:

![20200929095950762.png][]

**\#查看集群状态（管理节点）**

ndb\_mgm

show

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIxMTUzNjE5_size_16_color_FFFFFF_t_70 2][]

**6、关闭集群**

关闭管理节点：

ndb\_mgm -e shutdown

![20200929100039293.png][]

关闭SQL节点：

**/etc/init.d/mysql.server stop**

![20200929100103863.png][]

注：关闭时只需要关闭管理节点，后面的数据节点会同时被关闭，mysql需要额外关闭

**7****、启动集群**

启动管理节点：

/usr/local/bin/ndb\_mgmd -f /var/lib/mysql-cluster/config.ini

![20200929100125544.png][]

启动数据节点：

/usr/local/mysql/bin/ndbd

![20200929100206215.png][]

![20200929100213616.png][]

启动SQL节点：

/etc/init.d/mysql.server start

![20200929100407934.png][]

![20200929100414961.png][]

查看集群状态

ndb\_mgm

show

![20200929100438578.png][]

**8****、测试集群**

\#接入客户端

cd /usr/local/mysql/bin/

./mysql -u root -p

\#创建统一账号（任意sql节点）

CREATE USER 'siger'@'%'IDENTIFIED BY 'xx';

GRANT ALL PRIVILEGES ON \*.\* TO 'siger'@'%';

CREATE USER 'siger'@'localhost'IDENTIFIED BY 'xx';

GRANT ALL PRIVILEGES ON \*.\* TO 'siger'@'localhost ';

ALTER USER 'siger'@'%' IDENTIFIED BY 'xx' PASSWORD EXPIRE NEVER;

ALTER USER 'siger'@'%' IDENTIFIED WITH mysql\_native\_password BY 'xx';

FLUSH PRIVILEGES;

**\#****登陆107的sql节点**

**\#siger****用户登录**

./mysql -u siger -p

创建测试数据和和表

create database test;

use test;

CREATE TABLE student (age INT) ENGINE=NDBCLUSTER;

![20200929100532717.png][]

\#登陆108的sql节点查看

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIxMTUzNjE5_size_16_color_FFFFFF_t_70 3][]

9、开机自启

\#设置自启**（管理节点）**

vim /usr/local/mysql/ndb\_mgm.sh

/usr/local/bin/ndb\_mgmd -f /var/lib/mysql-cluster/config.ini

![20200929100636267.png][]

\#设置权限

chmod +x /usr/local/mysql/ndb\_mgm.sh

\#设置自启

vim /etc/rc.local

nohup sh /usr/local/mysql/ndb\_mgm.sh &

![20200929100703249.png][]

\#设置检验脚本**（数据节点和sql节点）**

数据节点的启动需要等待管理节点启动后，才能进行。所以使用了监控脚本来控制数据节点的启动，管理节点监听1186端口，使用nc检测1186端口的状态，来判断管理节点是否已经启动成功

vim /usr/local/mysql/ndbd\_mysql\_check.sh

#!/bin/bash
    # chkconfig: 2345 10 90 
    # description: myservice ....
    
    while :
    do
    	#检测管理节点是否已经启动
    	nc -w 10 -z 172.8.10.105 1186 > /dev/null 2>&1
    	ndb_mgmd=`echo $?`
    
    	#管理节点启动
    	if [ $ndb_mgmd -eq 0 ];then
    			
    		/usr/local/mysql/bin/ndbd
    		/etc/init.d/mysql.server start
    		break
    	else
    			
    	#管理节点未启动或挂掉的时候，关闭数据节点和sql节点
    	/etc/init.d/mysql.server stop
    	fi
    	sleep 5
    	
    done

\#设置权限

chmod +x ndbd\_mysql\_check.sh

\#设置自启

vim /etc/rc.local

nohup sh /usr/local/mysql/ndbd\_mysql\_check.sh &

![20200929100726682.png][]

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIxMTUzNjE5_size_16_color_FFFFFF_t_70]: /images/20221123/b5355e94bcb84f18a33c839bbb0fcc81.png
[root_172.8.10.106_usr_local]: mailto:root@172.8.10.106:/usr/local/
[root_172.8.10.107_usr_local]: mailto:root@172.8.10.107:/usr/local/
[20200929095232607.png]: /images/20221123/6a2db1e12ed3414ab12321f1fb959dc9.png
[20200929095302122.png]: /images/20221123/3c961f6cec814e698ad58f7942b50f61.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIxMTUzNjE5_size_16_color_FFFFFF_t_70 1]: /images/20221123/d5adc9b14c2d4a0cbdf47015d61a01e8.png
[20200929095408960.png]: /images/20221123/9eceed22720f4b789f8481023ace3846.png
[20200929095440404.png]: /images/20221123/bf3c1a05a1284ef99c4b1e9e4a5d9d0e.png
[20200929095843151.png]: /images/20221123/f345ab37dbe04d45aa75ac4e520c3ba4.png
[20200929095929981.png]: /images/20221123/d7b6a7cdb7f44e3cac4b4618f1565614.png
[20200929095950762.png]: /images/20221123/41eca31ac19f478096b776c4877d32ab.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIxMTUzNjE5_size_16_color_FFFFFF_t_70 2]: /images/20221123/2654c2bb7e48494eb1c0eef5d4b8eeca.png
[20200929100039293.png]: /images/20221123/f72f6c65f5334517af1a564263204713.png
[20200929100103863.png]: /images/20221123/71e974fd5e4148bebfd09245537c104a.png
[20200929100125544.png]: /images/20221123/77f2df2d6c0947dd9ec81769369840af.png
[20200929100206215.png]: /images/20221123/a766237ddfa14c7c9608b3fba69e149e.png
[20200929100213616.png]: /images/20221123/0e6d7489dde842cb81935f0e5dbd13aa.png
[20200929100407934.png]: /images/20221123/8124158424fc411c9d0abdad8467b113.png
[20200929100414961.png]: /images/20221123/ae37c1c535464ea48b158b780374a9e3.png
[20200929100438578.png]: /images/20221123/f3ea75ce678447c6aca45fcc793bd4d2.png
[20200929100532717.png]: /images/20221123/c060afb3250d40da82e2ca1b49232464.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzIxMTUzNjE5_size_16_color_FFFFFF_t_70 3]: /images/20221123/b5aac944f726492f9a6a93d696a8a7ec.png
[20200929100636267.png]: /images/20221123/eb21b1017f384c1b898c843e6ef59fcb.png
[20200929100703249.png]: /images/20221123/9c6ff59734a24d29961a1da6d42f84d0.png
[20200929100726682.png]: /images/20221123/9838cfa1f4ed4471bbb58803c436cb4b.png