MySQL持久化数据——主从分离 & Linux下创建2个MySQL的Docker容器 & 挂载方式启动 & 配置主从

约定不等于承诺〃 2023-10-13 17:17 4阅读 0赞

#### 目录 ####

*  引出
 *  数据库的事务
 *   *  1.原子性
     *  2.一致性
     *  3.隔离性
     *  4.持久性
 *  MySQL持久化数据
 *   *  0.在宿主机centos创建主的文件夹
     *  1.拷贝my.cnf配置文件
     *  2.挂载方式启动主mysql
     *  3.修改my.cnf文件的权限
     *   *  【bug】mysql: \[ERROR\] unknown variable 'server-id=200'.
     *  3.修改主的my.cof文件
     *  4.创建主从账号slave
     *  5.获取主master容器状态
     *  5.获取主mysql\_master的ip地址
     *  0.在宿主机centos创建从的文件夹
     *  6.从mysql数据库修改启动的my.cnf文件
     *  7.挂载方式启动从mysql
     *  8.进入从mysql配置主从关系
 *  问题记录：
 *   *  1.主从的sercer-id一致报错
 *  总结

## 引出 ##

1.数据库的事务，持久化到数据库——持久性；  
2.Linux下MySQL数据库的持久化，挂载启动，主从配置；  
3.遇到的问题，及其解决办法；

--------------------

## 数据库的事务 ##

### 1.原子性 ###

事务中所有执行的sql合并成一个执行单元

undolog日志：update emp set age=17 where id=20

执行：update emp set age=18 where id=20

### 2.一致性 ###

添加事务和不添加事务数据保持一致

### 3.隔离性 ###

隔离级别：

1）读未提交：READ UNCOMMITTED，会产生脏读

2）读已提交：READ COMMITTED，会产生不可重复读

3）可重复读：REPEATABLE READ，会产生幻读（默认事务隔离级别）

4）串行化：SERIALIZABLE，效率低

### 4.持久性 ###

持久化到数据库

## MySQL持久化数据 ##

> 主从配置顺序

> 1.创建mysql master(3306) 容器  
> 2.进入master(3306) docker exec -it mysql\_3306 bash  
> 3.显示master状态: show master status; —-记住 mysql-bin , position  
> 4.退出容器  
> 5.创建mysql\_3310容器,注意挂载点的文件  
> 6.进入slave(3310) docker exec -it mysql\_3310 bash  
> 7.mysql -uroot -p123  
> 8.stop slave;  
> 9.reset slave;  
> 10.change master to master\_host=’172.17.0.2’,master\_user=’slave’,master\_password=’123’,MASTER\_LOG\_FILE=’mysql-bin.000001’,MASTER\_LOG\_POS=157;  
> 11.start slave;

对容器的内容进行挂载----移动硬盘

提高数据库读写效率：

*  主从分离，
 *  读写分离，
 *  SQL优化

[https://github.com/alibaba/canal][https_github.com_alibaba_canal]

![在这里插入图片描述][6fbdadba008d45d28ba78f4071e1cd5f.png]

>  *  MySQL master 将数据变更写入二进制日志( binary log, 其中记录叫做二进制日志事件binary log events，可以通过 show binlog events 进行查看)
>  *  MySQL slave 将 master 的 binary log events 拷贝到它的中继日志(relay log)
>  *  MySQL slave 重放 relay log 中事件，将数据变更反映它自己的数据

首先了解一下mysql主备复制原理：

（1）master主库将改变记录，发送到二进制文件（binary log）中

（2）slave从库向mysql Master发送dump协议，将master主库的binary log events拷贝到它的中继日志（relay log）

（3）slave从库读取并重做中继日志中的事件，将改变的数据同步到自己的数据库

canal的工作原理：把自己伪装成slave，从master复制数据。读取binlog是需要master授权的，因为binlog是加密的，授权分用户名密码才能读。master授权后不知道读他的binlog的是从机还是canal，他的所有传输协议都符合从机的标准，所以master一直以为是从机读的。

![在这里插入图片描述][f2806c9af67a4f22833226bde2245215.png]

### 0.在宿主机centos创建主的文件夹 ###

[root@192 software]# mkdir -p 3310/conf
    [root@192 software]# mv 3310 mysql
    [root@192 software]# cd mysql/
    [root@192 mysql]# mkdir -p 3310/data
    [root@192 mysql]# cp -r 3310 3306
    [root@192 mysql]# ls
    3306  3310

![在这里插入图片描述][66700283caec45b8ac498e28f6c141e7.png]

![在这里插入图片描述][9d9fc4c6517347e48b595c97919ead5e.png]

### 1.拷贝my.cnf配置文件 ###

容器内配置文件的位置/etc/my.conf，拷贝到centos

[root@192 mysql]# docker cp mysql_3306_try:/etc/my.cnf my.cnf
    [root@192 mysql]# mv conf ./3310/conf/
    [root@192 mysql]# ls
    3306  3310

容器内配置文件的位置/etc/my.cnf,拷贝到centos下  
使用上传的配置文件my.cnf

> \[root@localhost conf\]\# docker cp mysql\_3306:/etc/my.cnf ./  
> \[root@localhost conf\]\# ls  
> my.cnf

![在这里插入图片描述][0183fb48ba624a8a9be401943ee3ad57.png]

### 2.挂载方式启动主mysql ###

在mysql的docker容器中/var/lib/mysql是存放数据的地方；/etc/mysql/my.conf是配置文件的位置；

\-v相当于挂载，冒号：前面是宿主机，相当于centos，

docker run -itd --name mysql_3306_main --privileged=true -p 3306:3306 -v /root/software/mysql/3306/data:/var/lib/mysql -v /root/software/mysql/3306/conf/my.cnf:/etc/mysql/my.cnf -v /root/software/mysql/3306/mysql-files:/var/lib/mysql-files -e MYSQL_ROOT_PASSWORD=123 mysql

![在这里插入图片描述][76ae66ebe58243759c562689f095de6d.png]  
\-v后面是centos的路径

![在这里插入图片描述][75efdb97a4184e4f9874bebc0c03bbb9.png]

![在这里插入图片描述][6f21caf3e5a34159bdd02869f43e08fc.png]

### 3.修改my.cnf文件的权限 ###

chmod 777 my.cnf

![在这里插入图片描述][0af1f42cb8c74b889f928fa4f496e907.png]

chmod命令

![在这里插入图片描述][86ced184c26f495680475bb9bc08d73c.png]

#### 【bug】mysql: \[ERROR\] unknown variable ‘server-id=200’. ####

![在这里插入图片描述][c0b733d244d64759aad08bf9aa95bf58.png]

网上的解决方案，失败

https://blog.csdn.net/zcbdandan/article/details/89500578

![在这里插入图片描述][65506c9ea4154f6f955b6527c626d878.png]

### 3.修改主的my.cof文件 ###

主的my.conf文件配置

server-id=201
    log-bin=mysql-bin
    binlog_format=row

![在这里插入图片描述][1a360ecd0aeb4d1397b7239a931ef472.png]

然后再重启一下：

docker restart mysql_3306_main

### 4.创建主从账号slave ###

docker exec -it mysql_3306_main bash

mysql> create user 'slave'@'%' identified by '123';
    Query OK, 0 rows affected (0.00 sec)
    
    mysql> grant replication slave,replication client on *.* to 'slave'@'%';
    Query OK, 0 rows affected (0.01 sec)
    
    mysql> alter user 'slave'@'%' identified with mysql_native_password by '123';
    Query OK, 0 rows affected (0.01 sec)
    
    mysql> flush privileges;
    Query OK, 0 rows affected (0.00 sec)

![在这里插入图片描述][989bc5eb000f479db5f1b91b1a5f178b.png]  
![在这里插入图片描述][698aea310c0f4b8bb99e84039a3ebaac.png]

> 出现加密方式异常的选择以下处理方案：由于mysql8.x的密码加密方式改变，如果之后主从出现问题，需要修改密码加密方式,如果之前在mysql\_3306中设置过的则可以跳过此处。

进入mysql的主服务器:

[root@localhost ~]# docker exec -it mysql_3306 bash
    mysql> use mysql
    Reading table information for completion of table and column names
    You can turn off this feature to get a quicker startup with -A
    Database changed
    mysql> ALTER USER 'slave'@'%' IDENTIFIED WITH mysql_native_password BY '123';

### 5.获取主master容器状态 ###

![在这里插入图片描述][89aa0fda9db4433a9617ea0f03c7f6a8.png]  
![在这里插入图片描述][fd3661f555bc40d9846299953bc3392c.png]

### 5.获取主mysql\_master的ip地址 ###

![在这里插入图片描述][3dbc788d28194989abff960076d4d3fc.png]

> docker inspect mysql\_3306

[root@192 conf]# docker inspect mysql_3306_main | grep IPA
                "SecondaryIPAddresses": null,
                "IPAddress": "172.17.0.3",
                        "IPAMConfig": null,
                        "IPAddress": "172.17.0.3",
    [root@192 conf]#

![在这里插入图片描述][495440c9241a42f3ae5ef83fc102d7e2.png]

<table> 
 <thead> 
  <tr> 
   <th>序列</th> 
   <th>名称</th> 
   <th>值</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>1</td> 
   <td>日志文件:file</td> 
   <td>mysql-bin.000002</td> 
  </tr> 
  <tr> 
   <td>2</td> 
   <td>日志文件位置:Position</td> 
   <td>95744</td> 
  </tr> 
  <tr> 
   <td>3</td> 
   <td>主服务器的ip</td> 
   <td>172.17.0.2</td> 
  </tr> 
 </tbody> 
</table>

### 0.在宿主机centos创建从的文件夹 ###

![在这里插入图片描述][0c2e2ffbc0794e52a6624b748d0838ee.png]

### 6.从mysql数据库修改启动的my.cnf文件 ###

要点：

*  打开读写权限
 *  进行修改vim，添加

server-id=202
    relay_log=edu-mysql-relay-bin
    read-only=1

![在这里插入图片描述][9d77f8202a4a4621ab86b288093a9641.png]

![在这里插入图片描述][538296d08a464f28b2fa057cc032965b.png]

### 7.挂载方式启动从mysql ###

docker run -itd --name mysql_3310_slave --privileged=true -p 3310:3306 -v /root/software/mysql/3310/data:/var/lib/mysql -v /root/software/mysql/3310/conf/my.cnf:/etc/mysql/my.cnf -v /root/software/mysql/3310/mysql-files:/var/lib/mysql-files -e MYSQL_ROOT_PASSWORD=123 mysql

![在这里插入图片描述][d626ce24709a4466bd38ecbcc646b9dd.png]

### 8.进入从mysql配置主从关系 ###

"IPAddress": "172.17.0.3",
    
    mysql> show master status
        -> ;
    +---------------+----------+--------------+------------------+-------------------+
    | File          | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
    +---------------+----------+--------------+------------------+-------------------+
    | binlog.000010 |     1162 |              |                  |                   |
    +---------------+----------+--------------+------------------+-------------------+
    1 row in set (0.00 sec)

change master to master_host='172.17.0.3',master_user='slave',master_password='123',MASTER_LOG_FILE='binlog.000013',MASTER_LOG_POS=157

![在这里插入图片描述][7b96b79a8d7b4c838231dad438eee362.png]

![在这里插入图片描述][c1a1d2852dc24c2cbe85ba0a09d81b44.png]

show variables like 'server_id';

![在这里插入图片描述][fe11b89367634d54b8821fd7878cef43.png]

## 问题记录： ##

### 1.主从的sercer-id一致报错 ###

Last\_IO\_Error: Fatal error: The replica I/O thread stops because source and replica have equal MySQL server ids; these ids must be different for replication to work (or the --replicate-same-server-id option must be used on replica but this does not always make sense; please check the manual before using it).

![在这里插入图片描述][4f9d7f8e9a7d48629ff1fce18488ea80.png]  
![在这里插入图片描述][f74a12a1c84b4d4f9f31e5d3722e06f9.png]

报错原因：

可能是之前的挂载启动方式没有生效，导致server-id都是1，冲突，IO线程没有启动成功；因此在容器内直接修改server\_id，尝试后修改成功；

解决方案：

用到的相关代码如下：

mysql> change master to master_host='172.17.0.3',master_user='slave',master_password='123',MASTER_LOG_FILE='binlog.000013',MASTER_LOG_POS=157;
    mysql> start slave;
    mysql> show slave status \G
    mysql> SET GLOBAL server_id = 123
        -> ;
    mysql>  show variables like 'server_id';
    +---------------+-------+
    | Variable_name | Value |
    +---------------+-------+
    | server_id     | 123   |
    +---------------+-------+
    1 row in set (0.00 sec)
    
    mysql> stop slave;
    Query OK, 0 rows affected, 1 warning (0.00 sec)
    
    mysql> start slave;
    Query OK, 0 rows affected, 1 warning (0.01 sec)
    
    mysql> show slave status \G
    *************************** 1. row ***************************
                   Slave_IO_State: Waiting for source to send event
                      Master_Host: 172.17.0.3
                      Master_User: slave
                      Master_Port: 3306
                    Connect_Retry: 60
                  Master_Log_File: binlog.000013
              Read_Master_Log_Pos: 157
                   Relay_Log_File: 52d169c47849-relay-bin.000003
                    Relay_Log_Pos: 323
            Relay_Master_Log_File: binlog.000013
                 Slave_IO_Running: Yes
                Slave_SQL_Running: Yes

![在这里插入图片描述][4d72e0bed2e24b5d8d6aa20e15e2978e.png]  
![在这里插入图片描述][a43cf899e0ac4b3cbe18f761b2034e7c.png]

进行测试

![在这里插入图片描述][4a426b041b584fb1ad617d200592489b.png]

--------------------

## 总结 ##

1.数据库的事务，持久化到数据库——持久性；  
2.Linux下MySQL数据库的持久化，挂载启动，主从配置；  
3.遇到的问题，及其解决办法；

[https_github.com_alibaba_canal]: https://github.com/alibaba/canal
[6fbdadba008d45d28ba78f4071e1cd5f.png]: https://img-blog.csdnimg.cn/6fbdadba008d45d28ba78f4071e1cd5f.png
[f2806c9af67a4f22833226bde2245215.png]: https://img-blog.csdnimg.cn/f2806c9af67a4f22833226bde2245215.png
[66700283caec45b8ac498e28f6c141e7.png]: https://img-blog.csdnimg.cn/66700283caec45b8ac498e28f6c141e7.png
[9d9fc4c6517347e48b595c97919ead5e.png]: https://img-blog.csdnimg.cn/9d9fc4c6517347e48b595c97919ead5e.png
[0183fb48ba624a8a9be401943ee3ad57.png]: https://img-blog.csdnimg.cn/0183fb48ba624a8a9be401943ee3ad57.png
[76ae66ebe58243759c562689f095de6d.png]: https://img-blog.csdnimg.cn/76ae66ebe58243759c562689f095de6d.png
[75efdb97a4184e4f9874bebc0c03bbb9.png]: https://img-blog.csdnimg.cn/75efdb97a4184e4f9874bebc0c03bbb9.png
[6f21caf3e5a34159bdd02869f43e08fc.png]: https://img-blog.csdnimg.cn/6f21caf3e5a34159bdd02869f43e08fc.png
[0af1f42cb8c74b889f928fa4f496e907.png]: https://img-blog.csdnimg.cn/0af1f42cb8c74b889f928fa4f496e907.png
[86ced184c26f495680475bb9bc08d73c.png]: https://img-blog.csdnimg.cn/86ced184c26f495680475bb9bc08d73c.png
[c0b733d244d64759aad08bf9aa95bf58.png]: https://img-blog.csdnimg.cn/c0b733d244d64759aad08bf9aa95bf58.png
[65506c9ea4154f6f955b6527c626d878.png]: https://img-blog.csdnimg.cn/65506c9ea4154f6f955b6527c626d878.png
[1a360ecd0aeb4d1397b7239a931ef472.png]: https://img-blog.csdnimg.cn/1a360ecd0aeb4d1397b7239a931ef472.png
[989bc5eb000f479db5f1b91b1a5f178b.png]: https://img-blog.csdnimg.cn/989bc5eb000f479db5f1b91b1a5f178b.png
[698aea310c0f4b8bb99e84039a3ebaac.png]: https://img-blog.csdnimg.cn/698aea310c0f4b8bb99e84039a3ebaac.png
[89aa0fda9db4433a9617ea0f03c7f6a8.png]: https://img-blog.csdnimg.cn/89aa0fda9db4433a9617ea0f03c7f6a8.png
[fd3661f555bc40d9846299953bc3392c.png]: https://img-blog.csdnimg.cn/fd3661f555bc40d9846299953bc3392c.png
[3dbc788d28194989abff960076d4d3fc.png]: https://img-blog.csdnimg.cn/3dbc788d28194989abff960076d4d3fc.png
[495440c9241a42f3ae5ef83fc102d7e2.png]: https://img-blog.csdnimg.cn/495440c9241a42f3ae5ef83fc102d7e2.png
[0c2e2ffbc0794e52a6624b748d0838ee.png]: https://img-blog.csdnimg.cn/0c2e2ffbc0794e52a6624b748d0838ee.png
[9d77f8202a4a4621ab86b288093a9641.png]: https://img-blog.csdnimg.cn/9d77f8202a4a4621ab86b288093a9641.png
[538296d08a464f28b2fa057cc032965b.png]: https://img-blog.csdnimg.cn/538296d08a464f28b2fa057cc032965b.png
[d626ce24709a4466bd38ecbcc646b9dd.png]: https://img-blog.csdnimg.cn/d626ce24709a4466bd38ecbcc646b9dd.png
[7b96b79a8d7b4c838231dad438eee362.png]: https://img-blog.csdnimg.cn/7b96b79a8d7b4c838231dad438eee362.png
[c1a1d2852dc24c2cbe85ba0a09d81b44.png]: https://img-blog.csdnimg.cn/c1a1d2852dc24c2cbe85ba0a09d81b44.png
[fe11b89367634d54b8821fd7878cef43.png]: https://img-blog.csdnimg.cn/fe11b89367634d54b8821fd7878cef43.png
[4f9d7f8e9a7d48629ff1fce18488ea80.png]: https://img-blog.csdnimg.cn/4f9d7f8e9a7d48629ff1fce18488ea80.png
[f74a12a1c84b4d4f9f31e5d3722e06f9.png]: https://img-blog.csdnimg.cn/f74a12a1c84b4d4f9f31e5d3722e06f9.png
[4d72e0bed2e24b5d8d6aa20e15e2978e.png]: https://img-blog.csdnimg.cn/4d72e0bed2e24b5d8d6aa20e15e2978e.png
[a43cf899e0ac4b3cbe18f761b2034e7c.png]: https://img-blog.csdnimg.cn/a43cf899e0ac4b3cbe18f761b2034e7c.png
[4a426b041b584fb1ad617d200592489b.png]: https://img-blog.csdnimg.cn/4a426b041b584fb1ad617d200592489b.png