docker swarm集群搭建高可用mysql主备

￡神魔★判官ぃ 2022-12-28 11:22 560阅读 0赞

# docker swarm集群搭建高可用mysql主备 #

> 前提：为了避免mysql单点故障，很有必要引进mysql主备。主和备分别在不同机器，并且需要保持数据一致性
> 
> 技术：这里用到**nginx+mysql+mysql**做高可用的主备，利用nginx做反向代理，当其中一台mysql服务器宕机后，自动切换另一台，注意这里不能做负载均衡，因为高并发是有存在问题的。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MjUzMzg1Ng_size_16_color_FFFFFF_t_70][]

## 一，启动docker swarm集群  ##

### 1，docker stack 配置如下图，如果不会搭建docker swarm 集群的，参考文章：[搭建docker swarm高可用集群以及常用命令][docker swarm] ###

#mysql1服务
      mysql-1:
        image: mysql:5.7
        ports:
          - 3310:3306
        networks:
          #指定容器加入的网络
          - network
        environment:
          #最好使用此设定时区，其它静像也可以使用
          - TZ=CST-8
          #指定mysql的访问密码
          - MYSQL_ROOT_PASSWORD=123456
        #可以加--default-time-zone='+8:00'设定时区
        volumes:
          #本地文件目录，持久化
          - /home/AuthenticationCenter/new_mysql/mone/data:/var/lib/mysql
          #指定开启binlog的配置文件
          - /home/AuthenticationCenter/new_mysql/mone/conf/my.cnf:/etc/mysql/my.cnf
        command: --character-set-server=utf8 
                 --collation-server=utf8_general_ci
                 --sql-mode="STRICT_TRANS_TABLES,NO_AUTO_CREATE_USER,NO_ENGINE_SUBSTITUTION,NO_ZERO_DATE,NO_ZERO_IN_DATE,ERROR_FOR_DIVISION_BY_ZERO"
        deploy:
          placement:
            constraints:
              #该hostname为指定容器在哪个主机启动
              - node.hostname == ecs2d8ed9c368b9
    
    #mysql2服务
      mysql-2:
        image: mysql:5.7
        ports:
          - 3311:3306
        networks:
          #指定容器加入的网络
          - network
        environment:
          #最好使用此设定时区，其它静像也可以使用
          - TZ=CST-8
          #指定mysql的访问密码
          - MYSQL_ROOT_PASSWORD=123456
        #可以加--default-time-zone='+8:00'设定时区
        volumes:
          #本地文件目录挂载，持久化
          - /home/AuthenticationCenter/new_mysql/mtwo/data:/var/lib/mysql
          #指定开启binlog的配置文件
          - /home/AuthenticationCenter/new_mysql/mtwo/conf/my.cnf:/etc/mysql/my.cnf
        command: --character-set-server=utf8 
                 --collation-server=utf8_general_ci
                 --sql-mode="STRICT_TRANS_TABLES,NO_AUTO_CREATE_USER,NO_ENGINE_SUBSTITUTION,NO_ZERO_DATE,NO_ZERO_IN_DATE,ERROR_FOR_DIVISION_BY_ZERO"
        deploy:
            placement:
              constraints:
                #该hostname为指定容器在哪个主机启动
                - node.hostname == ecseafe0d11214a
    
    
    
    
    #mysql-nginx服务
      mysql_nginx:
        image: nginx:1.19.2
        ports:
          - 33060:3306
        networks:
          - network
        volumes:
          #本地文件目录
          - /home/AuthenticationCenter/new_mysql/nginx/nginx.conf:/etc/nginx/nginx.conf
          - /home/AuthenticationCenter/new_mysql/nginx/data:/var/www/html/upload
        deploy:
          mode: replicated
          #这里开启两个副本，防止nginx单点故障
          replicas: 2
          placement:
            constraints: [node.role == manager]    
        depends_on:
         - mysql-1

> 查找**mysql-1**和**mysql-2**的**hostname**，可以通过manager管理节点执行下面命令查看， 结果如下图
> 
> **命令：docker nodel ls**

![20201216201624957.png][]

### **mysql-1**的my.cnf配置： ###

[mysqld]
    server_id=1
    log-bin= mysql-bin
    
    replicate-ignore-db=mysql
    replicate-ignore-db=sys
    replicate-ignore-db=information_schema
    replicate-ignore-db=performance_schema
    
    read-only=0
    relay_log=mysql-relay-bin
    log-slave-updates=on
    auto-increment-offset=1
    auto-increment-increment=2
    
    !includedir /etc/mysql/conf.d/
    !includedir /etc/mysql/mysql.conf.d/

### **mysql-2**的my.cnf配置： ###

[mysqld]
    server_id=2
    log-bin= mysql-bin
    
    replicate-ignore-db=mysql
    replicate-ignore-db=sys
    replicate-ignore-db=information_schema
    replicate-ignore-db=performance_schema
    
    read-only=0
    relay_log=mysql-relay-bin
    log-slave-updates=on
    auto-increment-offset=2
    auto-increment-increment=2
    
    !includedir /etc/mysql/conf.d/
    !includedir /etc/mysql/mysql.conf.d/

### 利用nginx做第四层的反向代理，也可以使用Haproxy ###

**nginx的配置如下 **

user www-data;
    worker_processes auto;
    pid /run/nginx.pid;
    
    events {
        use   epoll;
        worker_connections  1024;
    }
    
    
    stream {
        upstream mysql {
            #backup为备用mysql,当mysql-1故障后自动切换mysql-2,达到主备效果，
            server mysql-1:3306 max_fails=3 fail_timeout=30s;
            server mysql-2:3306      backup;
        }
    
        server {
            listen    3306;
            proxy_connect_timeout 3000s;
            proxy_timeout 6000s;
            proxy_pass mysql;
        }
    }

> 通过命令启动docker swarm 集群： **docker stack deploy -c docker-stack-test.yml mysqltest**

## 二，开启mysql主主同步， ##

1,  在对应的主机执行以下命令，进入**mysql-1**和**mysql-2**容器

> 查看docker的容器id:  **docker ps -f "name=mysql-1"    或者   docker ps -f "name=mysql-2"**
> 
> 进入容器：**docker exec -it (容器ID) /bin/bash**            (容器ID为下图红框位置)

![20201216203847832.png][]

2,  分别进入**mysql-1**和**mysql-2**容器后执行以下命令进入mysql服务     (密码：123456)

> 进入mysql服务：**mysql -u root -p **
> 
> 输入密码**：123456**

3，**mysql-1**和**mysql-2**分别执行以下命令，允许其他**slave**的 **io thread**进行监听自己的binlog文件，原理如下图

> **     GRANT REPLICATION SLAVE ON \*.\* to 'slave'@'%' identified by '123456';**

![这里写图片描述][aHR0cHM6Ly9ub3RlLnlvdWRhby5jb20veXdzL3B1YmxpYy9yZXNvdXJjZS9iZTFmYTQ4OTBkYzkyZTZlZDY1OWRiYmIzMTZmMzExMS94bWxub3RlLzlBODBFRDczRkQzRjRERDZBNUE1OTg2MjA2MkQ5QkQ5LzE0MDg]

4， 执行以下命令记录**mysql-1**同步的**binlog**文件状态

> **   show master status;**

如下图：记录mysql-bin.000003 和 3825

![2020121620464518.png][]

5，**mysql-2**执行以下命令，开启IO线程监听**mysql-1**的binlog文件**，**黄色信息为**mysql-1**记录的信息

> **解释**：master\_host：这里可以指定容器名，因为在同个docker swarm集群，  
> 
>            master\_password: 访问**mysql-1或者mysql-2**的密码
> 
> **命令：change master to master\_host='mysql-1',master\_user='slave',master\_password='123456',master\_log\_file='mysql-bin.000003',master\_log\_pos=3825,master\_port=3306;**

6，**mysql-2 **中开启同步

> **start slave ;**

7，记录**mysql-2**同步的binlog文件状态

> **show master status;**

如下图：记录mysql-bin.000004 和 3161

![20201216205135303.png][]

8，在**mysql-1**中执行以下命令，黄色信息为**mysql-2**记录的信息

> **change master to master\_host='mysql-2',master\_user='slave',master\_password='123456',master\_log\_file='mysql-bin.000004',master\_log\_pos=3161,master\_port=3306;**

9，**mysql-1**开启同步

> **start slave ;**

10，分别在**mysql-1**和**mysql-2**中执行以下命令查看是否开启成功。

> **show slave status\\G;**

如下图：如果两个都是yes , 说明成功。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MjUzMzg1Ng_size_16_color_FFFFFF_t_70 1][]

## 疑问： ##

>   
> 1，通过进入对应MySQL容器配置MySQL主从配置，下次重启后还需不需要重新配置，    答：不需要重新配置，因为配置文件已经持久化到宿主机了，重启不影响。  
> 2，加入某台MySQL宕机了，当这台MySQL重启后会不会自动同步之前未同步的数据   搭：会的，因为会记录对应master的binlog同步的位置，positon的位置。

# #

## 三，mysql数据恢复 ##

如果当某个MySQL服务器数据丢失了，需要重新做数据恢复，并且需要重新配置MySQL主主，这一块我们下期讲。。。。。。。

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MjUzMzg1Ng_size_16_color_FFFFFF_t_70]: /images/20221120/fcc44e94974f416b90387ad8cf358f5b.png
[docker swarm]: https://blog.csdn.net/weixin_42533856/article/details/110779806
[20201216201624957.png]: /images/20221120/51252fa874a7444bb4e34c8b5236c845.png
[20201216203847832.png]: /images/20221120/8218c9c1ac54400ea5c61eaf429f7693.png
[aHR0cHM6Ly9ub3RlLnlvdWRhby5jb20veXdzL3B1YmxpYy9yZXNvdXJjZS9iZTFmYTQ4OTBkYzkyZTZlZDY1OWRiYmIzMTZmMzExMS94bWxub3RlLzlBODBFRDczRkQzRjRERDZBNUE1OTg2MjA2MkQ5QkQ5LzE0MDg]: /images/20221120/f6c3b7b9559a4c4288336cd43bbb6322.png
[2020121620464518.png]: /images/20221120/34519356757c4558bf8cd827efe2f8bc.png
[20201216205135303.png]: /images/20221120/ae8cd4bcf9dd43cc95362d4f771b5b88.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MjUzMzg1Ng_size_16_color_FFFFFF_t_70 1]: /images/20221120/e0c0c16ff9d54a729274e86b17410dad.png