Keepalived+Nginx实现高可用(HA)

本是古典 何须时尚 2022-09-26 02:16 290阅读 0赞

keepalived的HA分为抢占模式和非抢占模式,抢占模式即MASTER从故障中恢复后,会将VIP从BACKUP节点中抢占过来。非抢占模式即MASTER恢复后不抢占BACKUP升级为MASTER后的VIP。下面分别介绍CentOS7下抢占模式和非抢占模式的配置方式:

1、方案规划
























VIP IP 主机名 Nginx端口
192.168.1.210 192.168.1.201 nginx-01 80
192.168.1.210 192.168.1.202 nginx-02 80

两台服务器的VIP为:192.168.1.210

分别在两台WEB服务器安装nginx和keepalived:
1、安装Nginx,请参考《Nginx源码安装》
2、安装Keepalived,请参考《Keepalived安装与配置》
3、防火墙添加arrp组播规则,或关闭防火墙
1> iptables

  1. shell> vi /etc/sysconfig/iptables
  2. -A INPUT -p vrrp -d 224.0.0.18/32 -j ACCEPT

2> firewall

  1. firewall-cmd --direct --permanent --add-rule ipv4 filter INPUT 0 --in-interface enp4s0 --destination 224.0.0.18 --protocol vrrp -j ACCEPT
  2. firewall-cmd --reload

4、关闭selinux

  1. shell> vi /etc/sysconfig/selinux
  2. #修改:
  3. SELINUX=disabled
  4. #setenforce 0

2、抢占模式配置

编辑/etc/keepalived/keepalived.conf配置文件

1> MASTER(192.168.1.201):

  1. global_defs {
  2. router_id nginx_01 #标识本节点的名称,通常为hostname
  3. }
  4. ## keepalived会定时执行脚本并对脚本执行的结果进行分析,动态调整vrrp_instance的优先级。
  5. ##如果脚本执行结果为0,并且weight配置的值大于0,则优先级相应的增加。如果脚本执行结果非0,
  6. ##并且weight配置的值小于 0,则优先级相应的减少。其他情况,维持原本配置的优先级,即配置文件中priority对应的值。
  7. vrrp_script chk_nginx {
  8. script "/etc/keepalived/nginx_check.sh"
  9. interval 2 #每2秒检测一次nginx的运行状态
  10. weight -20 #失败一次,将自己的优先级-20
  11. }
  12. vrrp_instance VI_1 {
  13. state MASTER # 状态,主节点为MASTER,备份节点为BACKUP
  14. interface enp0s3 # 绑定VIP的网络接口,通过ifconfig查看自己的网络接口
  15. virtual_router_id 51 # 虚拟路由的ID号,两个节点设置必须一样,可选IP最后一段使用,相同的VRID为一个组,他将决定多播的MAC地址
  16. mcast_src_ip 192.168.1.201 # 本机IP地址
  17. priority 100 # 节点优先级,值范围0~254,MASTER要比BACKUP高
  18. advert_int 1 # 组播信息发送时间间隔,两个节点必须设置一样,默认为1秒
  19. # 设置验证信息,两个节点必须一致
  20. authentication {
  21. auth_type PASS
  22. auth_pass 1111
  23. }
  24. # 虚拟IP,两个节点设置必须一样。可以设置多个,一行写一个
  25. virtual_ipaddress {
  26. 192.168.1.210
  27. }
  28. track_script {
  29. chk_nginx # nginx存活状态检测脚本
  30. }
  31. }

2> BACKUP(192.168.1.202)

  1. global_defs { router_id nginx_02 }
  2. vrrp_script chk_nginx { script "/etc/keepalived/nginx_check.sh" interval 2 weight -20 }
  3. vrrp_instance VI_1 { state BACKUP interface enp0s3 virtual_router_id 51 mcast_src_ip 192.168.1.202 priority 90 advert_int 1 authentication { auth_type PASS auth_pass 1111 }
  4. virtual_ipaddress { 192.168.1.210 }
  5. track_script { chk_nginx }
  6. }

3> 创建nginx服务检测脚本

分别在主备服务器/etc/keepalived目录下创建nginx_check.sh脚本,并为其添加执行权限chmod +x /etc/keepalived/nginx_check.sh。用于keepalived定时检测nginx的服务状态,如果nginx停止了,会尝试重新启动nginx,如果启动失败,会将keepalived进程杀死,将vip漂移到备份机器上。

  1. #!/bin/bash
  2. A=`ps -C nginx --no-header | wc -l`
  3. if [ $A -eq 0 ];then
  4. /opt/nginx/sbin/nginx #尝试重新启动nginx
  5. sleep 2 #睡眠2秒
  6. if [ `ps -C nginx --no-header | wc -l` -eq 0 ];then
  7. killall keepalived #启动失败,将keepalived服务杀死。将vip漂移到其它备份节点
  8. fi
  9. fi

4> 启动keepalived服务

  1. shell> service keepalived start
  2. shell> ps -ef | grep keepalived
  3. [root@localhost ~]# ps -ef | grep keepalived
  4. root 865 1 0 23:36 ? 00:00:00 keepalived -D
  5. root 869 865 0 23:36 ? 00:00:00 keepalived -D
  6. root 870 865 0 23:36 ? 00:00:00 keepalived -D

如果看到如上进程信息,表示keepalived已经启动成功。下面用ip add命令查看vip绑定的情况,如下图所示:
这里写图片描述
从上图可以看出,vip地址192.168.1.210绑定在MASTER(192.168.1.201)的enp0s3网卡上。

5> 测试故障转移

将MASTER上的keepalived停止,查看vip是否会漂移到192.168.2.202上。

停止201的keepalived服务:

  1. shell> service keepalived stop
  2. shell> ip addr

这里写图片描述
从上图可以看出,vip已经成功从201漂移到了202。此时再将201的keepalived服务启动后,由于201是MASTER,所以会将202的VIP抢占过来。

启动201的keepalived服务:

  1. shell> service keepalived start

结果VIP又回到了201,如下图所示:
这里写图片描述

3、非抢占模式

master从故障中恢复后,不会抢占备份节点的vip

1> MASTER(192.168.1.201):

  1. global_defs { router_id nginx_01 #标识本节点的名称,通常为hostname }
  2. vrrp_script chk_nginx { script "/etc/keepalived/nginx_check.sh" interval 2 weight -20 }
  3. vrrp_instance VI_1 { state BACKUP interface enp0s3 virtual_router_id 51 mcast_src_ip 192.168.1.201 priority 100 advert_int 1 nopreempt authentication { auth_type PASS auth_pass 1111 }
  4. virtual_ipaddress { 192.168.1.210 }
  5. track_script { chk_nginx # nginx存活状态检测脚本 }
  6. }

2> BACKUP(192.168.1.202)

  1. global_defs { router_id nginx_02 }
  2. vrrp_script chk_nginx { script "/etc/keepalived/nginx_check.sh" interval 2 weight -20 }
  3. vrrp_instance VI_1 { state BACKUP interface enp0s3 virtual_router_id 51 mcast_src_ip 192.168.1.202 priority 90 advert_int 1 nopreempt authentication { auth_type PASS auth_pass 1111 }
  4. virtual_ipaddress { 192.168.1.210 }
  5. track_script { chk_nginx }
  6. }

和非抢占模式的配置相比,只改了两个地方:
1> 在vrrp_instance块下两个节点各增加了nopreempt指令,表示不争抢vip
2> 节点的state都为BACKUP
两个keepalived节点都启动后,默认都是BACKUP状态,双方在发送组播信息后,会根据优先级来选举一个MASTER出来。由于两者都配置了nopreempt,所以MASTER从故障中恢复后,不会抢占vip。这样会避免VIP切换可能造成的服务延迟。

发表评论

表情:
评论列表 (有 0 条评论,290人围观)

还没有评论,来说两句吧...

相关阅读

    相关 NginxHA

    1. Nginx常规部署 如下图所示,用户在访问网站的时候是直接访问到Nginx,Nginx下挂了一个Tomcat集群,在集群环境下,Tomcat之间彼此协调,已达到负载