使用Nginx + Keepalived配置实现Web站点高可用方案

于 2025-05-28 18:19:52 发布
阅读量1k 收藏 15
点赞数 25
CC 4.0 BY-SA版权
分类专栏： Linux系统管理 软件架构（Architecture） 文章标签： nginx 前端 智能路由器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/garyond/article/details/148289434

1. 概述

1.1 Keepalived介绍

Keepalived是一个基于VRRP协议来实现的服务高可用方案，可以利用其来避免IP单点故障，类似的工具还有heartbeat、corosync、pacemaker。但是它一般不会单独出现，而是与其它负载均衡技术（如LVS、HAProxy、Nginx）一起工作来达到集群的高可用。

VRRP（Virtual Router Redundancy Protocol），即虚拟路由冗余协议。可以认为它是实现路由器高可用的容错协议，即将多台提供相同功能的路由器组成一个路由器组(Router Group)，这个组里面有一个master和多个backup，但在外界看来就像一台一样，构成虚拟路由器，拥有一个虚拟IP（vip，也就是路由器所在局域网内其他机器的默认路由），占有这个IP的master实际负责ARP相应和转发IP数据包，组中的其它路由器作为备份的角色处于待命状态。master会发组播消息，当backup在超时时间内收不到vrrp包时就认为master宕掉了，这时就需要根据VRRP的优先级来选举一个backup当master，保证路由器的高可用。

在VRRP协议实现里，虚拟路由器使用 00-00-5E-00-01-XX 作为虚拟MAC地址，XX就是唯一的 VRID （Virtual Router IDentifier），这个地址同一时间只有一个物理路由器占用。在虚拟路由器里面的物理路由器组里面通过多播IP地址 224.0.0.18 来定时发送通告消息。每个Router都有一个 1-255 之间的优先级别，级别最高的（highest priority）将成为主控（master）路由器。通过降低master的优先权可以让处于backup状态的路由器抢占（pro-empt）主路由器的状态，两个backup优先级相同的IP地址较大者为master，接管虚拟IP。

VRRP结构图

一般Keepalived用于实现前端高可用，常用的前端高可用的组合有，就是我们常见的LVS+Keepalived、Nginx+Keepalived、HAproxy+Keepalived。

1.2 Nginx + Keepalived

keepalived可以认为是VRRP协议在Linux上的实现，主要有三个模块，分别是core、check和vrrp。core模块为keepalived的核心，负责主进程的启动、维护以及全局配置文件的加载和解析。check负责健康检查，包括常见的各种检查方式。vrrp模块是来实现VRRP协议的。本文基于如下的拓扑图：

Nginx + Keepalived部署结构图

2. 规划与准备工作

  1. 关闭SELinux

    为了保证Nginx和Keepalived之间的正常数据通信， 需要关闭Linux的SELinux。

     [root@localhost ~]# vi /etc/sysconfig/selinux 
 # This file controls the state of SELinux on the system.
 # SELINUX= can take one of these three values:
 #       enforcing - SELinux security policy is enforced.
 #       permissive - SELinux prints warnings instead of enforcing.
 #       disabled - SELinux is fully disabled.
 SELINUX=disabled
 # SELINUXTYPE= type of policy in use. Possible values are:
 #       targeted - Only targeted network daemons are protected.
 #       strict - Full SELinux protection.
 SELINUXTYPE=targeted

  2. 配置iptables

    配置iptables， 允许相应的端口通信。

     [root@Docker-OA-98 ~]# vi /etc/sysconfig/iptables
*filter
:INPUT ACCEPT [0:0]
:FORWARD ACCEPT [0:0]
:OUTPUT ACCEPT [0:0]
-A INPUT -m state --state RELATED,ESTABLISHED -j ACCEPT
-A INPUT -p icmp -j ACCEPT
-A INPUT -i lo -j ACCEPT
-A INPUT -p tcp -m state --state NEW -m tcp --dport 22 -j ACCEPT
-A INPUT -p tcp -m state --state NEW -m tcp --dport 80 -j ACCEPT
-A INPUT -p tcp -m state --state NEW -m tcp --dport 89 -j ACCEPT
-A INPUT -p tcp -m state --state NEW -m tcp --dport 9080 -j ACCEPT
# 允许VRRP（虚拟路由冗余协议）通信
-A INPUT -p vrrp -j ACCEPT
# 允许Keepalived虚拟路由组播地址通信
-A INPUT -d 224.0.0.18 -j ACCEPT
-A INPUT -j REJECT --reject-with icmp-host-prohibited
-A FORWARD -j REJECT --reject-with icmp-host-prohibited
COMMIT

  3. 环境规划

序号服务器名称主机名IP地址操作系统备注
1VIP1(Keepalived)无192.168.1.100-虚拟节点
2VIP2(Keepalived)无192.168.1.101-主主模式
3Nginx 01Nginx-A-98192.168.1.98CentOS LInux 7.3
4Nginx 02Nginx-B-99192.168.1.99CentOS LInux 7.3
5Tomcat 01Tomcat-Web-91192.168.202.91CentOS LInux 7.3
6Tomcat 02Tomcat-Web-92192.168.202.92CentOS LInux 7.3
7Tomcat 03Tomcat-Web-93192.168.202.93CentOS LInux 7.3

3. 安装、部署Nginx与Keepalived

3.1 安装Nginx与Keepalived

分别在服务器Nginx 01和Nginx 02安装Nginx和Keepalived。

# 安装Nginx
[root@Docker-OA-98 ~]# yum -y install nginx

# 安装Keepalived
[root@Docker-OA-98 ~]# yum -y install keepalived

3.2 配置Nginx负载均衡

分别在服务器Nginx 01和Nginx02上配置Nginx的应用负载均衡。

[root@Docker-OA-98 ~]# vi /etc/nginx/nginx.conf
upstream application01 {
  ip_hash;
  server 192.168.202.91:8080;
  server 192.168.202.92:8080;
  server 192.168.202.93:8080;
}

server {
    listen   80;
    listen   [::]:80;
    server_name  service.test01.com;
    #root         /usr/share/nginx/html;

    location / {
        proxy_pass  http://application01/;
        proxy_set_header  Host  $host;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        proxy_set_header  X-Real-IP     $remote_addr;

        access_log  /var/log/nginx/access.ecology.log  main;

        client_max_body_size 100m;
        client_body_buffer_size 1024k;

        proxy_connect_timeout 5000;
        proxy_read_timeout 5000;
        proxy_send_timeout 6000;
        proxy_buffer_size 1024k;
        proxy_buffers 4 512k;
        proxy_busy_buffers_size 1024k;
        proxy_temp_file_write_size 1024k;
    }

}

4. 高可用方案 – 主主模式

主主模式

  • Nginx 01服务器Keepalived脚本配置
 [root@Nginx-A-98 src]# vim /etc/keepalived/keepalived.conf
  vrrp_script chk_nginx {
     script "/etc/keepalived/nginx_check.sh"    # 检测nginx状态的脚本路径
     interval 2                    # 检测时间间隔2s
     weight -20                    # 如果脚本的条件成立，权重-20
  }

  vrrp_instance VI_1 {            # VRRP实例名；多实例的情况下，名称必须不一致
      state MASTER                # 服务状态；MASTER（工作状态）BACKUP（备用状态）
      interface eth0              # VIP绑定网卡
      virtual_router_id 51        # 虚拟路由ID，主、备节点必须一致；多实例的情况下，ID必须不一致
      mcast_src_ip 192.168.1.98  # 本机IP
      nopreempt                   # 优先级高的设置，解决异常回复后再次抢占的问题
      priority 100                # 优先级；取值范围：0~254；MASTER > BACKUP
      advert_int 1                # 组播信息发送间隔，主、备节点必须一致，默认1s
      authentication {            # 验证信息；主、备节点必须一致
          auth_type PASS          # VRRP验证类型，PASS、AH两种
          auth_pass 1111          # VRRP验证密码，在同一个vrrp_instance下，主、从必须使用相同的密码才能正常通信
      }
       track_script {             # 将track_script块加入instance配置块
          chk_nginx               # 执行Nginx监控的服务
      }
      virtual_ipaddress {         # 虚拟IP池，主、备节点必须一致，可以定义多个VIP
          192.168.1.100            # 虚拟IP
      }
  }

 vrrp_instance VI_2 {
      state BACKUP
      interface eth0
      virtual_router_id 52
      mcast_src_ip 192.168.1.98
      priority 90
      advert_int 1
      authentication {
          auth_type PASS
          auth_pass 1111
      }
      track_script {
          chk_nginx
      }
      virtual_ipaddress {
          192.168.1.101
      }
}
  • Nginx 02服务器Keepalived配置
[root@Nginx-B-99 src]# vim /etc/keepalived/keepalived.conf
  vrrp_script chk_nginx {
     script "/etc/keepalived/nginx_check.sh"
     interval 2
     weight -20
  }

  vrrp_instance VI_1 {
      state BACKUP
      interface eth0
      virtual_router_id 51
      mcast_src_ip 192.168.1.99
      priority 90
      advert_int 1
      authentication {
          auth_type PASS
          auth_pass 1111
      }
      track_script {
          chk_nginx
      }
      virtual_ipaddress {
          192.168.1.100
      }   
  }   

  vrrp_instance VI_2 {
      state MASTER
      interface eth0
      virtual_router_id 52
      mcast_src_ip 192.168.1.99
      nopreempt
      priority 100
      advert_int 1
      authentication {
          auth_type PASS
          auth_pass 1111
      }
      track_script {
          chk_nginx
      }
      virtual_ipaddress {
          192.168.1.101
      }
  }
  • Nginx状态监测脚本

分别在服务器Nginx 01和Nginx 02上添加Nginx状态监测脚本。

  [root@Nginx-A-98 keepalived]# vim /etc/keepalived/nginx_check.sh
  #!/bin/bash
  A=`ps -C nginx –no-header |wc -l`
  if [ $A -eq 0 ];then
          /usr/local/nginx/sbin/nginx
          sleep 2
          if [ `ps -C nginx --no-header |wc -l` -eq 0 ];then
                  killall keepalived
          fi
  fi

我们也可以根据自己的业务需求，总结出在什么情形下关闭keepalived，如 curl 主页连续2个5s没有响应则切换：

#!/bin/bash

count = 0
for (( k=0; k<2; k++ )) 
do 
    check_code=$( curl --connect-timeout 3 -sL -w "%{http_code}\\n" http://localhost/login.html -o /dev/null )
    if [ "$check_code" != "200" ]; then
        count = count +1
        continue
    else
        count = 0
        break
    fi
done
if [ "$count" != "0" ]; then
#   /etc/init.d/keepalived stop
    exit 1
else
    exit 0
fi

5. 高可用方案 – 主从模式

主从模式

  • Nginx 01服务器Keepalived脚本配置
 [root@Nginx-A-98 src]# vim /etc/keepalived/keepalived.conf
  vrrp_script chk_nginx {
     script "/etc/keepalived/nginx_check.sh"    # 检测nginx状态的脚本路径
     interval 2                    # 检测时间间隔2s
     weight -20                    # 如果脚本的条件成立，权重-20
  }

  vrrp_instance VI_1 {            # VRRP实例名；多实例的情况下，名称必须不一致
      state MASTER                # 服务状态；MASTER（工作状态）BACKUP（备用状态）
      interface eth0              # VIP绑定网卡
      virtual_router_id 51        # 虚拟路由ID，主、备节点必须一致；多实例的情况下，ID必须不一致
      mcast_src_ip 192.168.1.98  # 本机IP
      nopreempt                   # 优先级高的设置，解决异常回复后再次抢占的问题
      priority 100                # 优先级；取值范围：0~254；MASTER > BACKUP
      advert_int 1                # 组播信息发送间隔，主、备节点必须一致，默认1s
      authentication {            # 验证信息；主、备节点必须一致
          auth_type PASS          # VRRP验证类型，PASS、AH两种
          auth_pass 1111          # VRRP验证密码，在同一个vrrp_instance下，主、从必须使用相同的密码才能正常通信
      }
       track_script {             # 将track_script块加入instance配置块
          chk_nginx               # 执行Nginx监控的服务
      }
      virtual_ipaddress {         # 虚拟IP池，主、备节点必须一致，可以定义多个VIP
          192.168.1.100            # 虚拟IP
      }
  }
  • Nginx 02服务器Keepalived配置
[root@Nginx-B-99 src]# vim /etc/keepalived/keepalived.conf
  vrrp_script chk_nginx {
     script "/etc/keepalived/nginx_check.sh"
     interval 2
     weight -20
  }

  vrrp_instance VI_1 {
      state BACKUP
      interface eth0
      virtual_router_id 51
      mcast_src_ip 192.168.1.99
      priority 90
      advert_int 1
      authentication {
          auth_type PASS
          auth_pass 1111
      }
      track_script {
          chk_nginx
      }
      virtual_ipaddress {
          192.168.1.100
      }   
  }
  • Nginx状态监测脚本

分别在服务器Nginx 01和Nginx 02上添加Nginx状态监测脚本。

  [root@Nginx-A-98 keepalived]# vim /etc/keepalived/nginx_check.sh
  #!/bin/bash
  A=`ps -C nginx –no-header |wc -l`
  if [ $A -eq 0 ];then
          /usr/local/nginx/sbin/nginx
          sleep 2
          if [ `ps -C nginx --no-header |wc -l` -eq 0 ];then
                  killall keepalived
          fi
  fi
Nginx+Keepalived+LVS集群实战
悦分享
09-09 1925
集群的常见分类负载均衡集群（load balancing clusters)，简称LBC或者LB。高可用性集群（High-availiability（HA) clusters)，简称HAC。高性能计算集群（High-performance(HPC) clusters)，简称HPC。网格计算（Grid computing)。提示：负载均衡集群和高可用性集群是互联网行业常用的集群架构模式。
5-Nginx +tomcat +keepalived nginx扩展模块
m0_60700102的博客
08-25 533
Nginx实现服务器端集群搭建 Nginx与Tomcat部署 前面课程已经将Nginx的大部分内容进行了讲解，我们都知道了
Keepalived详解
m0_74053853的博客
08-13 5275
负载均衡是一种在真实集群之间分配 IP 流量的方法 服务器，提供一个或多个高可用性虚拟服务。在设计负载均衡拓扑时，必须考虑负载均衡器本身以及后面的真实服务器的可用性。Keepalived 为负载均衡和高可用性提供了框架。负载均衡框架依赖于众所周知且广泛使用的 Linux 虚拟服务器 （IPVS） 内核模块，提供第 4 层负载均衡。Keepalived 实现了一组健康检查器，以动态和自适应的方式 根据服务器池的运行状况维护和管理负载均衡的服务器池。高可用性是通过虚拟冗余路由协议实现的 （VRRP）。
keepalived介绍、安装及配置详解
热门推荐
神棍之路
01-03 1万+
keepalived起初是为LVS设计的专门用来监控集群系统中各个服务节点的状态如果某个服务节点出现异常或者工作出现故障,keepalived将检测到,并将出现故障的服务节点从集群系统中剔除,而在故障节点恢复正常后,keepalived又可以自动将该服务节点重新加入集群中，这些工作全部自动完成。这部分功能类似于nginx 等反向代理的应用探活功能实现后端服务高可用。
Nginx 使用 Keepalived 搭建 nginx 高可用
最新发布
matrixlzp的博客
05-11 1611
两台装有 nginx 的 CentOS 虚拟机。
keepalived安装配置详解
qq_51010919的博客
07-15 1万+
高可用性（High Availability）是指系统或服务能够在大部分时间内保持可用状态的能力。高可用性的设计目标是确保系统在面对硬件故障、软件错误、网络问题或其他意外情况时，能够持续提供服务而不中断或降低性能。实现高可用性通常需要以下几个关键方面的考虑：冗余：冗余是指在系统的各个层面引入备份组件或资源，以确保在某个组件或资源发生故障时，能够无缝切换到备份组件或资源上。例如，使用冗余服务器、存储设备、网络连接等。
用keepalived搭建企业级nginx高可用方案
Stevelu的技术博客
05-18 1000
nginx高可用在生产环境中的使用比较常见，如果一个系统能够一直提供服务，那么这个可用性则是百分之百，但是天有不测风云。所以我们只能尽可能的去减少服务的故障，如果一个系统能够一直提供服务，那么这个可用性则是百分之百，但是天有不测风云。所以我们只能尽可能的去减少服务的故障，本次实验采用keepalived来实现Nginx的高可用，这种方案在国内企业中是一种比较常见的高可用方案，采用双机热备，一台服务器提供服务，另一台处于待机状态，当主服务器宕机后就接替它继续运行。
Nginx+keepalived
weixin_46886475的博客
11-25 3848
配置Nginx HA模式，防止访问高并发导致Nginx宕机造成服务停止；
Keepalived 高可用集群详解和配置
TYM121380的博客
08-14 1570
1、LB（Load Balance）：负载均衡LVS：四层负载均衡HAProxy：七层/四层 负载均衡nginx：七层负载均衡2、HA（High Availa bility）：高可用集群数据库、Redis3、SPoF（Single Point of Failure）：解决单点故障HPC：High Performance Computing 高性能集群。
nginx+keepalived高可用
qq_61314298的博客
07-01 3504
两台服务器上的keepalive是靠相互通讯来判断的，如果一台服务器上keepalived挂掉了,keepalived就会把虚拟的ip就会转移到备用的nginx服务器上，实现服务转移。keepalive只能相互检查对方的进程是否还存活，所以对nginx没有任何一点监控作用，当nginx宕机后，keepalived进程还存活着就会导致web项目无法访问，所以后续需要编写一个shell脚本来完成对nginx进程的判断。在高可用架构中，Nginx 常用作前端的负载均衡器，将流量分发到多个后端服务器上。
Nginx+Keepalived实现站点高可用.pdf
05-17
Nginx+Keepalived的组合是互联网服务架构中常用的一种高可用解决方案，尤其适用于需要高可用性的站点。通过该技术，当一台服务器发生故障时，另一台服务器能迅速接管工作，保证服务不间断。 首先，Nginx是一款轻量...
企业级双活NGINX+图形化GUI管理搭建详细教程 nginx+keepalived+nginxwebui
weixin_45339969的博客
04-03 3550
用于keepalived检测nginx状态，如果nginx服务停了，会自动启动nginx，，如果nginx启动不了，就开始虚拟地址（VIP）漂移了，也就是常说的故障转移了。有需求的同学们可以借鉴，有高工看见了，也提提建议。④、mv /usr/local/nginx/sbin/nginx /usr/local/nginx/sbin/nginx.old 备份nginx主文件并删除原nginx。↓↓↓↓↓↓↓↓↓↓↓↓↓下面的脚本就是上面nginx中的内容。为了展示方便，单独列举↓↓↓↓↓↓↓↓↓。
nginx+keepalived实现nginx高可用集群
m0_38004228的博客
12-16 4447
nginx+keepalived实现nginx高可用集群
Nginx + Keepalived 高可用集群
a_2373179473的博客
03-13 1028
本文系统阐述了 Nginx 与 Keepalived 构建高可用负载均衡集群的核心技术。Nginx 通过七层流量管理（URL 路由、会话保持）和被动健康检查实现智能负载均衡，Keepalived 基于 VRRP 协议实现虚拟 IP（VIP）秒级漂移，确保服务连续性。通过主备架构配置，实现单点故障消除、流量均衡分配和服务自愈能力。
linux centos7 利用keepalived 搭建高可用nginx集群
Meta39的博客
05-26 2260
linux centos7 利用keepalived 搭建高可用nginx集群
keepalived监控nginx进程
棉花糖老丫
06-02 1376
keepalived监控nginx进程
keepalived+nginx高可用 脑裂监控
QWQ45597316的博客
08-31 2782
keepalived+nginx 脑裂的监控
Nginx + Keepalive 实现高可用负载均衡
2401_86945738的博客
02-14 927
Keepalive 是一种 TCP 连接保持技术，它允许客户端与服务器之间保持一个长时间不活动的连接，而不是在每个请求后关闭连接。这种技术可以减少 TCP 连接的建立和关闭的开销，从而提高性能。在 Nginx 中，Keepalive 功能可以与负载均衡结合使用，确保在多个后端服务器之间分发请求时，保持一定数量的长连接。
keepalived实现nginx高可用
mushuangpanny的博客
08-31 2071
Keepalived 软件起初是专为LVS负载均衡软件设计的，用来管理并监控LVS集群系统中各个服务节点的状态，后来又加入了可以实现高可用的VRRP功能。（LVS，不能做健康检查，以前用来管理lvs,现在用来做高可用）Keepalived除了能够管理LVS软件外，还可以作为其他服务（例如：Nginx、Haproxy、MySQL等）的高可用解决方案软件。Keepalived软件主要是通过VRRP协议实现高可用功能的。.........
使用Nginx+Keepalived构建高可用负载均衡
"本文将介绍如何使用Nginx和Keepalived搭建高可用服务环境，以确保服务的连续性和稳定性。我们将重点讲解Keepalived的安装配置以及在Nginx服务器集群中的应用，以实现七层负载均衡。" 在IT行业中，高可用性(High ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值