高可用 负载均衡 集群部署方案:Keepalived + Nginx + Tomcat

服务器
初期应用较小,一般以单机部署为主,即可满足业务的需求,随着业务的不断扩大,单机部署的模式无法承载这么大的业务量,需要进行服务集群化的部署,本文主要介绍服务器Tomcat多实例部署,搭载Keepalived + Nginx,实现Web服务的高可用。

初期应用较小,一般以单机部署为主,即可满足业务的需求,随着业务的不断扩大,单机部署的模式无法承载这么大的业务量,需要进行服务集群化的部署,本文主要介绍服务器Tomcat多实例部署,搭载Keepalived + Nginx,实现Web服务的高可用。

  • Nginx 是一个高性能的 HTTP反向代理服务器
  • Keepalived 是一个基于VRRP协议来实现的服务高可用方案,可以利用其来避免服务的单点故障

Nginx作为反向代理服务器,来提供负载均衡的能力,使我们的Web服务器,能够水平扩容,这时反向代理服务器(Nginx)又变成了一个单点,如果挂掉,整合Web服务器就不能被外界访问到;所以需要结合Keepalived来保障反向代理服务器(Nginx)的高可用;

 

高可用、负载均衡 集群部署方案:Keepalived + Nginx + Tomcat

 

环境准备

  • CentOS7系统
  • Keepalived-2.0.15
  • Nginx-1.14.2
  • Tomcat8

准备2台服务器,每台上部署安装Nginx+Keepalived和Tomcat,另外一个VIP(虚拟IP);这里省略了2台,这样在实际模拟中方便演练(Tomcat不单独部署在一台服务器而已)

1、Nginx的安装

 

高可用、负载均衡 集群部署方案:Keepalived + Nginx + Tomcat

 

2、Keepalived的安装

 

高可用、负载均衡 集群部署方案:Keepalived + Nginx + Tomcat

 

3、配置Keepalived + Nginx,实现高可用

准备的2台服务器上,一台作为MASTER,一台作为BACKUP;每台上需要准备文件如下图

 

高可用、负载均衡 集群部署方案:Keepalived + Nginx + Tomcat

 

执行如下的约定,上面安装脚本也是按照这个执行的

1. keepalived 和 nginx 都编译安装到/usr/local目录下面,名称分别是keepalived 和 nginx

2. ck_ng.sh、 keepalived.conf 文件放置到/etc/keepalived/目录, ck_ng.sh文件权限设置成755

3. nginx.service、 keepalived.service 文件放置到/usr/lib/systemd/system目录

 

高可用、负载均衡 集群部署方案:Keepalived + Nginx + Tomcat

 

3.1、MASTER配置

keepalived.conf配置

  1. global_defs { 
  2.  #notification_email { 
  3.  # localhost@163.com 
  4.  #} 
  5.  #notification_email_from Keepalived@localhost 
  6.  #smtp_server 163@smtp.com 
  7.  #smtp_connect_timeout 30 
  8.  router_id 192.168.1.101 #MASTER服务器的IP地址 
  9.  
  10. #配置vrrp_script,主要用于健康检查,以及检查失败后执行的动作。 
  11. vrrp_script chk_nginx { 
  12.  #健康检查脚本,当脚本返回值不为0时认为失败 
  13.  script "/etc/keepalived/ck_ng.sh" 
  14.  #检查频率,以下配置每2秒检查1次 
  15.  interval 2 
  16.  #当检查失败后,将vrrp_instance的priority减小5 
  17.  weight -5 
  18.  #连续监测失败3次,才认为真的健康检查失败。并调整优先级 
  19.  fall 3 
  20.  #连续监测2次成功,就认为成功。但不调整优先级 
  21.  rise 2 
  22.  
  23. #定义对外提供服务的VIP vrrp_instance配置 
  24. vrrp_instance VI_1 { 
  25.  #指定vrrp_instance的初始状态,是MASTER还是BackUP主要还是看优先级。 
  26.  state MASTER 
  27.  #指定vrrp_instance绑定的网卡,最终会通过指定的网卡宣告VIP 
  28.  interface ifcfg-eth0 
  29.  #发送心跳包的源IP,可使用绑定的网卡IP,也可以使用本服务器上的其他IP 
  30.  mcast_src_ip 192.168.1.101 
  31.  #相当于VRID,用于在一个网内区分组播,需要组播域内内唯一。 
  32.  virtual_router_id 55 
  33.  #本机的优先级,VRID相同的机器中,优先级最高的会被选举为MASTER 
  34.  priority 100 
  35.  #心跳间隔,下面配置,MASTER会每隔1秒发送一个报文高职组内其他机器,自己还活着。 
  36.  advert_int 1 
  37.  #定义主从的验证方式以及密码,一般使用PASS(最长8位,超过了只会识别前8位作为密码) 
  38.  authentication { 
  39.  auth_type PASS 
  40.  auth_pass 123456 
  41.  } 
  42.  
  43.  #VIP 虚拟 IP 池, 两个节点设置必须一样  
  44.  virtual_ipaddress { 
  45.                     192.168.1.100/24 
  46.  } 
  47.  
  48.  #本vrrp_instance所引用的脚本配置,名称就是vrrp_script 定义的容器名 
  49.  track_script { 
  50.  chk_nginx 
  51.  } 
  52.   
  53.  #状态切换,使用上述配置发送邮件通知 
  54.  smtp_alert 

ck_ng.sh配置

 

高可用、负载均衡 集群部署方案:Keepalived + Nginx + Tomcat

 

keepalived.service配置

 

高可用、负载均衡 集群部署方案:Keepalived + Nginx + Tomcat

 

nginx.service配置

 

高可用、负载均衡 集群部署方案:Keepalived + Nginx + Tomcat

 

3.2、BACKUP配置

keepalived.conf配置(和MASTER类似,列出差异的地方)

  1. global_defs { 
  2.         router_id 192.168.1.102 
  3.  
  4. #定义对外提供服务的VIP vrrp_instance配置 
  5. vrrp_instance VI_1 { 
  6.  #指定vrrp_instance的初始状态,是MASTER还是BackUP主要还是看优先级。 
  7.  state BACKUP 
  8.  #发送心跳包的源IP,可使用绑定的网卡IP,也可以使用本服务器上的其他IP 
  9.  mcast_src_ip 192.168.1.102 
  10.  #本机的优先级,VRID相同的机器中,优先级最高的会被选举为MASTER 
  11.  priority 99 
  12. }  

ck_ng.sh配置(和MASTER一致)

keepalived.service配置(和MASTER一致)

nginx.service配置(和MASTER一致)

3.3、Tomcat服务通过反向代理Nginx对外提供服务

Tomcat的安装和应用部署不再具体描述,主要看一下如何通过Nginx的配置实现对外服务(两个Nginx都通过这样的配置来完成)

nginx.conf配置

  1. # upstream configure  
  2. upstream myapp { 
  3.  ip_hash; 
  4.  server 192.168.1.101:8080; #Tomcat的应用 
  5.  server 192.168.1.102:8080; #Tomcat的应用 
  6.  
  7. server 
  8.  { 
  9.  listen 8888; #假设对外提供的服务端口 
  10.  server_name localhost; 
  11.  port_in_redirect on
  12.   
  13.  location /app1 #Tomcat下的一个应用 
  14.  { 
  15.  proxy_pass http://myapp/app1; 
  16.  proxy_http_version 1.1; 
  17.  proxy_set_header Upgrade $http_upgrade; 
  18.  proxy_set_header Connection "upgrade"
  19.  
  20.  proxy_set_header Host $host:$server_port; 
  21.  proxy_set_header X-Real-IP $remote_addr; 
  22.  proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; 
  23.  } 
  24.  
  25.  location /app2 #Tomcat下的另外一个应用 
  26.  { 
  27.  proxy_pass http://myapp/app2; 
  28.  proxy_http_version 1.1; 
  29.  proxy_set_header Upgrade $http_upgrade; 
  30.  proxy_set_header Connection "upgrade"
  31.  
  32.  proxy_set_header Host $host:$server_port; 
  33.  proxy_set_header X-Real-IP $remote_addr; 
  34.  proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; 
  35.  } 
  36.  
  37.  location / 
  38.  { 
  39.  proxy_pass http://myapp; 
  40.  proxy_http_version 1.1; 
  41.  proxy_set_header Upgrade $http_upgrade; 
  42.  proxy_set_header Connection "upgrade"
  43.  
  44.  proxy_set_header Host $host:$server_port; 
  45.  proxy_set_header X-Real-IP $remote_addr; 
  46.  proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; 
  47.  } 
  48.  } 

通过以上的搭建,可以实现高可用、负载均衡 集群部署方案。

责任编辑:武晓燕 来源: 今日头条
相关推荐

2019-07-02 08:38:45

NginxTomcatKeepalived

2023-10-13 18:57:22

2012-02-15 00:01:34

2014-05-30 13:35:21

MySQL Clust架构

2019-10-09 16:02:16

NginxKeepalivedLvs

2018-08-24 08:51:10

haproxykeepalived均衡器

2023-05-15 08:20:56

2014-05-15 09:54:40

heartbeatlvs集群

2012-04-02 15:43:45

nginxtomcat

2023-01-10 08:37:45

Docker开发架构

2014-07-28 11:37:49

NginxTomcat

2014-05-08 14:58:42

高可用集群负载均衡集群

2019-03-25 09:49:27

Nginx负载均衡高可用性

2010-06-21 14:37:18

2012-02-14 10:10:35

NginxKeepalived负载均衡

2015-04-13 09:44:14

Nginxkeepalived负载均衡

2018-10-14 08:39:52

NginxTomcat服务器

2023-11-07 07:30:18

Hadoop高可用

2019-11-12 13:56:15

NginxTomcat负载均衡

2023-11-09 07:58:50

点赞
收藏

51CTO技术栈公众号