CentOS6.4高可用集群LVS+Keepalived(NAT模式)

  1. 云栖社区>
  2. 博客>
  3. 正文

CentOS6.4高可用集群LVS+Keepalived(NAT模式)

李振良 2016-05-05 17:25:29 浏览4376
展开阅读全文

拓扑图

164538877.jpg

环境概述:

操作系统:

CentOS6.3_x64

负载均衡模式:NAT

VIP:192.168.108.180

公网IP,其余为内网

NVTP:192.168.0.50

LVS-MASTER LVS-BACKUP WEB1 WEB2

eth0:192.168.108.170

eth1:192.168.0.10

eth0:192.168.108.171

eth1:192.168.0.20

eth0:192.168.0.30

网关:192.168.0.50

eth0:192.168.0.40

网关:192.168.0.50

ipvsadm

在负载调度器上使用的LVS群集管理工具,通过调用ip_vs模块来添加、删除服务器节点,以及查看群集的运行状态。

Keepalived 主要实现VRRP功能,用作RealServer的web服务器健康状态以及LoadBalance(负载均衡)主机和BackUP主机之间failover(系统自动主从切换)的实现。

三种LVS模式 DR:直接路由 、Tuning:tcp/ip隧道和NAT:网络地址转换
Web公共存储 可以使用NFS网络文件系统来代替,两台Web同时挂载NFS,过程略...

安装依赖包:

1
[root@localhost ~]# yum install -y gcc gcc-c++ make pcre pcre-devel kernel-devel openssl-devel libnl-devel popt-devel

一、配置主从LVS服务器

1、检查linux内核是否集成lvs模块:modprobe -l | grep ipvs

2、开启路由转发功能:echo "1">/proc/sys/net/ipv4/ip_forward

3、安装ipvsadm

1
2
3
4
wget http://www.linuxvirtualserver.org/software/kernel-2.6/ipvsadm-1.26.tar.gz
tar -zxvf ipvsadm-1.26.tar.gz
cd ipvsadm-1.26
make && make install

在执行make的时候如果出现错误提示:libipvs.h:14:23:error:net/ip_vs.h:No such file ordirectory则添加软连接ln -s /usr/src/kernels/2.6.18-194.el5-x86_64/ /usr/src/linux

4、安装keepalived

1
2
3
4
5
wget http://www.keepalived.org/software/keepalived-1.2.7.tar.gz
tar zxvf keepalived-1.2.7.tar.gz
cd keepalived-1.2.7
./configure --prefix=/usr/local/keepalived
make && make install

将keepalived配置成系统服务 

1
2
3
4
5
cp /usr/local/keepalived/etc/rc.d/init.d/keepalived /etc/init.d/
cp /usr/local/keepalived/etc/sysconfig/keepalived /etc/sysconfig/
mkdir /etc/keepalived/
cp /usr/local/keepalived/etc/keepalived/keepalived.conf /etc/keepalived/
cp /usr/local/keepalived/sbin/keepalived /usr/sbin/

5、修改主keepalived配置文件(备只修改router_id、state和priority)

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
[root@localhost ~]# vi /etc/keepalived/keepalived.conf
! Configuration File for keepalived
global_defs {
notification_email {
test@sina.com #故障接受联系人
}
notification_email_from admin@test.com #故障发送人
smtp_server 127.0.0.1  #本机发送邮件
smtp_connect_timeout 30
router_id LVS_MASTER   #BACKUP上修改为LVS_BACKUP
}
vrrp_instance VI_1 {
state MASTER    #BACKUP上修改为BACKUP
interface eth0
virtual_router_id 51   #虚拟路由标识,主从相同
priority 100    #BACKUP上修改为90
advert_int 1
authentication {
auth_type PASS
auth_pass 1111   #主从认证密码必须一致
}
virtual_ipaddress {  #虚拟IP(VTP)
192.168.108.180
 }
}
vrrp_instance LAN_GATEWAY { #定义内网网关
 state MASTER#BACKUP上修改为BACKUP
 interface eth1
 virtual_router_id 50 #虚拟路由ID,主从相同
 priority 100  #BACKUP上修改为90
 advert_int 1
 authentication {
 auth_type PASS
 auth_pass 1111
 }
 virtual_ipaddress {  #内网网关虚拟IP
 192.168.0.50
 }
}
virtual_server 192.168.0.50 80 { #定义内网网关虚拟IP和端口
delay_loop 6    #检查真实服务器时间,单位秒
lb_algo rr      #设置负载调度算法,rr为轮训
lb_kind NAT     #设置LVS负载均衡NAT模式
persistence_timeout 50 #同一IP的连接60秒内被分配到同一台真实服务器
protocol TCP    #使用TCP协议检查realserver状态
real_server 192.168.0.10 80 {  #第一个网关节点
weight 3          #节点权重值
TCP_CHECK {       #健康检查方式
connect_timeout 3 #连接超时
nb_get_retry 3    #重试次数
delay_before_retry 3  #重试间隔/S
 }
}
real_server 192.168.0.20 80 {  #第二个网关节点
weight 3
TCP_CHECK {
connect_timeout 3
nb_get_retry 3
delay_before_retry 3
  }
 }
}
virtual_server 192.168.108.180 80 { #定义外部虚拟IP
delay_loop 6
lb_algo rr
lb_kind NAT
persistence_timeout 50
protocol TCP
real_server 192.168.0.30 80 {  #第一个web服务器
weight 3
TCP_CHECK {
connect_timeout 3
nb_get_retry 3
delay_before_retry 3
connect_port 80
 }
}
real_server 192.168.0.40 80 {  #第二个web服务器
weight 3
TCP_CHECK {
connect_timeout 3
nb_get_retry 3
delay_before_retry 3
connect_port 80
  }
 }
}
[root@localhost ~]# service keepalived restart #启动keepalived

二、配置两台real-web服务

1、配置两台内网Web服务器网关指向192.168.0.50

2、启动http服务并写入测试页

1
2
3
4
5
[root@localhost ~]# service httpd start
[root@localhost ~]# echo “192.168.0.30″ > /var/www/html/index.html
[root@localhost ~]# echo “192.168.0.40″ > /var/www/html/index.html
[root@localhost ~]# service iptables stop  #关闭防火墙
[root@localhost ~]# setenforce 0  #临时关闭selinux

三、测试及常用命令

http://192.168.108.180#访问一直刷新会轮训显示192.168.0.30/40

模拟宕掉主LVS,服务器照常工作,再宕掉Web1,这时只会显示Web2,这样就实现ip负载均衡,高可用集群。当主LVS恢复后,会切换成主动服务器,如果Keepalived监控模块检测web故障恢复后,恢复的主机又将此节点加入集群系统中

常用命令:

[root@localhost ~]# ipvsadm -ln #显示集群中服务器ip信息

[root@localhost ~]# ip addr #显示VTP绑定在哪个服务器上

[root@localhost ~]# tail -f /var/log/messger

(从日志中可知,主机出现故障后,备机立刻检测到,此时备机变为MASTER角色,并且接管了主机的虚拟IP资源,最后将虚拟IP绑定在etho设备上)


网友评论

登录后评论
0/500
评论
李振良
+ 关注