首页    技术博客    PHP教程    数据库技术    前端开发   HTML5    Nginx    php论坛
新用户注册 | 会员登录
加入会员，解锁专属内容
取消
热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

Linux–LVS+Keepalived群集

作者：青枫望 | 来源：互联网 | 2023-08-09 22:34
LVS+Keepalived群集一、Keepalived实现原理1.单服务器的风险企业应用中，单台服务器承担应用存在单点故障的危险，单点故障一旦发生，企业服务将发生中断，造成极大的

LVS+Keepalived群集

一、Keepalived实现原理

1. 单服务器的风险

企业应用中，单台服务器承担应用存在单点故障的危险，单点故障一旦发生，企业服务将发生中断，造成极大的危害和损失。

2. Keepalived工具

Keepalived是一个基于VRRP协议来实现的LVS服务高可用方案，可以解决静态路由出现的单点故障问题。是专为LVS和HA设计的一款健康检查工具
· 支持故障自动切换（Failover）
· 支持节点健康状态检查(Health Checking)
判断LVS负载调度器、节点服务器的可用性，当master主机出现故障及时切换到backup节点保证业务正常，当master故障主机恢复后将其重新加入群集并且业务重新切换回master节点
· 官方网站：http://www.keepalived.org/

3. Keepalived解决单点故障的方法

在一个LVS服务集群中通常有主服务器（master）和备份服务器（backup）两种角色的服务器，但是对外表现为一个虚拟IP，主服务器会发送VRRP通告信息给备份服务器，当备份服务器收不到VRRP消息的时候，即主服务器异常的时候，备份服务器就会接管虚拟IP，继续提供服务，从而保证了高可用性。

4. Keepalived体系主要模块及其作用
























Keepalived的主要模块


作用


core模块


为Keepalived的核心，负责主进程的启动、维护及全局配置文件的加载和解析


vrrp模块


是来实现VRRP协议的


check模块


负责健康检查，常见的方式有端口检查及URL检查


5. 企业集群的特点

一般企业集群需要满足的三个特点

1.负载均衡

2.健康检查

3.故障切换

6. 健康检查的作用




















检查服务器


作用


节点服务器


如果发现有故障的节点就会将其隔离或者剔除集群，待其恢复后再重新加入到集群当中


负载均衡器


会定时检查主服务器的状态（包括主机和服务的状态），如果主服务器故障就自动切换到备服务器上，待主服务器恢复后再重新让主服务器去承载业务请求


7. Keeoalved实现原理

Keepalived采用VRRP热备份协议，实现Linux服务器的多机热备功能

VRRP（虚拟路由冗余协议）是针对路由器的一种备份解决方案
· 由多台路由器组成一个热备组，通过共用的虚拟IP地址对外提供服务
· 每个热备组内同时只有一台主路由器提供服务，其他路由器处于冗余状态
· 若当前在线的路由器失效，则其他路由器会根据设置的优先级自动接替虚拟IP地址，继续提供服务

8. VRRP虚拟路由冗余协议

可以实现一主多备的功能，从而解决单点故障
VRRP会把多台路由器组成一个虚拟路由器vrid，VRRP会生成一个虚拟路由器（包含虚拟IP和虚拟mac）
局域网内的用户不关心哪个是主、哪个是备，它们只用虚拟路由器的虚拟IP作为他们的网关
虚拟IP是承载在master路由器上的，也就是说实际的数据包是通过master进行转发的
master和backup是通过优先级来决定的，优先级最大的那台就是master
backup只是用来监听master定时发来的vrrp报文，如果超时未收到发来的vrrp报文，backup就会抢占master的地位，虚拟IP也会一起漂移到backup上

9. 多机热备

Keepalived可实现多机热备，每个热备组可有多台服务器

双机热备的故障切换是由虚拟IP地址的漂移来实现的，适用于各种因那个用服务器。
如图所示，实现基于Web的双机热备
漂移地址：192.168.10.72
主、备服务器：192.168.10.73/192.168.10.74
提供的应用服务：Web

二、LVS+Keepalived高可用群集的部署

1. 服务器及IP配置

主DR服务器：192.168.10.2

备DR服务器：192.168.10.3

Web服务器1：192.168.10.4

Web服务器2：192.168.10.5

VIP：192.168.10.88

客户端：192.168.10.1

各个服务器的环境

systemctl stop firewalld

setenforce 0

setenforce: SELinux is disabled

2. Keepalived安装与启动

(1)配置负载调度器

1.主负载调度器（192.168.10.2）

[root@master ~]# yum install -y ipvsadm keepalived

[root@master ~]# modprobe ip_vs

[root@master ~]# cd /etc/keepalived

[root@master keepalived]# cp keepalived.conf keepalived.conf.bak

[root@master keepalived]# vim keepalived.conf

10 smtp_server 127.0.0.1

第10行，修改，邮件服务指向本地

12 router_id LVS_01

第12行，修改，指定服务器（路由器）的名称，主备服务器须不同，这里主设置为LVS_01，备为LVS_02

14 #vrrp_strict

第14行，注释掉，取消严格遵守VRRP协议功能，否则VIP无法被连接

19 vrrp_instance VI_1 {

定义VRRP热备实例参数

20 state MASTER

第20行，修改，指定热备状态，主为MASTER，备为BACKUP

21 interface ens34

第21行，修改，指定承载VIP地址的物理接口

22 virtual_router_id 10

第22行，修改，指定虚拟路由器的ID号，每个热备组保持一致

#nopreempt

##默认为抢占模式，如果设置非抢占模式，主备都必须加上配置nopreempt

23 priority 100

第23行，修改，指定优先级，数值越大优先级越高，这里设置主为100，备为90

24 advert_int 1

通告间隔秒数（心跳频率）

25 authentication {

定义认证信息，每个热备组保持一致

26 auth_type PASS

认证类型

27 auth_pass 123456

第27行，修改，指定验证密码，主备服务器保持一致

28 }

29 virtual_ipaddress {

指定群集VIP地址

30 192.168.10.88

31 }

32 }

34 virtual_server 192.168.10.88 80 {

第36行，修改，指定虚拟服务器地址（VIP）、端口，定义虚拟服务器和Web服务器池参数

35 delay_loop 6

健康检查的间隔时间，单位为秒

36 lb_algo rr

指定调度算法，轮询（rr）

37 lb_kind DR

第39行，修改，指定群集工作模式，这里默认是NAT，修改为直接路由模式（DR）

38 persistence_timeout 50

连接保持时间，单位为秒

39 protocol TCP

应用服务采用的是TCP协议

40

41 real_server 192.168.10.4 80 {

第43行，修改，指定第一个Web节点的地址、端口

42 weight 1

43 TCP_CHECK {

第45行，删除默认定义并添加以下健康检查方式

44 connect_port 80

添加检查的目标端口

45 connect_timeout 3

添加连接超时时间，单位为秒

46 nb_get_retry 3

添加重试次数

47 delay_before_retry 3

添加重试间隔

48 }

49 }

50 real_server 192.168.10.5 80 {

51 weight 1

52 TCP_CHECK {

53 connect_port 80

54 connect_timeout 3

55 nb_get_retry 3

56 delay_before_retry 3

57 }

58 }

59 }

[root@master keepalived]# systemctl start keepalived

[root@master keepalived]# ip addr show dev ens34

3: ens34: mtu 1500 qdisc pfifo_fast state UP qlen 1000

link/ether 00:0c:29:6c:be:4c brd ff:ff:ff:ff:ff:ff

inet 192.168.10.2/24 brd 192.168.10.255 scope global ens34

valid_lft forever preferred_lft forever

inet 192.168.10.88/32 scope global ens34

valid_lft forever preferred_lft forever

inet6 fe80::1918:9ff4:831d:946a/64 scope link

valid_lft forever preferred_lft forever







2.备负载调度器（192.168.10.3）

[root@backup ~]# yum install -y ipvsadm keepalived

[root@backup ~]# modprobe ip_vs

[root@backup ~]# cd /etc/keepalived

[root@backup keepalived]# cp keepalived.conf keepalived.conf.bak

[root@backup keepalived]# vim keepalived.conf

10 smtp_server 127.0.0.1

第10行，修改，邮件服务指向本地

12 router_id LVS_02

第12行，修改，指定服务器（路由器）的名称，主备服务器须不同，这里主设置为LVS_01，备为LVS_02

14 #vrrp_strict

第14行，注释掉，取消严格遵守VRRP协议功能，否则VIP无法被连接

19 vrrp_instance VI_1 {

定义VRRP热备实例参数

20 state BACKUP

第20行，修改，指定热备状态，主为MASTER，备为BACKUP

21 interface ens34

第21行，修改，指定承载VIP地址的物理接口

22 virtual_router_id 10

第22行，修改，指定虚拟路由器的ID号，每个热备组保持一致

#nopreempt

##默认为抢占模式，如果设置非抢占模式，主备都必须加上配置nopreempt

23 priority 90

第23行，修改，指定优先级，数值越大优先级越高，这里设置主为100，备为90

24 advert_int 1

通告间隔秒数（心跳频率）

25 authentication {

定义认证信息，每个热备组保持一致

26 auth_type PASS

认证类型

27 auth_pass 123456

第27行，修改，指定验证密码，主备服务器保持一致

28 }

29 virtual_ipaddress {

指定群集VIP地址

30 192.168.10.88

31 }

32 }

34 virtual_server 192.168.10.88 80 {

第36行，修改，指定虚拟服务器地址（VIP）、端口，定义虚拟服务器和Web服务器池参数

35 delay_loop 6

健康检查的间隔时间，单位为秒

36 lb_algo rr

指定调度算法，轮询（rr）

37 lb_kind DR

第39行，修改，指定群集工作模式，这里默认是NAT，修改为直接路由模式（DR）

38 persistence_timeout 50

连接保持时间，单位为秒

39 protocol TCP

应用服务采用的是TCP协议

40

41 real_server 192.168.10.4 80 {

第43行，修改，指定第一个Web节点的地址、端口

42 weight 1

43 TCP_CHECK {

第45行，删除默认定义并添加以下健康检查方式

44 connect_port 80

添加检查的目标端口

45 connect_timeout 3

添加连接超时时间，单位为秒

46 nb_get_retry 3

添加重试次数

47 delay_before_retry 3

添加重试间隔

48 }

49 }

50 real_server 192.168.10.5 80 {

51 weight 1

52 TCP_CHECK {

53 connect_port 80

54 connect_timeout 3

55 nb_get_retry 3

56 delay_before_retry 3

57 }

58 }

59 }

因为主服务器仍然在线，VIP地址实际上仍然由主服务器控制，其他服务器处于备用状态，因此在备用服务器中将不会为ens34添加VIP地址

[root@backup keepalived]# systemctl start keepalived

[root@backup keepalived]# ip addr show dev ens34

3: ens34: mtu 1500 qdisc pfifo_fast state UP qlen 1000

link/ether 00:0c:29:a3:89:96 brd ff:ff:ff:ff:ff:ff

inet 192.168.10.3/24 brd 192.168.10.255 scope global ens34

valid_lft forever preferred_lft forever

inet6 fe80::e65e:1a75:6df7:81b9/64 scope link

valid_lft forever preferred_lft forever













测试keepalived有多方法，一种是直接测试IP地址，一种是查看日志记录，这里我们用IP地址，一种是ping -t VIP地址

将主服务器的Keepalived关闭，查看从服务器的IP地址

[root@master keepalived]# systemctl stop keepalived

[root@master keepalived]# ip addr show dev ens34

3: ens34: mtu 1500 qdisc pfifo_fast state UP qlen 1000

link/ether 00:0c:29:6c:be:4c brd ff:ff:ff:ff:ff:ff

inet 192.168.10.2/24 brd 192.168.10.255 scope global ens34

valid_lft forever preferred_lft forever

inet6 fe80::1918:9ff4:831d:946a/64 scope link

valid_lft forever preferred_lft forever

[root@backup keepalived]# ip addr show dev ens34

3: ens34: mtu 1500 qdisc pfifo_fast state UP qlen 1000

link/ether 00:0c:29:a3:89:96 brd ff:ff:ff:ff:ff:ff

inet 192.168.10.3/24 brd 192.168.10.255 scope global ens34

valid_lft forever preferred_lft forever

inet 192.168.10.88/32 scope global ens34

valid_lft forever preferred_lft forever

inet6 fe80::e65e:1a75:6df7:81b9/64 scope link

valid_lft forever preferred_lft forever







可以看到，主服务器的VIP无了，从（备份）服务器添加了VIP地址

现在我们将服务器恢复

[root@master keepalived]# systemctl start keepalived

[root@master keepalived]# ip addr show dev ens34

3: ens34: mtu 1500 qdisc pfifo_fast state UP qlen 1000

link/ether 00:0c:29:6c:be:4c brd ff:ff:ff:ff:ff:ff

inet 192.168.10.2/24 brd 192.168.10.255 scope global ens34

valid_lft forever preferred_lft forever

inet 192.168.10.88/32 scope global ens34

valid_lft forever preferred_lft forever

inet6 fe80::1918:9ff4:831d:946a/64 scope link

valid_lft forever preferred_lft forever

[root@backup keepalived]# ip addr show dev ens34

3: ens34: mtu 1500 qdisc pfifo_fast state UP qlen 1000

link/ether 00:0c:29:a3:89:96 brd ff:ff:ff:ff:ff:ff

inet 192.168.10.3/24 brd 192.168.10.255 scope global ens34

valid_lft forever preferred_lft forever

inet6 fe80::e65e:1a75:6df7:81b9/64 scope link

valid_lft forever preferred_lft forever







(2)启动ipvsadm服务

1.主负载调度器（192.168.10.2）

[root@master ~]# ipvsadm-save > /etc/sysconfig/ipvsadm

[root@master ~]# systemctl start ipvsadm

[root@master ~]# systemctl restart keepalived

[root@master ~]# ipvsadm -ln

IP Virtual Server version 1.2.1 (size=4096)

Prot LocalAddress:Port Scheduler Flags

-> RemoteAddress:Port Forward Weight ActiveConn InActConn

TCP 192.168.10.88:80 rr persistent 50

-> 192.168.10.4:80 Route 1 0 0

-> 192.168.10.5:80 Route 1 0 0

TCP 192.168.42.149:80 rr persistent 50


把后面的web配置好之后，就是这样的


2.备负载调度器（192.168.10.3）



把后面的web配置好之后，就是这样的



(3)调整proc响应参数，关闭Linux内核的重定向参数响应

1.主负载调度器（192.168.10.2）

[root@master ~]# vim /etc/sysctl.conf

#末行写入

net.ipv4.conf.all.send_redirects = 0

net.ipv4.conf.default.send_redirects = 0

net.ipv4.conf.ens33.send_redirects = 0


 

[root@master ~]# sysctl -p

net.ipv4.conf.all.send_redirects = 0

net.ipv4.conf.default.send_redirects = 0

net.ipv4.conf.ens33.send_redirects = 0




2.备负载调度器（192.168.10.3）

[root@backup ~]# vim /etc/sysctl.conf

#末行写入

net.ipv4.conf.all.send_redirects = 0

net.ipv4.conf.default.send_redirects = 0

net.ipv4.conf.ens33.send_redirects = 0


 

[root@backup ~]# sysctl -p

net.ipv4.conf.all.send_redirects = 0

net.ipv4.conf.default.send_redirects = 0

net.ipv4.conf.ens33.send_redirects = 0







3. 配置节点服务器

1.web_server1（192.168.10.4）

[root@web_server1 ~]# yum install -y httpd

[root@web_server1 ~]# systemctl start httpd

[root@web_server1 ~]# echo "this is test1 web" > /var/www/html/index.html

[root@web_server1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-lo:0

DEVICE=lo:0

OnBOOT=yes

IPADDR=192.168.10.88

NETMASK=255.255.255.255

[root@web_server1 ~]# systemctl restart network

[root@web_server1 ~]# route add -host 192.168.10.88 dev lo:0

[root@web_server1 ~]# vim /etc/sysctl.conf

net.ipv4.conf.lo.arp_ignore = 1

net.ipv4.conf.lo.arp_announce = 2

net.ipv4.conf.all.arp_ignore = 1

net.ipv4.conf.all.arp_announce = 2

[root@web_server1 ~]# sysctl -p

net.ipv4.conf.lo.arp_ignore = 1

net.ipv4.conf.lo.arp_announce = 2

net.ipv4.conf.all.arp_ignore = 1

net.ipv4.conf.all.arp_announce = 2











2.web_server2（192.168.10.5）

[root@web_server2 ~]# yum install -y httpd

[root@web_server2 ~]# systemctl start httpd

[root@web_server2 ~]# echo "this is test2 web" > /var/www/html/index.html

[root@web_server2 ~]# vim /etc/sysconfig/network-scripts/ifcfg-lo:0

DEVICE=lo:0

OnBOOT=yes

IPADDR=192.168.10.88

NETMASK=255.255.255.255

[root@web_server2 ~]# systemctl restart network

[root@web_server2 ~]# route add -host 192.168.10.88 dev lo:0

[root@web_server2 ~]# vim /etc/sysctl.conf

net.ipv4.conf.lo.arp_ignore = 1

net.ipv4.conf.lo.arp_announce = 2

net.ipv4.conf.all.arp_ignore = 1

net.ipv4.conf.all.arp_announce = 2

[root@web_server2 ~]# sysctl -p

net.ipv4.conf.lo.arp_ignore = 1

net.ipv4.conf.lo.arp_announce = 2

net.ipv4.conf.all.arp_ignore = 1

net.ipv4.conf.all.arp_announce = 2





















4. 浏览器访问测试

1.在客户端访问http://192.168.10.88



2.再在主服务器关闭keepalived服务(systemctl stop keepalived)后再测试



如果刷了很久都没刷到1，那么强制把2关了，界面会自动调整



高可用和负载均衡不同，高可用是高可靠性，而负载均衡是连接数保持持平


在主服务器关闭keepalived服务的过程中，从服务器的日志文件也发生了变化，先从BACKUP变成MASTER，待主服务器恢复后，状态又变回BACKUP

以下是从MASTER变回BACKUP



原文链接：https://www.cnblogs.com/wang-a/p/15964573.html



推荐阅读
  • web

    k8s+springboot+Eureka如何平滑上下线服务

    k8s+springboot+Eureka如何平滑上下线服务
    k8s+springboot+Eureka如何平滑上下线服务目录服务平滑上下线-k8s版本目录“上篇介绍了springboot+Euraka服务平滑上下线的方式，有部分小伙伴反馈k ... [详细]
  • stream

    Python高级之网络编程及TCP/IP协议簇的OSI七层模型介绍

    本文介绍了Python高级网络编程及TCP/IP协议簇的OSI七层模型。首先简单介绍了七层模型的各层及其封装解封装过程。然后讨论了程序开发中涉及到的网络通信内容，主要包括TCP协议、UDP协议和IPV4协议。最后还介绍了socket编程、聊天socket实现、远程执行命令、上传文件、socketserver及其源码分析等相关内容。 ... [详细]
  • stream

    每天收获一点点Hadoop概述

    一、Hadoop来历Hadoop的思想来源于Google在做搜索引擎的时候出现一个很大的问题就是这么多网页我如何才能以最快的速度来搜索到，由于这个问题Google发明 ... [详细]
  • web

    利用RxJava实现的事件总线（Event Bus）及其使用方法介绍

    本文介绍了RxJava在Android开发中的广泛应用以及其在事件总线（Event Bus）实现中的使用方法。RxJava是一种基于观察者模式的异步java库，可以提高开发效率、降低维护成本。通过RxJava，开发者可以实现事件的异步处理和链式操作。对于已经具备RxJava基础的开发者来说，本文将详细介绍如何利用RxJava实现事件总线，并提供了使用建议。 ... [详细]
  • web

    Activiti7流程定义开发笔记

    Activiti7流程定义开发笔记
    本文介绍了Activiti7流程定义的开发笔记，包括流程定义的概念、使用activiti-explorer和activiti-eclipse-designer进行建模的方式，以及生成流程图的方法。还介绍了流程定义部署的概念和步骤，包括将bpmn和png文件添加部署到activiti数据库中的方法，以及使用ZIP包进行部署的方式。同时还提到了activiti.cfg.xml文件的作用。 ... [详细]
  • web

    Wince程序内存和存储内存的分析及作用

    本文分析了Wince程序内存和存储内存的分布及作用。Wince内存包括系统内存、对象存储和程序内存，其中系统内存占用了一部分SDRAM，而剩下的30M为程序内存和存储内存。对象存储是嵌入式wince操作系统中的一个新概念，常用于消费电子设备中。此外，文章还介绍了主电源和后备电池在操作系统中的作用。 ... [详细]
  • range

    Python基础篇：315道题目及答案整理，帮助你检验学习成果

    本文整理了315道Python基础题目及答案，帮助读者检验学习成果。文章介绍了学习Python的途径、Python与其他编程语言的对比、解释型和编译型编程语言的简述、Python解释器的种类和特点、位和字节的关系、以及至少5个PEP8规范。对于想要检验自己学习成果的读者，这些题目将是一个不错的选择。请注意，答案在视频中，本文不提供答案。 ... [详细]
  • char

    GTK+浅谈之十五GObject面向对象的继承

    本文介绍了GTK+中的GObject对象系统，该系统是基于GLib和C语言完成的面向对象的框架，提供了灵活、可扩展且易于映射到其他语言的特性。其中最重要的是GType，它是GLib运行时类型认证和管理系统的基础，通过注册和管理基本数据类型、用户定义对象和界面类型来实现对象的继承。文章详细解释了GObject系统中对象的三个部分：唯一的ID标识、类结构和实例结构。 ... [详细]
  • char

    5个基本Linux命令行工具的现代化替代品

    本文介绍了5个基本Linux命令行工具的现代化替代品，包括du、top和ncdu。这些替代品在功能上进行了改进，提高了可用性，并且适用于现代化系统。其中，ncdu是du的替代品，它提供了与du类似的结果，但在一个基于curses的交互式界面中，重点关注占用磁盘空间较多的目录。 ... [详细]
  • char

    iOS开发中的内存泄漏检测和解决方法，以及最能挣钱的行业和选行业技巧

    本文介绍了iOS开发中检测和解决内存泄漏的方法，包括静态分析、使用instruments检查内存泄漏以及代码测试等。同时还介绍了最能挣钱的行业，包括互联网行业、娱乐行业、教育行业、智能行业和老年服务行业，并提供了选行业的技巧。 ... [详细]
  • stream

    POCO C++ Libraies介绍及常见用法

    POCOCLibraies属于功能广泛、轻量级别的开源框架库，它拥有媲美Boost库的功能以及较小的体积广泛应用在物联网平台、工业自动化等领域。POCOCLibrai ... [详细]
  • stream

    （九）Docker常用安装

    （九）Docker常用安装
    一、总体步骤1、搜索镜像2、拉取镜像3、查看镜像4、启动镜像5、停止镜像6、移除镜像二、安装tomcat1、dockerhub上面查找tomcat镜像 dockersearchto ... [详细]
  • stream

    linux resin日志,linux resin 基本站点配置

    进入配置文件目录：[rootlinuxidcresin-4.0.]#cdusrlocalresinconf查看都有哪些配置文件：[rootlinuxid ... [详细]
  • stream

    开发笔记:SpringCloud Ribbon 部分源码

    篇首语：本文由编程笔记#小编为大家整理，主要介绍了SpringCloudRibbon部分源码相关的知识，希望对你有一定的参考价值。1：ribbon是提供通过servi ... [详细]
  • char

    MySQL5.6.40在CentOS7 64下安装过程

    MySQL5.6.40在CentOS764下安装过程 ... [详细]
author-avatar
青枫望
这个家伙很懒，什么也没留下！
Tags | 热门标签
RankList | 热门文章
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有