<六>rabbitmq高可用集群

集群搭建

RabbitMQ的集群节点包括内存节点、磁盘节点。内存节点将所有的队列,交换器,绑定关系,用户,权限,和
vhost的元数据信息保存在内存中。磁盘节点将这些信息保存在磁盘中,但是内存节点的性能更高,为了保证集群
的高可用性,必须保证集群中有两个以上的磁盘节点,来保证当有一个磁盘节点崩溃了,集群还能对外提供访问服
务. 所以最合适的方案就是既有多内存节点,又有双磁盘节点。

rabbitmq 集群搭建

主备模式
实现RabbitMQ的高可用集群,一般在并发和数据量不高的情况下,这种模式非常的好且简单。主备模式也称
为Warren模式
主备模式:就是warren(兔子窝)模式,就是一个主/备方案(主节点如果挂了,从节点提供服务而已,和
activemq利用zookeeper做主/备一样)
image.png
HAProxy是一个使用C语言编写的自由及开放源代码软件,其提供高可用性、负载均衡,以及基TCP和HTTP
的应用程序代理。
HAProxy特别适用于那些负载特大的web站点, 完全可以支持数以万计的并发连接.同时可以保护web服务器不
被暴露到网络上。

  1. 远程模式
    远程模式:远距离通信和复制,所谓Shovel就是我们可以把消息进行不同数据中心的复制工作,我们可以跨
    地域的让两个MQ集群互联。 分摊服务器压力,并且在使用了shovel插件后,模型变成了 近端同步确认 , 远端 异步确认 方式,大大提高了消息确认速度,并且还能保证可靠性。
    image.png
    image.png
    镜像模式(常用)
    镜像模式:集群模式非常经典的就是Mirror镜像模式,保证100%数据不丢失,在实际工作中用的最多
    的。并且实现集群非常的简单,一般互联网大厂都会构建这种镜像集群模式。
    Mirror镜像队列,目的是为了保证rabbitmq数据的高可靠性解决方案,主要就是实现数据的同步,一般
    来讲是2-3个实现数据同步(对于100%数据可靠性解决方案一般是3个节点)集群架构如下:
    image.png
    Keepalived的作用是检测服务器的状态,如果有一台web服务器宕机,或工作出现故障,Keepalived将
    检测到,并将有故障的服务器从系统中剔除,同时使用其他服务器代替该服务器的工作,当服务器工作
    正常后Keepalived自动将服务器加入到服务器群中,这些工作全部自动完成,不需要人工干涉,需要人
    工做的只是修复故障的服务器。
  2. 多活模式
    多活模式:这种模式也是实现异地数据复制的主流模式,因为Shovel模式配置比较复杂,所以一般来说
    实现异地集群都是使用双活或者多活模式来实现的。这种模式需要依赖rabbitmq的federation插件,可
    以实现继续的可靠AMQP数据通信,多活模式在实际配置与应用非常的简单。
    RabbitMQ部署架构采用双中心模式(多中心),那么在两套(或多套)数据中心中各部署一套
    RabbitMQ集群,各中心之间还需要实现队列消息共享。多活集群架构如下
    image.png
    image.png
    image.png
    image.png
    image.png
    实际操作的三台rabbitmq服务器的ip
    192.168.200.140
    192.168.200.141
    192.168.200.142

    镜像队列

    image.png
    image.png
    image.png
    image.png
    image.png
    image.png
    image.png
    image.png

Haproxy负载代理

使用haproxy做负载均衡的代理
image.png
更正为
192.168.25.125(192.168.200.143)
192.168.25.126(192.168.200.144)
安装haproxy

yum install haproxy

编辑配置文件

vim /etc/haproxy/haproxy.cfg

修改配置文件,添加以下内容

#配置haproxy mq监控 
listen rabbitmq_local_cluster 0.0.0.0:5672 
#配置TCP模式 
    mode tcp
    option tcplog
    #简单的轮询
    balance roundrobin
    #rabbitmq集群节点配置 
    server rabbit1 192.168.200.140:5672 check inter 5000 rise 2 fall 2
    server rabbit2 192.168.200.141:5672 check inter 5000 rise 2 fall 2
    server rabbit3 192.168.200.142:5672 check inter 5000 rise 2 fall 2 
#配置haproxy web监控,查看统计信息
listen private_monitoring :8100
    mode http
    option httplog
    stats enable
    #设置haproxy监控地址为http://IP:8100/stats
    stats uri /stats
    stats refresh 30s
    #添加用户名密码认证
    stats auth admin:1234
#配置haproxy mqweb监控,查看管理控制台
listen rabbitmq_web_local_cluster 0.0.0.0:15672
    #配置HTTP模式
    mode http
    option httplog
    #简单的轮询 
    balance roundrobin
    #rabbitmq集群节点配置
    server web_rabbit1 192.168.200.140:15672 check inter 5000 rise 2 fall 2
    server web_rabbit2 192.168.200.141:15672 check inter 5000 rise 2 fall 2
    server web_rabbit3 192.168.200.142:15672 check inter 5000 rise 2 fall 2

启动

haproxy -f /etc/haproxy/haproxy.cfg

启动成功以后访问不了请关闭防火墙

systemctl stop firewalld.service

keepalived检测

安装keepalived

yum install keepalived

打开配置文件

vi /etc/keepalived/keepalived.conf

完成主备机的切换
主文件配置
覆盖keepalived.conf

! Configuration File for keepalived
# 全局配置,配置收件人
global_defs { 
    notification_email { 
        ##通知机制,收件人
        464164213@qq.com 
    }
    notification_email_from keepalived@domain.com ####发件人
    smtp_server 192.168.200.143 ##发件服务器
    smtp_connect_timeout 30 ##服务器连接超时时间
    router_id LVS_DEVEL ##路由器标志
}
# 集群资源监控,组合track_script进行
vrrp_script check_haproxy { 
    script "killall -0 haproxy"
    interval 2
}
vrrp_instance HAPROXY_HA { 
    # 设置当前主机为主节点,如果是备用节点,则设置为BACKUP
    # 备用节点时,设置为: 
    # state BACKUP
    state MASTER 
    # 指定HA监测网络接口,可以用ifconfig查看来决定设置哪一个
    interface ens33
    # 虚拟路由标识,同一个VRRP实例要使用同一个标识,主备机
    virtual_router_id 80
    # 因为当前环境中VRRP组播有问题,改为使用单播发送VRRP报文
    # 这个地方需要关注,之前未做此设置,结果主备节点互相不能发现,因此主备节点都升级成了 MASTER,并且绑定了VIP
    # 主节点时,内容为: 
    unicast_src_ip 192.168.200.143 
        unicast_peer { 
        192.168.200.144
    }
    # 备节点时,内容为: 
    #unicast_src_ip 192.168.200.144
    #unicast_peer { 
        #192.168.20.143 
    #}
    # 设置优先级,确保主节点的优先级高过备用节点
    # 主节点时,设置为:
    priority 100 
    # 备节点时,设置为:
    #priority 80
    # 用于设定主备节点间同步检查时间间隔
    advert_int 2
    # 设置高可用集群中不抢占功能,在主机down后,从机接管,当主机重新恢复后,设置此功能,备 机将继续提供服务,从而避免因切换导致的隐患
    nopreempt
    # 设置主备节点间的通信验证类型及密码,同一个VRRP实例中需一致
    authentication { 
        auth_type PASS
        auth_pass 1234
    }
    #下面这些脚本都是写入日志,需要的话可以打开,自己写一个shell
    # 当keepalived切换状态到MASTER时,执行脚本
    #notify_master "/etc/keepalived/master.sh"
    # 当keepalived切换状态到BACKUP时,执行脚本
    #notify_backup "/etc/keepalived/backup.sh"
    # 当keepalived切换状态到FAULT时,执行脚本
    #notify_fault "/etc/keepalived/fault.sh"
    # 当keepalived切换状态到STOP时,执行脚本 #notify_fault "/etc/keepalived/stop.sh"
    # 集群资源监控,组合vrrp_script进行
    track_script { 
        check_haproxy
    }
    # 设置虚拟IP地址,当keepalived状态切换为MASTER时,此IP会自动添加到系统中
    # 当状态切换到BACKUP时,此IP会自动从系统中删除
    # 可以通过命令ip add查看切换后的状态
    virtual_ipaddress { 
        192.168.200.145 #虚拟ip配置完之后就用它访问 
    } 
}

备用机配置

! Configuration File for keepalived
# 全局配置,配置收件人
global_defs { 
    notification_email { 
        ##通知机制,收件人
        464164213@qq.com 
    }
    notification_email_from keepalived@domain.com ####发件人
    smtp_server 192.168.200.144 ##发件服务器
    smtp_connect_timeout 30 ##服务器连接超时时间
    router_id LVS_DEVEL ##路由器标志
}
# 集群资源监控,组合track_script进行
vrrp_script check_haproxy { 
    script "killall -0 haproxy"
    interval 2
}
vrrp_instance HAPROXY_HA { 
    # 设置当前主机为主节点,如果是备用节点,则设置为BACKUP
    # 备用节点时,设置为: 
    state BACKUP
    # 指定HA监测网络接口,可以用ifconfig查看来决定设置哪一个
    interface ens33
    # 虚拟路由标识,同一个VRRP实例要使用同一个标识,主备机
    virtual_router_id 80
    # 因为当前环境中VRRP组播有问题,改为使用单播发送VRRP报文
    # 这个地方需要关注,之前未做此设置,结果主备节点互相不能发现,因此主备节点都升级成了 MASTER,并且绑定了VIP
    # 备节点时,内容为: 
    unicast_src_ip 192.168.200.144
        unicast_peer { 
            192.168.20.143 
        }
    # 设置优先级,确保主节点的优先级高过备用节点
    # 备节点时,设置为:
    priority 80
    # 用于设定主备节点间同步检查时间间隔
    advert_int 2
    # 设置高可用集群中不抢占功能,在主机down后,从机接管,当主机重新恢复后,设置此功能,备 机将继续提供服务,从而避免因切换导致的隐患
    nopreempt
    # 设置主备节点间的通信验证类型及密码,同一个VRRP实例中需一致
    authentication { 
        auth_type PASS
        auth_pass 1234
    }
    #下面这些脚本都是写入日志,需要的话可以打开,自己写一个shell
    # 当keepalived切换状态到MASTER时,执行脚本
    #notify_master "/etc/keepalived/master.sh"
    # 当keepalived切换状态到BACKUP时,执行脚本
    #notify_backup "/etc/keepalived/backup.sh"
    # 当keepalived切换状态到FAULT时,执行脚本
    #notify_fault "/etc/keepalived/fault.sh"
    # 当keepalived切换状态到STOP时,执行脚本 #notify_fault "/etc/keepalived/stop.sh"
    # 集群资源监控,组合vrrp_script进行
    track_script { 
        check_haproxy
    }
    # 设置虚拟IP地址,当keepalived状态切换为MASTER时,此IP会自动添加到系统中
    # 当状态切换到BACKUP时,此IP会自动从系统中删除
    # 可以通过命令ip add查看切换后的状态
    virtual_ipaddress { 
        192.168.200.145 #虚拟ip配置完之后就用它访问 
    } 
}

启动

systemctl start keepalived.service

查看是否启动成功

ps -ef | grep keepalived

在主节点上查查看网卡
image.png
在备用机节点找不到虚拟的ip
然后访问192.168.200:145:8100/stats admin 1234
192.168.200:145:15672
关闭主节点
查看备用机的网卡发现虚拟ip
此时做到了ip漂移到备用节点
image.png

评论

暂无评论