朝花夕拾 - rabbitmq消息队列

关键词:事务、确认、信道、exchange类型、普通集群、镜像集群

1.事务
rabbitmq支持事务,事务的语句为tx.Select() tx.Commit() tx.Rollback(),事务对吞吐量影响会比较大,如果为了数据安全考虑,可以开启事务,防止消息丢失。

2.确认
有单条消息确认、多条消息确认和异步确认机制。确认也是为了避免数据丢失的一种办法,但是相比于事务,确认机制对性能影响较小

3.信道
信道是基于TCP的一种特殊的链接,每一个producer都有一个惟一的ChannelId,不同的Producer可以复用同一个TCP channel,为了提高消息吞吐量,避免网络连接的创建和销毁带来的额外负载。

4.exchange类型
exchange主要分为三种类型:
direct:就是routingkey和队列一一对应,对应的消费者只能消费这一个生产者生产的消息。

topic:通过通配符匹配消费的队列,例如:生产者生产了一条hello.world的消息,那么消费者通过*.world或者#可以匹配到这条消息,并进行消费。

fanout:广播消息,此时的routingkey并没有什么用了,只要生产者生产消息到这个交换机上,连入这个交换机的所有消费者都可以消费到这条消息。

5.普通集群
rabbitmq为了扩展负载能力和处理速度,可以分多台不同的rabbitmq-broker部署在不同的节点上,分别负责不同的业务。集群中的各台机器都需要与其他机器同步集群元数据,常见的集群元数据包括:
队列元数据
绑定元数据
vhost元数据
交换机元数据
在普通集群中, 必须要至少保证有一个硬盘节点,因为硬盘节点负责持久化元数据,当集群中有一台机器宕机后重启,如果是内存节点是不可以恢复原来的数据的,所以需要有一台硬盘节点,存储所有集群的元数据,而在集群中如果硬盘节点挂机了,那么集群中是不会接受对元数据的修改请求的,但是生产消费已经有元数据的消息是可以的。

6.镜像集群
普通集群不能保证节点宕机后的高可用,所以为了让集群实现高可用,还需要对节点进行副本部署,与主节点进行数据同步,以便在master节点宕机后由从节点替代master接入新的请求。
镜像集群的结构是一个环状列表,当请求打入master后,master会将该消息通过GM组播通讯协议传递给集群中的每一个节点,这些节点像一个环状链表一样串联起来,由相邻的节点同步传递消息,当master收到自己传递的消息之后,就说明镜像集群的所有节点已经同步完成,此时就可以返回ack给客户端了。
当有新节点加入时,需要根据配置ha.manual或者自动同步新节点,如果是手动的,那么在新节点加入之后需要手动操作才能完成数据同步,否则需要等待。而自动则会随着节点的加入而自动同步数据。
新节点同步数据时,因为以前没有消息,所以可能会需要写入大量数据才能完成同步,所以究竟选择手动还是自动,需要根据生产的部署而自动斟酌。

评论

暂无评论