MQ全解析

摘要:MQ应用场景 1. 异步处理 2. 应用解耦 3. 流量削峰     秒杀活动,控制参加人数,丢弃超过阈值的请求   RabbitMQ Broker:消息队列服务器实体 virtual host:虚拟主机,一个broker里可以有多个vhost,用作不同用户的权限分离。每一个vhost本质上是一个mini-rabbitmq server,producer和consumer连接rabbit s

MQ应用场景
1. 异步处理
2. 应用解耦
3. 流量削峰
秒杀活动,控制参加人数,丢弃超过阈值的请求

1 (61).jpg

 

RabbitMQ

Broker:消息队列服务器实体
virtual host:虚拟主机,一个broker里可以有多个vhost,用作不同用户的权限分离。每一个vhost本质上是一个mini-rabbitmq server,producer和consumer连接rabbit server需要指定一个vhost
Channel:消息通道,在客户端的每个连接里,可建立多个channel。创建了客户端到Broker之间的连接后,客户端还是不能发送消息的。需要为每一个Connection创建Channel,AMQP协议规定只有通过Channel才能执行AMQP的命令。
Exchange:消息交换机,指定消息路由策略,和Queue一样,Exchange也可设置为持久化,临时或者自动删除。Exchange有4种类型:direct(默认),fanout,topic和headers:

Direct:直接交换器,工作方式类似于单播,Exchange会将消息发送完全匹配ROUTING_KEY的Queue fanout:广播交换器,不管消息的ROUTING_KEY设置什么,Exchange都会将消息转发给所有绑定的Queue。 topic:主题交换器,工作方式类似于组播,Exchange会将消息转发和ROUTING_KEY匹配模式相同的所有队列,比如,ROUTING_KEY为user.stock的Message会转发给绑定匹配模式为 * .stock, user.stock,*.* 和 #.user.stock.# 的队列。( * 表是匹配一个任意词组,#表示匹配0个或多个词组) headers:不处理routing key,而是根据发送的消息内容中的headers属性进行匹配

Queue:消息队列,提供了FIFO的处理机制,具有缓存消息的能力。rabbitmq中,队列消息可以设置为持久化,临时或者自动删除。

设置为持久化的队列,queue中的消息会在server本地硬盘存储一份,防止系统crash,数据丢失 设置为临时队列,queue中的数据在系统重启之后就会丢失 设置为自动删除的队列,当不存在用户连接到server,队列中的数据会被自动删除

Binding:绑定,把exchange和queue按照路由规则绑定起来,多对多关系
Routing Key:路由关键字,exchange根据这个关键字进行消息投递
Producer:消息生产者
Consumer:消息消费者

 

通信过程
假设P1和C1注册了相同的Broker,Exchange和Queue。P1发送的消息最终会被C1消费。基本的通信流程大概如下所示:

P1生产消息,发送给服务器端的Exchange Exchange收到消息,根据ROUTING KEY,将消息转发给匹配的Queue1 Queue1收到消息,将消息发送给订阅者C1 C1收到消息,发送ACK给队列确认收到消息 Queue1收到ACK,删除队列中缓存的此条消息

Consumer收到消息时需要显式的向rabbit broker发送basic.ack消息或者consumer订阅消息时设置auto_ack参数为true。在通信过程中,队列对ACK的处理有以下几种情况:

如果consumer接收了消息,发送ack,rabbitmq会删除队列中这个消息,发送另一条消息给consumer。 如果cosumer接受了消息, 但在发送ack之前断开连接,rabbitmq会认为这条消息没有被deliver,在consumer在次连接的时候,这条消息会被redeliver。 如果consumer接受了消息,但是程序中有bug,忘记了ack,rabbitmq不会重复发送消息。 rabbitmq2.0.0和之后的版本支持consumer reject某条(类)消息,可以通过设置requeue参数中的reject为true达到目地,那么rabbitmq将会把消息发送给下一个注册的consumer。