RabbitMQ - 基于 SpringAMQP 带你实现五种消息队列模型

目录

一、SpringAMQP

1.1、概念

1.2、前置知识(实现案例前必看!)

1.2.1、创建队列

1.2.2、创建交换机

1.2.3、创建绑定

1.2.4、@RabbitListener 注解

a)情况一:queue 存在

b)情况二:queue 不存在 

1.2.5、为什么更建议使用 @Bean 注解创建,而不是 @RabbitListener 注解创建?

1.3、案例实现

1.3.1、SpringAMQP 实现基础消息队列(BasicQueue)

1.3.2、SpringAMQP 实现工作消息队列((Work Queue)

1.3.3、SpringAMQP 实现广播交换机消息队列(Fanout Exchange)

1.3.4、Spring AMQP 实现路由交换机消息队列(Direct Exchange)

1.3.5、SpringAMQP 实现主题交换机消息模型(Topic Exchange)


一、SpringAMQP


1.1、概念

什么是 AMQP?

全称 Advanced Message Queuing Protocol,是用于在应用程序之间传递业务消息的开放标准。该协议与语言和平台无关,更符合微服务中独立性的要求

什么是 SpringAMQP?

Spring AMQP是基于AMQP协议定义的一套API规范,提供了模板用来发送和接收消息。包含两部分,其中spring-amqp是基础抽象,spring-rabbit是底层的默认实现。

1.2、前置知识(实现案例前必看!)

1.2.1、创建队列

实际开发中,有两种方式创建交换机和队列,其中 Bean 方式用的最多,也是最推荐的,还有一种最后讲.

队列的创建,源码中提供了如下几种方法:

  • name:队列名.
  • durable:是否持久化.
  • exclusive:是否独占.  true表示队列只能被一个消费者使用, false表示大家都能用.
  • autoDelete:自动删除,为 true 表示没有人使用以后自动删除.
  • arguments:扩展参数,自定义选项,例如实现,队列过期、队列消息过期、死信队列...

例如,创建名为 simple.queue 的队列,并且支持持久化:在 Configuration 层中使用 @Bean 注入队列即可(@Configuration 注解不能少).

​
@Configuration
public class MqConfig {

    /**
     * 创建队列
     * @return
     */
    @Bean
    public Queue simpleQueue() {
        return new Queue("simple.queue", true);
    }

}

​

Ps:建议将来开发的时候,将设置队列名、交换机名都写成固定的常量(static final)

1.2.2、创建交换机

a)直接交换机和扇出交换机

直接交换机的创建,源码中提供了如下几种方法:

扇出交换机和主题交换机也是如此:

  • name:交换机名.
  • durable:是否持久化.
  • autoDelete:自动删除,若当前交换机没人使用了,就会自动删除.
  • arguments:表示创建交换机时可以指定一些额外的选项,例如延时消息、过期时间、死信交换机.

例如,创建名为  direct 的交换机,支持持久化和自动删除.

@Configuration
public class MqConfig {

    /**
     *  创建直接交换机
     * @return
     */
    @Bean
    public DirectExchange directExchange() {
        return new DirectExchange("direct", true, true);
    }

}

1.2.3、创建绑定

通过 BindingBuilder 对象就可以将交换机和队列绑定,绑定方式是 BindingBuilder.bind(调用创建队列方法).to(调用创建交换机方法).with(bindingKey).

@Configuration
public class MqConfig {

    /**
     * 创建队列
     * @return
     */
    @Bean
    public Queue simpleQueue() {
        return new Queue("simple.queue", true);
    }

    /**
     *  创建直接交换机
     * @return
     */
    @Bean
    public DirectExchange directExchange() {
        return new DirectExchange("direct", true, true);
    }

    /**
     * 创建绑定
     * @return
     */
    @Bean
    public Binding simpleBinding() {
        return BindingBuilder.bind(simpleQueue()).to(directExchange()).with("simple");
    }


}

Ps:如果是 fanout 扇出交换机则不用通过 with 指定 bindingKey.

1.2.4、@RabbitListener 注解

a)情况一:queue 存在

如果 queue 队列存在,以下使用就可以通过 @RabbitListener 注解监听队列消息,成为消费者.

用法:直接指定注解中的queues参数即可,参数值为对列名(queueName)

例如如下

    @RabbitListener(queues = "simple.queue")
    public void SimpleConsumer(String msg) {
        System.out.println("消费者收到消息: " + msg);
    }

Ps:当 queue 的 autoDelete 属性为 false 时,这种使用情况还是比较合适了;但是,当这个属性为 true 时,没有消费者队列就会自动删除了,可能会引发异常!

b)情况二:queue 不存在 

如果队列存在,以下使用就可以通过 @RabbitListener 注解创建交换机、队列、绑定关系.

例如,

    @RabbitListener(bindings = @QueueBinding(
            value = @Queue("queue1"),
            exchange = @Exchange(name = "exchange1", type = ExchangeTypes.TOPIC),
            key = "test"
    ))
    public void testListener(String msg) {
        System.out.println("消费者收到消息: " + msg);
    }
  • value: @Queue 注解,用于声明队列,value 为 queueName, durable 表示队列是否持久化, autoDelete 表示没有消费者之后队列是否自动删除
  • exchange: @Exchange 注解,用于声明 exchange, type 就是交换机类型.
  • key: 在 topic 方式下,这个就是我们熟知的 routingKey

1.2.5、为什么更建议使用 @Bean 注解创建,而不是 @RabbitListener 注解创建?

建议使用 @Bean 而不是@RabbitListener的原因如下:

  1. 使用 @Bean 创建相比于 @RabbitListener 实现了配置和业务上的解耦合(队列、交换机、绑定的创建 和 业务代码 解耦合).
  2. @Bean可以更好地控制RabbitMQ监听器的创建和销毁,而@RabbitListener则需要在运行时动态创建和销毁监听器,这可能会导致一些性能问题和内存泄漏问题。
  3. 使用@Bean还可以更好地管理RabbitMQ连接和通道,从而提高应用程序的可靠性和性能。

1.3、案例实现

1.3.1、SpringAMQP 实现基础消息队列(BasicQueue)

在mq上创建队列:

Configuration 这一层创建队列,否则不生效.

@Configuration
public class MqConfig {

    /**
     * 创建队列
     * @return
     */
    @Bean
    public Queue simpleQueue() {
        return new Queue("simple.queue", true);
    }

}

服务生产者 publisher:

a)由于生产者和消费者服务都需要 amqp 依赖,因此这里直接将依赖放到父工程中

<!--AMQP依赖,包含RabbitMQ-->
<dependency>
    <groupId>org.springframework.boot</groupId>
    <artifactId>spring-boot-starter-amqp</artifactId>
</dependency>

b)在 publisher (消息发送)服务中编写application.yml,添加mq连接信息:

spring:
  rabbitmq:
    host: 193.168.150.185 # 主机名
    port: 5672 # 端口
    virtual-host: / # 虚拟主机 
    username: root # 用户名
    password: 1234 # 密码

Ps:云服务器记得放行 5672 端口!!!

c)在publisher服务中新建一个测试类,编写测试方法:

@RunWith(SpringRunner.class)
@SpringBootTest
public class SpringAMQPTest {

    @Autowired
    private RabbitTemplate rabbitTemplate;

    @Test
    public void testSendMessageSimpleQueue() {
        String queueName = "simple.queue";
        String message = "hello, spring amqp!";
        rabbitTemplate.convertAndSend(queueName, message);
    }

}

以上可得知 SpringAMQP 发送消息需要实现以下几点: 

  1. 引入 amqp 的 starter 依赖;
  2. 配置 RabbitMQ 地址;
  3. 利用 RabbitTemplate 的 convertAndSend 方法来指定队列发送消息

服务消费者 consumer:

a)在consumer服务中编写application.yml,添加mq连接信息:

spring:
  rabbitmq:
    host: 193.168.150.185 # 主机名
    port: 5672 # 端口
    virtual-host: / # 虚拟主机 
    username: root # 用户名
    password: 1234 # 密码

b)在consumer服务中新建一个类,编写消费逻辑:

@Component
public class SpringRabbitListener {

    @RabbitListener(queues = "simple.queue")
    public void ListenQueue(String msg) {
        System.out.println("消费者接收到 simple.queue 的消息:" + msg);
    }

}

以上可得知 SpringAMQP 接收消息需要实现以下几点: 

  1. 引入amqp的starter依赖
  2. 配置RabbitMQ地址
  3. 定义类,添加@Component注解
  4. 类中声明方法,添加@RabbitListener注解,方法参数就时消息

Ps:消息一旦消费就会从队列删除,RabbitMQ没有消息回溯功能

最终执行效果如下:

1.3.2、SpringAMQP 实现工作消息队列((Work Queue)

Work queue工作队列,可以提高消息处理速度,避免队列消息堆积;

遇到的问题:当消息进入 queue 时,消费者1 和 消费者2 都会先做一个操作叫做“消息预取”,也就是先取消息,但不执行操作,等从 queue 中拿完(如果不设置,默认是无限次拿)了以后再执行具体的消费操作,但这样会导致一个问题——当 消费者1 的消费处理速度是 消费者2 处理速度的两倍时,但是由于“消息预取”,他们两都会取到相等的消息数量,因此就会导致 消费者1 提前处理完,消费者2 还有很多没有处理的情况,降低了总体处理的效率。

解决办法:为了解决这种问题的发生,也可以通过修改消息预取的数量,设置为 1 ,就是拿一个处理完了以后再取下一个,就可以避免以上问题(设置为1,就是根据自身处理能力,拿去相应的数据)。

具体实现如下

a)在 Configuration 中创建好队列

@Configuration
public class MqConfig {

    /**
     * 创建队列
     * @return
     */
    @Bean
    public Queue simpleQueue() {
        return new Queue("simple.queue", true);
    }

}

b)在 publisher 服务中添加一个测试方法,循环发送 50 条消息到 simple.queue 队列(控制时间为1秒内发送完)

    @Test
    public void testSendMessageWorkQueue() throws InterruptedException {
        String queueName = "simple.queue";
        String message = "hello, workQueue!";
        for(int i = 0; i < 50; i++) {
            rabbitTemplate.convertAndSend(queueName, message + i);
            Thread.sleep(20);
        }
    }

c)在consumer服务中创建两个消费者,也监听simple.queue:

@Component
public class SpringRabbitListener {

    @RabbitListener(queues = "simple.queue")
    public void ListenQueue(String msg) throws InterruptedException {
        System.err.println("消费者接收到 simple.queue 的消息:" + msg + LocalDate.now());
        Thread.sleep(100);
    }

    @RabbitListener(queues = "simple.queue")
    public void ListenQueue2(String msg) throws InterruptedException {
        System.out.println("消费者接收到 simple.queue 的消息:" + msg + LocalDate.now());
        Thread.sleep(25);
    }

}

d)消费预取限制:修改application.yml文件,设置preFetch这个值,可以控制预取消息的上限

logging:
  pattern:
    dateformat: MM-dd HH:mm:ss:SSS
spring:
  rabbitmq:
    host: 170.193.116.135
    port: 5672
    username: root
    password: 1234
    virtual-host: /
    listener:
      simple:
        prefetch: 1

执行结果如下: 

1.3.3、SpringAMQP 实现广播交换机消息队列(Fanout Exchange)

发布订阅模式与之前案例的区别就是允许将同一消息发送给多个消费者。实现方式是加入了exchange(交换机)。

常见exchange类型包括:

1. Fanout:广播
2. Direct:路由
3. Topic:话题

这里我们先来理解一下广播消息队列模型~

Fanout Exchange:会将接收到的消息广播到每一个跟其绑定的queue,最后交给对应的消费者,值得注意的是,exchange负责消息路由,而不是存储,路由失败则消息丢失。

具体实现如下:

a)在consumer服务创建一个类,添加@Configuration注解,创建队列和交换机,并声明FanoutExchange、Queue和绑定关系对象 Binding ,绑定方式是 BindingBuilder.bind(队列).to(交换机)

package cn.itcast.mq.config;

import org.springframework.amqp.core.Binding;
import org.springframework.amqp.core.BindingBuilder;
import org.springframework.amqp.core.FanoutExchange;
import org.springframework.amqp.core.Queue;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;

@Configuration
public class FanoutConfig {

    //itcast.fanout
    @Bean
    public FanoutExchange fanoutExchange() {
        return new FanoutExchange("itcast.fanout");
    }

    //itcast.queue1
    @Bean
    public Queue fanoutQueue1() {
        return new Queue("fanout.queue1");
    }

    //绑定队列 1 到交换机
    @Bean
    public Binding fanoutBinding1(Queue fanoutQueue1, FanoutExchange fanoutExchange) {
        return BindingBuilder
                .bind(fanoutQueue1)
                .to(fanoutExchange);
    }

    //itcast.queue2
    @Bean
    public Queue fanoutQueue2() {
        return new Queue("fanout.queue2");
    }

    //绑定队列 2 到交换机
    @Bean
    public Binding fanoutBinding2(Queue fanoutQueue2, FanoutExchange fanoutExchange) {
        return BindingBuilder
                .bind(fanoutQueue2)
                .to(fanoutExchange);
    }

}

b)运行以后可以通过 RabbitMQ 客户端看到以下绑定情况:

 

c)添加测试方法

import org.junit.Test;
import org.junit.runner.RunWith;
import org.springframework.amqp.rabbit.core.RabbitTemplate;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.boot.test.context.SpringBootTest;
import org.springframework.test.context.junit4.SpringRunner;

@RunWith(SpringRunner.class)
@SpringBootTest
public class SpringAMQPTest {

    @Autowired
    private RabbitTemplate rabbitTemplate;

    @Test
    public void testFanoutMessage() {
        String exchangeName = "itcast.fanout";
        String message = "hello! fanout";
        rabbitTemplate.convertAndSend(exchangeName, "", message);
    }

}

d)这里一个交换机绑定了两个队列,因此运行结果如下 :

1.3.4、Spring AMQP 实现路由交换机消息队列(Direct Exchange)

 Direct Exchange 会将接收到的消息根据规则路由到指定的Queue,因此称为路由模式(routes),通常一个 Queue 都会与 Exchange 设置一个 BindingKey,发布者发送消息时会先指定 RoutingKey,这时交换机就会将消息路由到 BindingKey 与消息 RoutingKey 一致的队列。

具体实现如下:

a)在consumer服务中,编写两个消费者方法,分别监听direct.queue1和direct.queue2,并利用@RabbitListener声明Queue、Exchange、BoutingKey

Ps:之气我们使用 Bean 的方式创建交换机和队列,实际上也可以通过 @RabbitListener 注解去声明.  这就要求我们必须要在 @RabbitListener 中通过 @QueueBinding 指定绑定关系,并通过 @Queue 和 @Exchange 去创建队列和交换机

但建议将来微服务开发的时候都是用 Bean 的方式创建交换机和队列,将业务代码和配置代码解耦合.

    @RabbitListener(bindings = @QueueBinding(
            value = @Queue(name = "direct.queue1"), //绑定队列
            exchange = @Exchange(name = "itcast.direct", type = ExchangeTypes.DIRECT), //绑定交换机,type 可以不写,默认为 Direct
            key = {"java", "C++"} // Bindingkey
    ))
    public void listenDirectQueue1(String msg) {
        System.out.println("消费者 1 收到 Direct 消息:" + msg);
    }


    @RabbitListener(bindings = @QueueBinding(
            value = @Queue(name = "direct.queue2"), //绑定队列
            exchange = @Exchange(name = "itcast.direct", type = ExchangeTypes.DIRECT), //绑定交换机,type 可以不写,默认为 Direct
            key = {"java", "GO"} // Bindingkey
    ))
    public void listenDirectQueue2(String msg) {
        System.out.println("消费者 2 收到 Direct 消息:" + msg);
    }

b)运行后可以观察绑定情况:

c)编写测试方法:

    @Test
    public void testDirectMessage() {
        String exchangeName = "itcast.direct";
        String message = "hello! direct";
        rabbitTemplate.convertAndSend(exchangeName, "C++", message);
    }

d)运行结果如下:

1.3.5、SpringAMQP 实现主题交换机消息模型(Topic Exchange)

TopicExchange 与 DirectExchange 十分类似,区别在于routingKey必须是多个单词的列表,并且以 . 分割。

Queue与Exchange指定BindingKey时可以使用以下通配符:

#:代指0个或多个单词
*:代指一个单词

例如: china.# 就相当于 china.new 或者 china.difa 或者 china.alhglag ......等等一切情况

具体实现如下(这里不具体说明了,除了通配符差异,用法跟 Direct 消息队列一模一样~):

@Component
public class SpringRabbitListener {

    @RabbitListener(bindings = @QueueBinding(
            value = @Queue("topic.queue1"),
            exchange = @Exchange(name = "itcast.topic", type = ExchangeTypes.TOPIC),
            key = "china.#"
    ))
    public void listenTopicQueue1(String msg) {
        System.out.println("消费者 1 收到 topic 消息:" + msg);
    }

    @RabbitListener(bindings = @QueueBinding(
            value = @Queue("topic.queue2"),
            exchange = @Exchange(name = "itcast.topic", type = ExchangeTypes.TOPIC),
            key = "#.good"
    ))
    public void listenTopicQueue2(String msg) {
        System.out.println("消费者 2 收到 topic 消息:" + msg);
    }

}

    @Test
    public void testTopicMessage() {
        String exchangeName = "itcast.topic";
        String message = "hello! topic";
        rabbitTemplate.convertAndSend(exchangeName, "china.good", message);
    }

运行结果:

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

陈亦康

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值