行业知识
【MQ 系列】SpringBoot + RabbitMq 消息确认/事务机制的使用姿势
���们知道 RabbitMq 提供了两种机制,来确保发送端的消息被 brocke 正确接收,本文将主要介绍,在消息确认和事物两种机制的场景下,发送消息的使用姿势
I. 配置
首先创建一个 SpringBoot 项目,用于后续的演示
-
springboot 版本为2.2.1.RELEASE
-
rabbitmq 版本为 3.7.5
依赖配置文件 pom.xml
org.springframework.boot spring-boot-starter-parent 2.2.1.RELEASE UTF-8 UTF-8 1.8 org.springframework.boot spring-boot-starter-amqp org.springframework.boot spring-boot-starter-web org.springframework.boot spring-boot-maven-plugin spring-snapshots Spring Snapshots https://repo.spring.io/libs-snapshot-local true spring-milestones Spring Milestones https://repo.spring.io/libs-milestone-local false spring-releases Spring Releases https://repo.spring.io/libs-release-local false
在application.yml配置文件中,添加 rabbitmq 的相关属性
spring: rabbitmq: virtual-host:/ username:admin password:admin port:5672 host:127.0.0.1
II. 消息确认机制
本节来看一下消息确认机制的使用姿势,首先有必要了解一下什么是消息确认机制
1. 定义
简单来讲就是消息发送之后,需要接收到 RabbitMq 的正确反馈,然后才能判断消息是否正确发送成功;
一般来说,RabbitMq 的业务逻辑包括以下几点
-
生产者将信道设置成 Confirm 模式,一旦信道进入 Confirm 模式,所有在该信道上面发布的消息都会被指派一个唯一的 ID(以 confirm.select 为基础从 1 开始计数)
-
一旦消息被投递到所有匹配的队列之后,Broker 就会发送一个确认给生产者(包含消息的唯一 ID),这就使得生产者知道消息已经正确到达目的队列了
-
如果消息和队列是可持久化的,那么确认消息会将消息写入磁盘之后发出
-
Broker 回传给生产者的确认消息中 deliver-tag 域包含了确认消息的序列号(此外 Broker 也可以设置 basic.ack 的 multiple 域,表示到这个序列号之前的所有消息都已经得到了处理)
2. 基本使用 case
从上面的解释,可以知道发送消息端,需要先将信道设置为 Confirm 模式,RabbitProperties配置类中,有个属性,正好是用来设置的这个参数的,所以我们可以直接在配置文件application.yml中,添加下面的配置
spring: rabbitmq: # 在2.2.1.release版本中,下面这个配置属于删除状态,推荐使用后一种配置方式 # publisher-confirms: true publisher-confirm-type:correlated # 下面这个配置,表示接收mq返回的确认消息 publisher-returns:true
上面配置完毕之后,直接使用 RabbitTemplate 发送消息,表示已经支持 Confirm 模式了,但实际的使用,会有一点点区别,我们需要接收 mq 返回的消息,发送失败的回调(以实现重试逻辑等),所以一个典型的发送端代码可以如下
@Servicepublicclass AckPublisher implements RabbitTemplate.ConfirmCallback, RabbitTemplate.ReturnCallback { @Autowired private RabbitTemplate rabbitTemplate; @PostConstruct public void init() { rabbitTemplate.setReturnCallback(this); rabbitTemplate.setConfirmCallback(this); } /** * 接收发送后确认信息 * * @param correlationData * @param ack * @param cause */ @Override public void confirm(CorrelationData correlationData, boolean ack, String cause) { if (ack) { System.out.println("ack send succeed: " + correlationData); } else { System.out.println("ack send failed: " + correlationData + "|" + cause); } } /** * 发送失败的回调 * * @param message * @param replyCode * @param replyText * @param exchange * @param routingKey */ @Override public void returnedMessage(Message message, int replyCode, String replyText, String exchange, String routingKey) { System.out.println("ack " + message + " 发送失败"); } /** * 一般的用法,推送消息 * * @param ans * @return */ public String publish(String ans) { String msg = "ack msg = " + ans; System.out.println("publish: " + msg); CorrelationData correlationData = new CorrelationData(UUID.randomUUID().toString()); rabbitTemplate.convertAndSend(MqConstants.exchange, MqConstants.routing, msg, correlationData); return msg; }}请注意上面的实现,首先需要给 RabbitTemplate 设置回调,这两个不可或缺
rabbitTemplate.setReturnCallback(this);rabbitTemplate.setConfirmCallback(this);
3. 手动配置方式
上面利用的是标准的 SpringBoot 配置,一般来说是适用于绝大多数的场景的;当不能覆盖的时候,还可以通过手动的方式来定义一个特定的 RabbitTemplate(比如一个项目中,只有某一个场景的消息发送需要确认机制,其他的默认即可,所以需要区分 RabbitTemplate)
在自动配置类中,可以手动的注册一个 RabbitTemplate 的 bean,来专职消息确认模式的发送
@Value("${spring.rabbitmq.host}")private String host;@Value("${spring.rabbitmq.port}")private Integer port;@Value("${spring.rabbitmq.username}")private String username;@Value("${spring.rabbitmq.password}")private String password;@Value("${spring.rabbitmq.virtual-host}")private String virtualHost;@Beanpublic RabbitTemplate ackRabbitTemplate() { CachingConnectionFactory connectionFactory = new CachingConnectionFactory(); connectionFactory.setHost(host); connectionFactory.setPort(port); connectionFactory.setUsername(username); connectionFactory.setPassword(password); connectionFactory.setVirtualHost(virtualHost); // 设置ack为true connectionFactory.setPublisherConfirmType(CachingConnectionFactory.ConfirmType.CORRELATED); connectionFactory.setPublisherReturns(true); returnnew RabbitTemplate(connectionFactory);}至于使用姿势,和前面完全一致,只是将rabbitTemplate换成ackRabbitTemplate
III. 事务机制
消息确认机制属于异步模式,也就是说一个消息发送完毕之后,不待返回,就可以发送另外一条消息;这里就会有一个问题,publisher 先后发送 msg1, msg2,但是对 RabbitMq 而言,接收的顺序可能是 msg2, msg1;所以消息的顺序可能会不一致
所以有了更加严格的事务机制,它属于同步模式,发送消息之后,等到接收到确认返回之后,才能发送下一条消息
1. 事务使用方式
首先我们定义一个事务管理器
/** * 配置rabbitmq事务 * * @param connectionFactory * @return */@Bean("rabbitTransactionManager")public RabbitTransactionManager rabbitTransactionManager(ConnectionFactory connectionFactory) { returnnew RabbitTransactionManager(connectionFactory);}@Beanpublic RabbitTemplate transactionRabbitTemplate(ConnectionFactory connectionFactory) { returnnew RabbitTemplate(connectionFactory);}事务机制的使用姿势,看起来和上面的消息确认差不多,无非是需要添加一个@Transactional注解罢了
@Servicepublicclass TransactionPublisher implements RabbitTemplate.ReturnCallback { @Autowired private RabbitTemplate transactionRabbitTemplate; @PostConstruct public void init() { // 将信道设置为事务模式 transactionRabbitTemplate.setChannelTransacted(true); transactionRabbitTemplate.setReturnCallback(this); } @Override public void returnedMessage(Message message, int replyCode, String replyText, String exchange, String routingKey) { System.out.println("事务 " + message + " 发送失败"); } /** * 一般的用法,推送消息 * * @param ans * @return */ @Transactional(rollbackFor = Exception.class, transactionManager = "rabbitTransactionManager") public String publish(String ans) { String msg = "transaction msg = " + ans; System.out.println("publish: " + msg); CorrelationData correlationData = new CorrelationData(UUID.randomUUID().toString()); transactionRabbitTemplate.convertAndSend(MqConstants.exchange, MqConstants.routing, msg, correlationData); return msg; }}请注意,核心代码设置信道为事务模式必不可少
// 将信道设置为事务模式transactionRabbitTemplate.setChannelTransacted(true);
IV. 测试
我们这里主要测试一下事务和消息确认机制的性能对比吧,从定义上来看消息确认机制效率更高,我们简单的对比一下
@RestControllerpublicclass PubRest { @Autowired private AckPublisher ackPublisher; @Autowired private TransactionPublisher transactionPublisher; private AtomicInteger atomicInteger = new AtomicInteger(1); @GetMapping(path = "judge") public boolean judge(String name) { for (int i = 0; i去掉无关的输出,仅保留耗时,对比如下(差距还是很明显的)
ack cost: 5transaction cost: 111ack cost: 3transaction cost: 108ack cost: 2transaction cost: 101ack cost: 3transaction cost: 107ack cost: 14transaction cost: 106ack cost: 2transaction cost: 140ack cost: 4transaction cost: 124ack cost: 4transaction cost: 131ack cost: 4transaction cost: 129ack cost: 2transaction cost: 99
-
下一篇:stream服务器怎么搭建?