当前位置:   article > 正文

RabbitMQ消息确认机制

rabbitmq消息确认机制

RabbitMQ消息确认的本质也就是为了解决RabbitMQ消息丢失问题,因为哪怕我们做了RabbitMQ持久化,其实也并RabbitMQ持久化 不能保证解决我们的消息丢失问题


RabbitMQ的消息确认有两种

  • 第一种是消息发送确认。这种是用来确认生产者将消息发送给交换器,交换器传递给队列的过程中,消息是否成功投递。发送确认分为两步,一是确认是否到达交换器,二是确认是否到达队列。
  • 第二种是消费接收确认。这种是确认消费者是否成功消费了队列中的消息。

1.消息发送确认(生产者)

正常情况下,生产者会通过交换机发送消息至队列中,再由消费者来进行消费,但是其实RabbitMQ在接收到消息后,还需要一段时间消息才能存入磁盘,并且其实也不是每条消息都会存入磁盘,可能仅仅只保存到cache中,这时,如果RabbitMQ正巧发生崩溃,消息则就会丢失,所以为了避免该情况的发生,我们引入了生产者确认机制,rabbitmq对此提供了两种方式:

  • 通过事务实现
  • 通过发送方确认机制(publisher confirm)实现

事务实现

  • channel.txSelect(): 将当前信道设置成事务模式
  • channel.txCommit(): 用于提交事务
  • channel.txRollback(): 用于回滚事务

通过事务实现机制,只有消息成功被rabbitmq服务器接收,事务才能提交成功,否则便可在捕获异常之后进行回滚,然后进行消息重发,但是事务非常影响rabbitmq的性能。还有就是事务机制是阻塞的过程,只有等待服务器回应之后才会处理下一条消息

  1. /**
  2. * 创建生产者
  3. */
  4. public class Send {public static void main(String[] args) throws IOException, TimeoutException {
  5. //从MQ工具类获取连接信息
  6. Connection connection = MqConnectionUtils.getConnection();
  7. //创建一个通道
  8. Channel channel = connection.createChannel();
  9. //准备发送的消息内容
  10. String msg = "你好";
  11. //准备交换机(已创建的交换机)
  12. String exchangeName = "direct-exchange";
  13. //准备路由
  14. String routekey = "email";
  15. try{
  16. //将信道设置为事务模式
  17. channel.txSelect();
  18. //发送消息给交换机
  19. /**
  20. * 参数1:交换机,不定义也会有默认的,因为我们的消息是通过交换机来进行投递给队列的,所以交换机不可能没有
  21. * 参数2:routekey
  22. * 参数3:消息的状态控制
  23. * 参数4:消息内容
  24. */
  25. //该模式因为是由交换机发给该交换机绑定的所有队列,所以可以不标明队列名称
  26. channel.basicPublish(exchangeName,routekey,null,msg.getBytes());
  27. //事务提交
  28. channel.txCommit();
  29. System.out.print("发送成功");
  30. } catch (Exception e){
  31. //如果消息发送给交换机的过程出现异常,则捕捉并进行回滚
  32. channel.txRollback();
  33. System.out.print("发送失败并回滚");
  34. }
  35. //关闭通道
  36. channel.close();
  37. connection.close();
  38. }
  39. }

confirm实现

confirm方式有三种模式:普通confirm模式、批量confirm模式、异步confirm模式

  • channel.confirmSelect(): 将当前信道设置成了confirm模式

普通confirm模式

每发送一条消息,就调用waitForConfirms()方法,等待服务端返回Ack或者nack消息

  1. /**
  2. * 创建生产者
  3. */
  4. public class Send {
  5. public static void main(String[] args) throws IOException, TimeoutException, InterruptedException {
  6. //从MQ工具类获取连接信息
  7. Connection connection = MqConnectionUtils.getConnection();
  8. //创建一个通道
  9. Channel channel = connection.createChannel();
  10. //准备发送的消息内容
  11. String msg = "你好";
  12. //准备交换机(已创建的交换机)
  13. String exchangeName = "direct-exchange";
  14. //准备路由
  15. String routekey = "email";
  16. //将当前信道设置成confirm模式
  17. channel.confirmSelect();
  18. for(int i = 0;i<20;i++){
  19. //发送消息给交换机
  20. /**
  21. * 参数1:交换机,不定义也会有默认的,因为我们的消息是通过交换机来进行投递给队列的,所以交换机不可能没有
  22. * 参数2:routekey
  23. * 参数3:消息的状态控制
  24. * 参数4:消息内容
  25. */
  26. //该模式因为是由交换机发给该交换机绑定的所有队列,所以可以不标明队列名称
  27. channel.basicPublish(exchangeName,routekey,null,msg.getBytes());
  28. //信道为confirm模式后,即可通过waitForConfirms()接收服务端返回来的信息
  29. if(channel.waitForConfirms()){
  30. System.out.print("发送成功");
  31. }
  32. }
  33. final long start = System.currentTimeMillis();
  34. System.out.println("执行waitForConfirmsOrDie耗费时间"+(System.currentTimeMillis()-start)+"ms");
  35. //关闭通道
  36. channel.close();
  37. connection.close();
  38. }
  39. }

批量confirm模式

每发送一批消息,就调用waitForConfirmsOrDie()方法,该方法会等到最后一条消息得到ack或者得到nack才会结束,也就是说在waitForConfirmsOrDie处才会造成程序的阻塞

  1. /**
  2. * 创建生产者
  3. */
  4. public class Send {
  5. public static void main(String[] args) throws IOException, TimeoutException, InterruptedException {
  6. //从MQ工具类获取连接信息
  7. Connection connection = MqConnectionUtils.getConnection();
  8. //创建一个通道
  9. Channel channel = connection.createChannel();
  10. //准备发送的消息内容
  11. String msg = "你好";
  12. //准备交换机(已创建的交换机)
  13. String exchangeName = "direct-exchange";
  14. //准备路由
  15. String routekey = "email";
  16. //将当前信道设置成confirm模式
  17. channel.confirmSelect();
  18. for(int i = 0;i<20;i++){
  19. //发送消息给交换机
  20. /**
  21. * 参数1:交换机,不定义也会有默认的,因为我们的消息是通过交换机来进行投递给队列的,所以交换机不可能没有
  22. * 参数2:routekey
  23. * 参数3:消息的状态控制
  24. * 参数4:消息内容
  25. */
  26. //该模式因为是由交换机发给该交换机绑定的所有队列,所以可以不标明队列名称
  27. channel.basicPublish(exchangeName,routekey,null,msg.getBytes());
  28. }
  29. final long start = System.currentTimeMillis();
  30. //消息批量发送完成后,通过waitForConfirmsOrDie()方法来接收服务端返回的信息
  31. channel.waitForConfirmsOrDie();
  32. System.out.println("执行waitForConfirmsOrDie耗费时间"+(System.currentTimeMillis()-start)+"ms");
  33. //关闭通道
  34. channel.close();
  35. connection.close();
  36. }
  37. }

异步confirm模式

通过channel,addConfirmListener()监听发送方确认模式,通过信道中的waitForConfirmsOrDie等待传回ack或者nack

  1. /**
  2. * 创建生产者
  3. */
  4. public class Send {
  5. public static void main(String[] args) throws IOException, TimeoutException, InterruptedException {
  6. //从MQ工具类获取连接信息
  7. Connection connection = MqConnectionUtils.getConnection();
  8. //创建一个通道
  9. Channel channel = connection.createChannel();
  10. //准备发送的消息内容
  11. String msg = "你好";
  12. //准备交换机(已创建的交换机)
  13. String exchangeName = "fanout-exchanges";
  14. //准备路由
  15. String routekey = "";
  16. //将当前信道设置成confirm模式
  17. channel.confirmSelect();
  18. for(int i = 0;i<100;i++){
  19. msg= i + "chen";
  20. //发送消息给交换机
  21. /**
  22. * 参数1:交换机,不定义也会有默认的,因为我们的消息是通过交换机来进行投递给队列的,所以交换机不可能没有
  23. * 参数2:routekey
  24. * 参数3:消息的状态控制
  25. * 参数4:消息内容
  26. */
  27. //该模式因为是由交换机发给该交换机绑定的所有队列,所以可以不标明队列名称
  28. channel.basicPublish(exchangeName,routekey,null,msg.getBytes());
  29. }
  30. final long start = System.currentTimeMillis();
  31. //通过addConfirmListener来监听信道
  32. channel.addConfirmListener(new ConfirmListener() {
  33. //消息发送成功
  34. @Override
  35. public void handleAck(long deliveryTag, boolean multiple) throws IOException {
  36. System.out.println("以确认消息:"+ deliveryTag + " 多个消息:" + multiple);
  37. }
  38. //消息发送失败
  39. @Override
  40. public void handleNack(long deliveryTag, boolean multiple) throws IOException {
  41. System.out.println("no ack");
  42. }
  43. });
  44. System.out.println("执行waitForConfirmsOrDie耗费时间"+(System.currentTimeMillis()-start)+"ms");
  45. //关闭通道
  46. channel.close();
  47. connection.close();
  48. }
  49. }

2.消息接收确认(消费者)

消息接收确认机制,分为消息自动确认模式和消息手动确认模式,当消息确认后,我们队列中的消息将会移除

那这两种模式要如何选择呢?

  • 如果消息不太重要,丢失也没有影响,那么自动ACK会比较方便。好处就是可以提高吞吐量,缺点就是会丢失消息
  • 如果消息非常重要,不容丢失,则建议手动ACK,正常情况都是更建议使用手动ACK。虽然可以解决消息不会丢失的问题,但是可能会造成消费者过载

消息自动确认模式的实现

注:自动确认模式,消费者不会判断消费者是否成功接收到消息,也就是当我们程序代码有问题,我们的消息都会被自动确认,消息被自动确认了,我们队列就会移除该消息,这就会造成我们的消息丢失

  1. /**
  2. * 消费者
  3. */
  4. public class Recv {
  5. //设定队列名称(已存在的队列)
  6. private static final String QUEUE_NAME = "queue1";
  7. public static void main(String[] args) throws IOException, TimeoutException {
  8. //从mq工具类获取连接信息
  9. Connection connection = MqConnectionUtils.getConnection();
  10. //获取一个通道
  11. Channel channel = connection.createChannel();
  12. //监听该队列,true代表自动确认
  13. channel.basicConsume(QUEUE_NAME,true,new DefaultConsumer(channel){
  14. @Override
  15. public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties basicProperties, byte[] body) throws IOException{
  16. System.out.println("接收到的消息:"+ new String(body,"UTF-8"));
  17. }
  18. });
  19. }
  20. }

实现效果,消费者会将我们队列中的消息全部接收然后确认,并移除队列

消息手动确认模式的实现

  1. /**
  2. * 消费者
  3. */
  4. public class Recv {
  5. //设定队列名称(已存在的队列)
  6. private static final String QUEUE_NAME = "queue1";
  7. public static void main(String[] args) throws IOException, TimeoutException {
  8. //从mq工具类获取连接信息
  9. Connection connection = MqConnectionUtils.getConnection();
  10. //获取一个通道
  11. Channel channel = connection.createChannel();
  12. //监听该队列,false代表手动确认
  13. channel.basicConsume(QUEUE_NAME,false,new DefaultConsumer(channel){
  14. @Override
  15. public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties basicProperties, byte[] body) throws IOException{
  16. System.out.println("接收到的消息:"+ new String(body,"UTF-8"));
  17. }
  18. });
  19. }
  20. }

手动确认模式下,当我们消费者成功接收到消息后,在队列中消息会进入Unacked项,也就是待确认模式

所以我们还需要加上下列代码,来实现消息者在成功接收到消息后,手动确认

#添加红色字段

  1. ​​​​​​​/**
  2. * 消费者
  3. */
  4. public class Recv {
  5. //设定队列名称(已存在的队列)
  6. private static final String QUEUE_NAME = "queue1";
  7. public static void main(String[] args) throws IOException, TimeoutException {
  8. //从mq工具类获取连接信息
  9. Connection connection = MqConnectionUtils.getConnection();
  10. //获取一个通道
  11. Channel channel = connection.createChannel();
  12. //监听该队列
  13. channel.basicConsume(QUEUE_NAME,false,new DefaultConsumer(channel){
  14. @Override
  15. public void handleDelivery(String consumerTag, Envelope envelope, AMQP.BasicProperties basicProperties, byte[] body) throws IOException{
  16. System.out.println("接收到的消息:"+ new String(body,"UTF-8"));
  17. //获取消息的编号,我们需要根据消息的编号来确认消息
  18. long tag = envelope.getDeliveryTag();
  19. //获取当前内部类中的通道
  20. Channel c = this.getChannel();
  21. //手动确认消息,确认以后,则表示消息已经成功处理,消息就会从队列中移除,false代表只确认当前一个消息,true确认所有consumer获得的消息
  22. c.basicAck(tag,false);
  23. }
  24. });
  25. }
  26. }

此时,我们的消息才会成功被确认,并移除队列

基于rabbitmq实现延迟队列

一、rabbitmq延迟队列概念
延时队列 , 队列内部是有序的,最重要的特性就体现在它的延时属性上,延时队列中的元素是希望
在指定时间到了以后或之前取出和处理,简单来说,延时队列就是用来存放需要在指定时间被处理的元素的队列。
二、延迟队列使用场景
1.顾客在食堂吃饭的订单,在十分钟之后支付。
2. 订单在十分钟之内未支付则自动取消
3. 新创建的店铺,如果在十天内都没有上传过商品,则自动发送消息提醒。
4. 用户注册成功后,如果三天内没有登陆则进行短信提醒。
5. 用户发起退款,如果三天内没有得到处理则通知相关运营人员。
6. 预定会议后,需要在预定的时间点前十分钟通知各个与会人员参加会议。
      这些场景都有一个特点,需要在某个事件发生之后或者之前的指定时间点完成某一项任务,如: 发生订单生成事件,在十分钟之后检查该订单支付状态,然后将未支付的订单进行关闭;看起来似乎 使用定时任务,一直轮询数据,每秒查一次,取出需要被处理的数据,然后处理不就完事了吗?如果 数据量比较少,确实可以这样做,比如:对于“如果账单一周内未支付则进行自动结算”这样的需求, 如果对于时间不是严格限制,而是宽松意义上的一周,那么每天晚上跑个定时任务检查一下所有未支 付的账单,确实也是一个可行的方案。但对于数据量比较大,并且时效性较强的场景,如:“订单十 分钟内未支付则关闭“,短期内未支付的订单数据可能会有很多,活动期间甚至会达到百万甚至千万 级别,对这么庞大的数据量仍旧使用轮询的方式显然是不可取的,很可能在一秒内无法完成所有订单的检查,同时会给数据库带来很大压力,无法满足业务要求而且性能低下。
————————————————

原文链接:https://blog.csdn.net/baozaoderenlei/article/details/125976008

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/小蓝xlanll/article/detail/700826
推荐阅读
相关标签
  

闽ICP备14008679号