Springboot+rabbitmq實現(xiàn)延時隊列的兩種方式
什么是延時隊列,延時隊列應(yīng)用于什么場景
延時隊列顧名思義,即放置在該隊列里面的消息是不需要立即消費的,而是等待一段時間之后取出消費。
那么,為什么需要延遲消費呢?我們來看以下的場景
- 網(wǎng)上商城下訂單后30分鐘后沒有完成支付,取消訂單(如:淘寶、去哪兒網(wǎng))
- 系統(tǒng)創(chuàng)建了預(yù)約之后,需要在預(yù)約時間到達前一小時提醒被預(yù)約的雙方參會
- 系統(tǒng)中的業(yè)務(wù)失敗之后,需要重試
這些場景都非常常見,我們可以思考,比如第二個需求,系統(tǒng)創(chuàng)建了預(yù)約之后,需要在預(yù)約時間到達前一小時提醒被預(yù)約的雙方參會。那么一天之中肯定是會有很多個預(yù)約的,時間也是不一定的,假設(shè)現(xiàn)在有1點 2點 3點 三個預(yù)約,如何讓系統(tǒng)知道在當(dāng)前時間等于0點 1點 2點給用戶發(fā)送信息呢,是不是需要一個輪詢,一直去查看所有的預(yù)約,比對當(dāng)前的系統(tǒng)時間和預(yù)約提前一小時的時間是否相等呢?這樣做非常浪費資源而且輪詢的時間間隔不好控制。如果我們使用延時消息隊列呢,我們在創(chuàng)建時把需要通知的預(yù)約放入消息中間件中,并且設(shè)置該消息的過期時間,等過期時間到達時再取出消費即可。
Rabbitmq實現(xiàn)延時隊列一般而言有兩種形式:
第一種方式:利用兩個特性: Time To Live(TTL)、Dead Letter Exchanges(DLX)
第二種方式:利用rabbitmq中的插件x-delay-message
利用TTL DLX實現(xiàn)延時隊列的方式
TTL DLX是什么
TTL
RabbitMQ可以針對隊列設(shè)置x-expires(則隊列中所有的消息都有相同的過期時間)或者針對Message設(shè)置x-message-ttl(對消息進行單獨設(shè)置,每條消息TTL可以不同),來控制消息的生存時間,如果超時(兩者同時設(shè)置以最先到期的時間為準(zhǔn)),則消息變?yōu)閐ead letter(死信)
Dead Letter Exchanges(DLX)
RabbitMQ的Queue可以配置x-dead-letter-exchange和x-dead-letter-routing-key(可選)兩個參數(shù),如果隊列內(nèi)出現(xiàn)了dead letter,則按照這兩個參數(shù)重新路由轉(zhuǎn)發(fā)到指定的隊列。
x-dead-letter-exchange:出現(xiàn)dead letter之后將dead letter重新發(fā)送到指定exchange
x-dead-letter-routing-key:出現(xiàn)dead letter之后將dead letter重新按照指定的routing-key發(fā)送
Springboot集成rabbitmq實現(xiàn)第一種方式
在pom.xml文件中增加rabbitmq的依賴
<dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-amqp</artifactId> </dependency>
初始化queue exchange和queue及exchange之間的binding關(guān)系
Config.java
package com.example.demo.deadLetter; import java.util.HashMap; import java.util.Map; import org.springframework.amqp.core.Binding; import org.springframework.amqp.core.BindingBuilder; import org.springframework.amqp.core.DirectExchange; import org.springframework.amqp.core.Queue; import org.springframework.context.annotation.Bean; import org.springframework.context.annotation.Configuration; import com.example.demo.Constants.Constants; @Configuration public class Config { // 創(chuàng)建一個立即消費隊列 @Bean public Queue immediateQueue() { // 第一個參數(shù)是創(chuàng)建的queue的名字,第二個參數(shù)是是否支持持久化 return new Queue(Constants.IMMEDIATE_QUEUE, true); } // 創(chuàng)建一個延時隊列 @Bean public Queue delayQueue() { Map<String, Object> params = new HashMap<>(); // x-dead-letter-exchange 聲明了隊列里的死信轉(zhuǎn)發(fā)到的DLX名稱, params.put("x-dead-letter-exchange", Constants.IMMEDIATE_EXCHANGE); // x-dead-letter-routing-key 聲明了這些死信在轉(zhuǎn)發(fā)時攜帶的 routing-key 名稱。 params.put("x-dead-letter-routing-key", Constants.IMMEDIATE_ROUTING_KEY); return new Queue(Constants.DELAY_QUEUE, true, false, false, params); } @Bean public DirectExchange immediateExchange() { // 一共有三種構(gòu)造方法,可以只傳exchange的名字, 第二種,可以傳exchange名字,是否支持持久化,是否可以自動刪除, //第三種在第二種參數(shù)上可以增加Map,Map中可以存放自定義exchange中的參數(shù) return new DirectExchange(Constants.IMMEDIATE_EXCHANGE, true, false); } @Bean public DirectExchange deadLetterExchange() { // 一共有三種構(gòu)造方法,可以只傳exchange的名字, 第二種,可以傳exchange名字,是否支持持久化,是否可以自動刪除, //第三種在第二種參數(shù)上可以增加Map,Map中可以存放自定義exchange中的參數(shù) return new DirectExchange(Constants.DEAD_LETTER_EXCHANGE, true, false); } @Bean //把立即消費的隊列和立即消費的exchange綁定在一起 public Binding immediateBinding() { return BindingBuilder.bind(immediateQueue()).to(immediateExchange()).with(Constants.IMMEDIATE_ROUTING_KEY); } @Bean //把立即消費的隊列和立即消費的exchange綁定在一起 public Binding delayBinding() { return BindingBuilder.bind(delayQueue()).to(deadLetterExchange()).with(Constants.DELAY_ROUTING_KEY); } }
生產(chǎn)者生產(chǎn)消息
ImmediateSender.java
package com.example.demo.deadLetter; import java.text.SimpleDateFormat; import java.util.Date; import org.springframework.amqp.rabbit.core.RabbitTemplate; import org.springframework.beans.factory.annotation.Autowired; import org.springframework.stereotype.Component; import com.example.demo.Constants.Constants; import com.example.demo.model.Booking; @Component public class ImmediateSender { @Autowired private RabbitTemplate rabbitTemplate; public void send(Booking booking, int delayTime) { System.out.println("delayTime" + delayTime); SimpleDateFormat sdf = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss"); this.rabbitTemplate.convertAndSend(Constants.DEAD_LETTER_EXCHANGE, Constants.DELAY_ROUTING_KEY, booking, message -> { message.getMessageProperties().setExpiration(delayTime + ""); System.out.println(sdf.format(new Date()) + " Delay sent."); return message; }); } }
消費者消費消息
ImmediateReceiver.java
package com.example.demo.deadLetter; import org.springframework.amqp.rabbit.annotation.EnableRabbit; import org.springframework.amqp.rabbit.annotation.RabbitHandler; import org.springframework.amqp.rabbit.annotation.RabbitListener; import org.springframework.context.annotation.Configuration; import org.springframework.stereotype.Component; import com.example.demo.Constants.Constants; import com.example.demo.model.Booking; @Component @EnableRabbit @Configuration public class ImmediateReceiver { @RabbitListener(queues = Constants.IMMEDIATE_QUEUE) @RabbitHandler public void get(Booking booking) { System.out.println("收到延時消息了" + booking); } }
model類book
Book.java
package com.example.demo.model; import java.io.Serializable; import java.util.Date; public class Booking implements Serializable { private static final long serialVersionUID = 1L; private String bookingName; private Date bookingTime; private String bookingContent; private String operatorName; public Booking() { } public String getBookingName() { return bookingName; } public void setBookingName(String bookingName) { this.bookingName = bookingName; } public Date getBookingTime() { return bookingTime; } public void setBookingTime(Date bookingTime) { this.bookingTime = bookingTime; } public String getBookingContent() { return bookingContent; } public void setBookingContent(String bookingContent) { this.bookingContent = bookingContent; } public String getOperatorName() { return operatorName; } public void setOperatorName(String operatorName) { this.operatorName = operatorName; } @Override public String toString() { return super.toString(); } }
測試類
Test.java
package com.example.demo; import java.util.Date; import org.junit.Test; import org.junit.runner.RunWith; import org.springframework.beans.factory.annotation.Autowired; import org.springframework.boot.test.context.SpringBootTest; import org.springframework.test.context.junit4.SpringRunner; import com.example.demo.Immediate.Sender; import com.example.demo.deadLetter.ImmediateSender; import com.example.demo.model.Booking; @RunWith(SpringRunner.class) @SpringBootTest public class RabbitMqTestApplicationTests { @Autowired ImmediateSender immediateSender; @Test public void test() { Booking booking = new Booking(); booking.setBookingContent("hhaha"); booking.setBookingName("預(yù)定房子"); booking.setBookingTime(new Date()); booking.setOperatorName("hellen"); immediateSender.send(booking, 1000); } }
總結(jié)第一種方式:經(jīng)過測試,我們可以發(fā)現(xiàn),當(dāng)我們先增加一條過期時間大(10000)的A消息進入,之后再增加一個過期時間小的(1000)消息B,并沒有出現(xiàn)想象中的B消息先被消費,A消息后被消費,而是出現(xiàn)了當(dāng)10000過去的時候,AB消息同時被消費,也就是B消息的消費被阻塞了。
為什么會出現(xiàn)這樣的現(xiàn)象呢?
我們知道利用TTL DLX特性實現(xiàn)的方式,實際上在第一個延時隊列C里面設(shè)置了dlx,生產(chǎn)者生產(chǎn)了一條帶ttl的消息放入了延時隊列C中,等到延時時間到了,延時隊列C中的消息變成了死信,根據(jù)延時隊列C中設(shè)置的dlx的exchange的轉(zhuǎn)發(fā)規(guī)則,轉(zhuǎn)發(fā)到了實際消費隊列D中,當(dāng)該隊列中的監(jiān)聽器監(jiān)聽到消息時就會正式開始消費。那么實際上延時隊列中的消息也是放入隊列中的,隊列滿足先進先出,而延時大的消息A還沒出隊,所以B消息也不能順利出隊。
利用Rabbitmq的插件x-delay-message實現(xiàn)
為了解決上面的問題,Rabbitmq實現(xiàn)了一個插件x-delay-message來實現(xiàn)延時隊列。
x-delay-message安裝
介紹Ubuntu系統(tǒng)下插件安裝方式:
選擇rabbitmq_delayed_message_exchange插件,選擇3.6版本,進行下載
將安裝包進行解壓
uzip rabbitmq_delayed_message_exchange-20171215-3.6.x.zip
將插件移到rabbitmq安裝的路徑
sudo cp -r rabbitmq_delayed_message_exchange-20171215-3.6.x.ez /usr/lib/rabbitmq/lib/rabbitmq_server-3.6.15/plugins
Enable插件
rabbitmq-plugins enable rabbitmq_delayed_message_exchange
windows同理
Springboot集成rabbitmq實現(xiàn)第二種方式
XdelayConfig.java
package com.example.demo.Xdelay; import java.util.HashMap; import java.util.Map; import org.springframework.amqp.core.Binding; import org.springframework.amqp.core.BindingBuilder; import org.springframework.amqp.core.CustomExchange; import org.springframework.amqp.core.Queue; import org.springframework.context.annotation.Bean; import org.springframework.context.annotation.Configuration; import com.example.demo.Constants.Constants; @Configuration public class XdelayConfig { // 創(chuàng)建一個立即消費隊列 @Bean public Queue immediateQueue() { // 第一個參數(shù)是創(chuàng)建的queue的名字,第二個參數(shù)是是否支持持久化 return new Queue(Constants.IMMEDIATE_QUEUE_XDELAY, true); } @Bean public CustomExchange delayExchange() { Map<String, Object> args = new HashMap<String, Object>(); args.put("x-delayed-type", "direct"); return new CustomExchange(Constants.DELAYED_EXCHANGE_XDELAY, "x-delayed-message", true, false, args); } @Bean public Binding bindingNotify() { return BindingBuilder.bind(immediateQueue()).to(delayExchange()).with(Constants.DELAY_ROUTING_KEY_XDELAY).noargs(); } }
XdelaySender.java
package com.example.demo.Xdelay; import java.text.SimpleDateFormat; import java.util.Date; import org.springframework.amqp.AmqpException; import org.springframework.amqp.core.Message; import org.springframework.amqp.core.MessagePostProcessor; import org.springframework.amqp.rabbit.core.RabbitTemplate; import org.springframework.beans.factory.annotation.Autowired; import org.springframework.stereotype.Service; import com.example.demo.Constants.Constants; import com.example.demo.model.Booking; @Service public class XdelaySender { @Autowired private RabbitTemplate rabbitTemplate; public void send(Booking booking, int delayTime) { System.out.println("delayTime" + delayTime); SimpleDateFormat sdf = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss"); this.rabbitTemplate.convertAndSend(Constants.DELAYED_EXCHANGE_XDELAY, Constants.DELAY_ROUTING_KEY_XDELAY, booking, new MessagePostProcessor() { @Override public Message postProcessMessage(Message message) throws AmqpException { message.getMessageProperties().setDelay(delayTime); System.out.println(sdf.format(new Date()) + " Delay sent."); return message; } }); } }
XdelayReceiver.java
package com.example.demo.Xdelay; import org.springframework.amqp.rabbit.annotation.EnableRabbit; import org.springframework.amqp.rabbit.annotation.RabbitListener; import org.springframework.context.annotation.Configuration; import org.springframework.stereotype.Component; import com.example.demo.Constants.Constants; import com.example.demo.model.Booking; @Component @EnableRabbit @Configuration public class XdelayReceiver { @RabbitListener(queues = Constants.IMMEDIATE_QUEUE_XDELAY) public void get(Booking booking) { System.out.println("Receive" + booking); } }
Test.java
package com.example.demo; import java.util.Date; import org.junit.Test; import org.junit.runner.RunWith; import org.springframework.beans.factory.annotation.Autowired; import org.springframework.boot.test.context.SpringBootTest; import org.springframework.test.context.junit4.SpringRunner; import com.example.demo.Xdelay.XdelaySender; import com.example.demo.model.Booking; @RunWith(SpringRunner.class) @SpringBootTest public class RabbitMqTestApplicationTests { @Autowired XdelaySender xdelaySender; @Test public void test11() { Booking booking = new Booking(); booking.setBookingContent("hhaha"); booking.setBookingName("預(yù)定房子"); booking.setBookingTime(new Date()); booking.setOperatorName("hellen"); xdelaySender.send(booking, 2000); } }
到此這篇關(guān)于Springboot+rabbitmq實現(xiàn)延時隊列的兩種方式的文章就介紹到這了,更多相關(guān)Springboot rabbitmq延時隊列內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
解決javac不是內(nèi)部或外部命令,也不是可運行程序的報錯問題
在學(xué)著使用Java的命令行來編譯java文件的時候,遇到了這個問題,本文主要介紹了解決javac不是內(nèi)部或外部命令,也不是可運行程序的報錯問題,具有一定的參考價值,感興趣的小伙伴們可以參考一下2022-04-04如何在spring官網(wǎng)查找XML基礎(chǔ)配置文件
這篇文章主要介紹了如何在spring官網(wǎng)查找XML基礎(chǔ)配置文件,文中通過示例代碼介紹的非常詳細,對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下2019-10-10一文詳解Java中的可變對象(Mutable)與不可變對象(Immutable)
如何在 Java 中創(chuàng)建不可變對象?我以前以為所有對象都是不可變的,因為如果你改變一個 String 實例的內(nèi)容,它總是會創(chuàng)建一個新的 String 對象并指向該對象,在本文中,我不僅將分享在 Java 中Immutable的步驟,還將討論可變對象與不可變對象及其優(yōu)缺點2023-11-11