当前位置:

首页 > 编程开发 > RabbitMQ延时队列实现方法

RabbitMQ延时队列实现方法

在Docker部署的RabbitMQ中,实现延时队列主要有两种方法。一是利用死信交换机与消息TTL机制,消息过期后自动路由至目标队列,适用于固定延迟和高并发场景。二是安装官方延时消息插件,通过特殊交换机支持动态、精确的延迟投递,实现更灵活但需额外安装。两种方案各有优劣,可根据具体业务需求选择。

在基于CentOS或Rocky Linux的Docker环境中部署RabbitMQ 3.8后,实现延时队列是一个常见的需求。延时队列的核心应用场景非常明确,比如处理订单的超时自动取消,或者轮询获取支付服务的状态。要实现它,绕不开一个核心概念:死信。

需要知道什么是死信

死信是什么

死信(Dead Letter Message),顾名思义,就是那些在RabbitMQ中“流离失所”的消息——它们因为某些原因无法被正常投递或消费。但RabbitMQ并不会简单地将它们丢弃,而是会贴上一个“死信”标签,然后自动将其重新发布到一个你预先配置好的死信交换机(Dead Letter Exchange, DLX)。最终,这些消息会被DLX路由到一个专门的死信队列(Dead Letter Queue, DLQ)中等待后续处理。

那么,消息在什么情况下会“死亡”呢?主要有以下四种触发条件:

序号 触发条件 具体说明 常见场景
1 消费者拒绝消息 消费者调用 basic.reject 或 basic.nack,并且设置 requeue=false 业务处理失败,不想重试
2 消息过期(TTL) 消息设置了存活时间(x-message-ttl 或消息属性 expiration),到期后 延迟消息最常用场景
3 队列达到最大长度限制 队列设置了 x-max-length(最大消息数),新消息进来时把最老的消息挤出去 队列爆满
4 队列达到最大字节数限制 队列设置了 x-max-length-bytes(最大占用字节),挤出最老的消息 大消息导致队列容量超限

死信交换机与RepulishMessageRecoverer区别

这里需要厘清一个容易混淆的点:RabbitMQ原生的死信交换机(DLX)机制,和Spring AMQP提供的RepublishMessageRecoverer工具,虽然目的都是处理“问题消息”,但运作层面和时机截然不同。

维度 死信交换机(DLX) RepublishMessageRecoverer
所属层级 RabbitMQ Broker(服务器端) 原生机制 Spring AMQP(应用层) 提供的工具类
触发时机 消息成为死信时(4种情况:拒绝+不重入队、TTL过期、队列长度超限、字节数超限) 消费者本地重试次数耗尽后抛出异常时
触发者 RabbitMQ 服务器自动触发 Spring 的 ErrorHandler + MessageRecoverer 触发
消息处理方式 Broker 直接把原消息重新发布到 DLX Spring 先 ACK 原消息(告诉 Broker 已消费),然后用 RabbitTemplate 重新发布一份新消息
是否走 DLX 机制 直接走 DLX 不走 DLX(因为已经 ACK 了)
能否携带额外信息 只能带 x-death header(记录几次死信) 可以自动添加 x-exception-stacktrace、x-exception-message 等丰富异常信息
灵活性 中等(只能配置在队列上) 很高(可以指定任意交换机 + RoutingKey)
适用场景 1. TTL 过期(延迟消息) 2. 队列超长 3. 手动 reject + 不重入队 消费业务异常后,需要把失败消息转到专门的错误队列
配置 需要在yaml文件中配置不可重新入队
default-requeue-rejected: false
需要在yaml文件中配置不可重新入队和最大重试
default-requeue-rejected: false
retry: enabled: true
max-attempts: 5

1.死信队列+TTL的实现

理解了死信,尤其是“消息TTL过期会成为死信”这一条,实现延时队列的思路就清晰了:让消息在一个队列中等待指定时间(TTL),过期后成为死信,再被自动路由到真正的目标队列,从而实现延迟消费。

实现结构:

RabbitMQ延时队列实现方法

具体实现上,通常会在消费者服务中,使用@RabbitListener注解来声明并绑定最终消费消息的死信队列和交换机:

@RabbitListener(bindings = @QueueBinding(
        value=@Queue(name="dlx.queue",durable =" true"),
        exchange = @Exchange(name="dlx.direct"),
        key = {"hi"}
))
public void listenDlxQueue(String message)throws Exception{
    log.info("消费者监听到 dlx.queue的消息,{}",message);
}

然后,在一个配置类(例如NormalConfiguration)中,通过@Bean声明一个普通的队列和交换机,并将这个普通队列绑定到死信交换机上:

import org.springframework.amqp.core.*;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
@Configuration
public class NormalConfiguration {
    @Bean
    public DirectExchange normalExchange(){
        return  new DirectExchange("normal.direct");
    }
    @Bean
    public Queue normalQueue(){
        return  QueueBuilder
                .durable("normal.queue")
                .deadLetterExchange("dlx.direct") // 关键:指定死信交换机
                .build();
    }
    //推荐依赖注入的方式
    //需要注意代码规范,方法名应为小驼峰,反之,会找不到bean
    @Bean
    public Binding normalExchangeBinding(Queue normalQueue, DirectExchange normalExchange){
        return  BindingBuilder
                .bind(normalQueue)
                .to(normalExchange)
                .with("hi");
    }
}

发送延迟消息时,通过setExpiration方法为消息设置存活时间(毫秒):

@Test
public void testSendDelayMessage() throws Exception {
    rabbitTemplate.convertAndSend("normal.direct", "hi", "hello everyone__", message -> {
        message.getMessageProperties().setExpiration("10000"); // 延迟10秒
        return message;
    });
}

2.延时消息插件

使用死信队列+TTL的方式虽然可行,但配置起来略显繁琐,尤其是需要多种不同延迟时长时,可能需要为每个时长创建单独的队列。为此,RabbitMQ官方提供了一个更优雅的解决方案:延时消息插件(rabbitmq_delayed_message_exchange)。

这个插件的原理是引入了一种特殊类型的交换机。消息发送到这种交换机后,会被插件暂存起来,直到预设的延迟时间到达,才会被投递到目标队列。这大大简化了延迟消息的处理流程。

官方文档: https://www.rabbitmq.com/blog/2015/04/16/scheduling-messages-with-rabbitmq

插件下载地址(GitHub): rabbitmq/rabbitmq-delayed-message-exchange (版本需与RabbitMQ 3.8.17匹配)

安装插件

对于Docker安装的RabbitMQ,需要先找到插件数据卷的挂载点:

docker volume inspect mq-plugins

从返回结果中找到Mountpoint路径(例如/var/lib/docker/volumes/mq-plugins/_data),将下载的插件文件复制到该目录下。然后进入容器启用插件:

docker exec -it mq rabbitmq-plugins enable rabbitmq_delayed_message_exchange

基于注解方式

启用插件后,声明交换机时,通过delayed = "true"属性将其标记为延迟交换机即可:

@RabbitListener(bindings = @QueueBinding(
        value = @Queue(value = "delay.queue", durable = "true"),
        exchange = @Exchange(value = "delay.direct", delayed = "true"), // 声明为延迟交换机
        key = "hidelay"
))
public void listenDelayQueue(String msg) {
    log.info("delay.queue:" + msg);
}

基于@Bean方式

同样,在@Bean声明方式中,使用ExchangeBuilder的.delayed()方法:

@Configuration
public class DirectConfiguration {
    @Bean
    public DirectExchange delayExchange() {
        return ExchangeBuilder
                .directExchange("delay.direct")
                .delayed() // 关键:这里声明为延迟交换机
                .durable(true)
                .build();
    }
    @Bean
    public Queue delayedQueue() {
        return new Queue("delay.queue");
    }
    @Bean
    public Binding delayQueueBinding() {
        return BindingBuilder.bind(delayedQueue()).to(delayExchange()).with("delay");
    }
}

发送消息时,使用setDelay方法设置延迟时间(毫秒):

@Test
public void testSendDelayMessageByplugin() {
    rabbitTemplate.convertAndSend("delay.direct", "hidelay", "hello", new MessagePostProcessor() {
        @Override
        public Message postProcessMessage(Message message) throws AmqpException {
            message.getMessageProperties().setDelay(10000); // 延迟10秒
            return message;
        }
    });
    log.info("消息发送成功");
}

总结与对比

两种方案各有优劣,选择时需要根据实际业务场景权衡:

维度 死信队列 + TTL(DLX + TTL) 延时消息插件(x-delayed-message)
是否需要插件 ❌ 不需要(原生功能) ✅ 需要安装 rabbitmq_delayed_message_exchange
实现原理 消息设置 TTL 过期 → 成为死信 → 路由到 DLX → 进入目标队列 发布消息时带 x-delay 头 → 插件内部暂存 → 到期自动投递
延迟时间灵活性 ❌ 固定延迟(通常每种延迟时间建一个队列) ✅ 支持任意/动态延迟(毫秒级 per-message)
消息存储位置 存放在普通队列中(会占用队列资源) 存放在插件内部(Mnesia 表)
延迟精确度 一般(尤其是高并发时可能有误差) 较高(插件定时器更精确)
消息量支持 ✅ 极高(千万级轻松支持) ❌ 有上限(Mnesia 内存/磁盘限制)
性能影响 队列会膨胀,内存/磁盘压力大 插件专用存储,普通队列不膨胀
实现复杂度 中等(需配置 DLX、TTL、多个队列) 简单(一个特殊交换机 + x-delay 参数)
管理服务支持 ✅ 几乎所有云厂商都支持 ❌ 部分云厂商(阿里云、腾讯云等)不支持插件
能否取消延迟 ❌ 较难 ✅ 相对容易(删除未到期消息)
适用场景 固定延迟、超高并发、大消息量(如订单 30 分钟超时) 动态延迟、少量精确延时(如 7 秒后、3 小时 15 分后)

简单来说,如果你的业务延迟时间是固定的、且并发量巨大,死信队列方案更稳定、兼容性更好。如果你的业务需要高度灵活、动态的延迟时间,并且对精度要求较高,那么官方插件是更简洁高效的选择,前提是你的运维环境允许安装插件。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
作者最新文章
编程开发
相关文章 更多
rabbitmq之无法自动创建队列的问题及解决过程
rabbitmq之无法自动创建队列的问题及解决过程

背景 最近在处理一个子项目时,遇到了一个挺有意思的小问题——RabbitMQ只用来发送消息到队列,但没有监听消费端。结果项目启动后,队列并没有像预期那样自动创建出来。 后来跟GPT聊了聊,找到了一个简单有效的解决办法,实测可行。这里分享一下思路和代码。 思路 问题出在:RabbitMQ的队列只有在第

查看更多
精品专题 更多
装机必备
装机必备

正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

Windows
Windows

正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

PDF教程
PDF教程

正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

Mac软件 更多
Postman macOS版
Postman macOS版
Mac

Postman是一套面向API全生命周期的开发与测试平台,可在Mac上发送和调试多种协议请求,管理集合、环境及认证信息,并完成脚本测试、模拟服务、监控、文档发布和团队协作。它适合开发、测试及运维人员使用,提供个人免费方案。

Docker Desktop macOS版
Docker Desktop macOS版
Mac

Docker Desktop 是 Docker 官方为 Mac 提供的容器开发环境,集成 Docker Engine、命令行工具、Compose、Build、Kubernetes 与图形化管理界面。

Android Studio macOS版
Android Studio macOS版
Mac

Android Studio 是 Google 面向安卓应用开发提供的官方集成开发环境,基于 IntelliJ IDEA 构建。它整合智能代码编辑、Gradle 构建、界面预览、设备模拟、性能分析、调试测试及 APK 分析等工具。

WINDOWS 更多
PixPix 网页版
PixPix 网页版
Windows

PixPix 是面向品牌、卖家和内容团队的在线 AI 图片视频创作平台,提供图视频 Agent、无限画布、图片生成、视频生成、自然语言编辑及商品套图、产品精修和带货视频等电商工具。

Postman Windows版
Postman Windows版
Windows

Postman 是面向 API 全生命周期的开发与协作平台。Windows 桌面版可用于构建和发送 HTTP、GraphQL、gRPC、WebSocket、MQTT 等请求,并提供环境变量、集合、脚本测试、模拟服务、监控、文档及团队工作区等

Docker Desktop Windows版
Docker Desktop Windows版
Windows

Docker Desktop 为 Windows 开发者提供集成式容器环境,内置 Docker Engine、命令行工具、Compose、Build 与 Kubernetes 等组件,可在本机完成镜像构建、容器运行、日志查看和资源管理。