Spring Boot整合Redis通过Zset数据类型+定时任务实现延迟队列

本文主要是介绍Spring Boot整合Redis通过Zset数据类型+定时任务实现延迟队列,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在这里插入图片描述

😄 19年之后由于某些原因断更了三年,23年重新扬帆起航,推出更多优质博文,希望大家多多支持~
🌷 古之立大事者,不惟有超世之才,亦必有坚忍不拔之志
🎐 个人CSND主页——Micro麦可乐的博客
🐥《Docker实操教程》专栏以最新的Centos版本为基础进行Docker实操教程,入门到实战
🌺《RabbitMQ》专栏主要介绍使用JAVA开发RabbitMQ的系列教程,从基础知识到项目实战
🌸《设计模式》专栏以实际的生活场景为案例进行讲解,让大家对设计模式有一个更清晰的理解
💕《Jenkins实战》专栏主要介绍Jenkins+Docker的实战教程,让你快速掌握项目CI/CD,是2024年最新的实战教程
🌞《Spring Boot》专栏主要介绍我们日常工作项目中经常应用到的功能以及技巧,代码样例完整
如果文章能够给大家带来一定的帮助!欢迎关注、评论互动~

Spring Boot整合Redis通过Zset数据类型+定时任务实现延迟队列

  • 前言
  • redis常见的实现延迟队列的方案
    • ❶ 通过过期key通知实现
    • ❷ 通过Zset数据类型+定时任务实现
    • ❸ Redisson实现延迟队列
  • Zset数据延迟队列的原理
  • 开始实现
    • 步骤一:添加依赖
    • 步骤二:配置Redis
    • 步骤三:创建一个简单任务模型
    • 步骤四:创建 Redis 配置类
    • 步骤五:创建线程池配置类
    • 步骤六:创建延迟队列服务类
    • 步骤七:创建测试Controller
  • 开始测试
  • 总结

前言

本文对应源码下载地址: https://download.csdn.net/download/lhmyy521125/89412365 无需积分

在我们项目开发中,我们经常需要在特定时间后执行某些任务,例如订单超时未支付自动取消、资金余额低于限额提醒、延时消息发送等。延迟队列是一种非常实用的解决方案,而Redis也具备延迟队列的功能,这里博主将和大家分享基于RedisZset数据类型+定时任务实现延迟队列

redis常见的实现延迟队列的方案

❶ 通过过期key通知实现

开启rediskey过期通知,然后在业务中给key设置过期时间,到了过期时间后redis会自动的将过期的key消息推送给监听者,从而实现延迟任务

首先redis配置文件开启过期通知

notify-keyspace-events Ex

Java项目中通过继承 KeyExpirationEventMessageListener 监听器重写 onMessage 方法实现消息的接收

@Component
@Slf4j
public class RedisExpireKeyService extends KeyExpirationEventMessageListener {public RedisExpireKeyService(RedisMessageListenerContainer listenerContainer) {super(listenerContainer);}/*** 监听过期的key**/@Overridepublic void onMessage(Message message, byte[] pattern) {String expireKey = message.toString();//执行具体的业务System.out.println("监听到key=" + expireKey + ",已经过期");}
}

❷ 通过Zset数据类型+定时任务实现

本文将介绍使用这种方案,这里暂时先不赘述,后面会详细介绍

❸ Redisson实现延迟队列

·Redisson· 提供了 ·RDelayedQueue· 接口来实现延迟队列功能,我们可以通过它轻松实现延迟任务的处理,本质上Redisson提供的延迟队列底层也是基于 Zset 数据结构实现的

博主将在下次再给大家分享基于Redisson实现延迟队列的教程,这里大家只需要先有个概念。
在这里插入图片描述

Zset数据延迟队列的原理

延迟队列是一种特殊的队列,其元素在加入队列时会附带一个延迟时间,只有在延迟时间到达之后,元素才会被处理。我们可以利用 Redis 的有序集合(Sorted Set)来实现延迟队列,因为 Redis 的有序集合支持为每个元素设置一个分数(score),并按照分数进行排序。我们将延迟任务的执行时间作为分数,当时间到达时,取出相应的元素进行处理。

实现步骤

  • 将任务加入延迟队列:将任务及其执行时间戳作为元素和分数,存入 Redis 的有序集合
  • 轮询检查任务:定期检查有序集合中是否有到期的任务
  • 处理到期任务:取出到期任务并执行相应操作

开始实现

步骤一:添加依赖

首先,确保你已经安装并配置好了 Redis 服务器,并构建你的 Spring Boot 项目,在pom.xml中引入依赖

<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-web</artifactId>
</dependency>
<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-data-redis</artifactId>
</dependency>
<dependency><groupId>org.projectlombok</groupId><artifactId>lombok</artifactId><optional>true</optional>
</dependency>

步骤二:配置Redis

Spring Boot配置文件设置 Redis 的连接参数

spring:#redisredis:# 地址host: 127.0.0.1# 端口,默认为6379port: 6379# 数据库索引database: 0# 密码password:# 连接超时时间timeout: 10slettuce:pool:# 连接池中的最小空闲连接min-idle: 5# 连接池中的最大空闲连接max-idle: 8# 连接池的最大数据库连接数max-active: 20# #连接池最大阻塞等待时间(使用负值表示没有限制)max-wait: -1ms

步骤三:创建一个简单任务模型

创建一个简单的任务模型 DelayedTask

import lombok.Data;@Data
public class DelayedTask {private String id;private String message;
}

步骤四:创建 Redis 配置类

创建一个配置类 RedisConfig 用于配置 RedisTemplate

import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
import org.springframework.data.redis.connection.RedisConnectionFactory;
import org.springframework.data.redis.core.RedisTemplate;
import org.springframework.data.redis.serializer.GenericJackson2JsonRedisSerializer;
import org.springframework.data.redis.serializer.StringRedisSerializer;@Configuration
public class RedisConfig {@Beanpublic RedisTemplate<String, Object> redisTemplate(RedisConnectionFactory factory) {RedisTemplate<String, Object> template = new RedisTemplate<>();template.setConnectionFactory(factory);template.setKeySerializer(new StringRedisSerializer());template.setValueSerializer(new GenericJackson2JsonRedisSerializer());return template;}
}

步骤五:创建线程池配置类

创建一个配置类 ThreadPoolConfig 用于配置线程池:

import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
import org.springframework.scheduling.annotation.EnableScheduling;
import org.springframework.scheduling.concurrent.ThreadPoolTaskExecutor;
import java.util.concurrent.Executor;@Configuration
@EnableScheduling
public class ThreadPoolConfig {@Beanpublic Executor taskExecutor() {ThreadPoolTaskExecutor executor = new ThreadPoolTaskExecutor();executor.setCorePoolSize(10);executor.setMaxPoolSize(20);executor.setQueueCapacity(500);executor.setThreadNamePrefix("DelayedTaskExecutor-");executor.initialize();return executor;}
}

步骤六:创建延迟队列服务类

创建 DelayedQueueService 来处理任务的添加和执行,并使用线程池进行调度:

import org.springframework.data.redis.core.RedisTemplate;
import org.springframework.data.redis.core.ZSetOperations;
import org.springframework.scheduling.annotation.Scheduled;
import org.springframework.stereotype.Service;import javax.annotation.Resource;
import java.util.Set;
import java.util.concurrent.Executor;@Service
public class DelayedQueueService {@Resourceprivate RedisTemplate<String, Object> redisTemplate;@Resourceprivate Executor taskExecutor;private static final String DELAYED_QUEUE = "delayed_queue";public void addTask(DelayedTask task, long delay) {long executeTime = System.currentTimeMillis() + delay;redisTemplate.opsForZSet().add(DELAYED_QUEUE, task, executeTime);System.out.println("添加任务编号: " + task.getId() + " 将在 " + delay + "ms 执行");}@Scheduled(fixedRate = 1000)public void processTasks() {long currentTime = System.currentTimeMillis();Set<ZSetOperations.TypedTuple<Object>> tasks = redisTemplate.opsForZSet().rangeByScoreWithScores(DELAYED_QUEUE, 0, currentTime);if (tasks != null && !tasks.isEmpty()) {for (ZSetOperations.TypedTuple<Object> task : tasks) {DelayedTask delayedTask = (DelayedTask) task.getValue();System.out.println("处理任务: " + delayedTask.getId());redisTemplate.opsForZSet().remove(DELAYED_QUEUE, delayedTask);taskExecutor.execute(() -> processTask(delayedTask));}}}private void processTask(DelayedTask task) {// 在这里添加任务处理的逻辑System.out.println("任务执行: 任务编号" + task.getId() + " + ,message: " + task.getMessage());}
}

步骤七:创建测试Controller

创建一个简单的控制器 TaskController 来测试我们的延迟队列:

import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.web.bind.annotation.PostMapping;
import org.springframework.web.bind.annotation.RequestBody;
import org.springframework.web.bind.annotation.RequestParam;
import org.springframework.web.bind.annotation.RestController;@RestController
public class TaskController {@Autowiredprivate DelayedQueueService delayedQueueService;@PostMapping("/addTask")public String addTask(@RequestBody DelayedTask task, @RequestParam long delay) {delayedQueueService.addTask(task, delay);return "任务添加成功";}
}

开始测试

完成上述代码编写后,我们启动 Spring Boot ,使用调试工具进行测试
在这里插入图片描述
观察控制台输出
在这里插入图片描述
OK,至此我们通过Redis的Zset数据类型+定时任务实现延迟队列的功能已经完成!

总结

到这里相信小伙伴们已经了解了如何使用 Spring BootRedis 实现一个简单的延迟队列,并使用线程池来执行定时任务以提高效率。延迟队列能够有效地处理需要在特定时间点或延迟一段时间后执行的任务。在实际应用中,可以根据需求进一步扩展和优化该方案,例如增加任务重试机制错误处理等。

本文的代码主要是演示使用,小伙伴们可以根据自己业务需求进行修改升级。如果本文对您有所帮助,希望 一键三连 给博主一点点鼓励,如果您有任何疑问或建议,请随时留言讨论。


在这里插入图片描述

这篇关于Spring Boot整合Redis通过Zset数据类型+定时任务实现延迟队列的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1045405

相关文章

SpringBoot3实现Gzip压缩优化的技术指南

《SpringBoot3实现Gzip压缩优化的技术指南》随着Web应用的用户量和数据量增加,网络带宽和页面加载速度逐渐成为瓶颈,为了减少数据传输量,提高用户体验,我们可以使用Gzip压缩HTTP响应,... 目录1、简述2、配置2.1 添加依赖2.2 配置 Gzip 压缩3、服务端应用4、前端应用4.1 N

Java编译生成多个.class文件的原理和作用

《Java编译生成多个.class文件的原理和作用》作为一名经验丰富的开发者,在Java项目中执行编译后,可能会发现一个.java源文件有时会产生多个.class文件,从技术实现层面详细剖析这一现象... 目录一、内部类机制与.class文件生成成员内部类(常规内部类)局部内部类(方法内部类)匿名内部类二、

SpringBoot实现数据库读写分离的3种方法小结

《SpringBoot实现数据库读写分离的3种方法小结》为了提高系统的读写性能和可用性,读写分离是一种经典的数据库架构模式,在SpringBoot应用中,有多种方式可以实现数据库读写分离,本文将介绍三... 目录一、数据库读写分离概述二、方案一:基于AbstractRoutingDataSource实现动态

Python FastAPI+Celery+RabbitMQ实现分布式图片水印处理系统

《PythonFastAPI+Celery+RabbitMQ实现分布式图片水印处理系统》这篇文章主要为大家详细介绍了PythonFastAPI如何结合Celery以及RabbitMQ实现简单的分布式... 实现思路FastAPI 服务器Celery 任务队列RabbitMQ 作为消息代理定时任务处理完整

Springboot @Autowired和@Resource的区别解析

《Springboot@Autowired和@Resource的区别解析》@Resource是JDK提供的注解,只是Spring在实现上提供了这个注解的功能支持,本文给大家介绍Springboot@... 目录【一】定义【1】@Autowired【2】@Resource【二】区别【1】包含的属性不同【2】@

springboot循环依赖问题案例代码及解决办法

《springboot循环依赖问题案例代码及解决办法》在SpringBoot中,如果两个或多个Bean之间存在循环依赖(即BeanA依赖BeanB,而BeanB又依赖BeanA),会导致Spring的... 目录1. 什么是循环依赖?2. 循环依赖的场景案例3. 解决循环依赖的常见方法方法 1:使用 @La

Java枚举类实现Key-Value映射的多种实现方式

《Java枚举类实现Key-Value映射的多种实现方式》在Java开发中,枚举(Enum)是一种特殊的类,本文将详细介绍Java枚举类实现key-value映射的多种方式,有需要的小伙伴可以根据需要... 目录前言一、基础实现方式1.1 为枚举添加属性和构造方法二、http://www.cppcns.co

使用Python实现快速搭建本地HTTP服务器

《使用Python实现快速搭建本地HTTP服务器》:本文主要介绍如何使用Python快速搭建本地HTTP服务器,轻松实现一键HTTP文件共享,同时结合二维码技术,让访问更简单,感兴趣的小伙伴可以了... 目录1. 概述2. 快速搭建 HTTP 文件共享服务2.1 核心思路2.2 代码实现2.3 代码解读3.

Elasticsearch 在 Java 中的使用教程

《Elasticsearch在Java中的使用教程》Elasticsearch是一个分布式搜索和分析引擎,基于ApacheLucene构建,能够实现实时数据的存储、搜索、和分析,它广泛应用于全文... 目录1. Elasticsearch 简介2. 环境准备2.1 安装 Elasticsearch2.2 J

Java中的String.valueOf()和toString()方法区别小结

《Java中的String.valueOf()和toString()方法区别小结》字符串操作是开发者日常编程任务中不可或缺的一部分,转换为字符串是一种常见需求,其中最常见的就是String.value... 目录String.valueOf()方法方法定义方法实现使用示例使用场景toString()方法方法