springboot的调度服务与异步服务使用详解

2025-02-25 05:50

本文主要是介绍springboot的调度服务与异步服务使用详解,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

《springboot的调度服务与异步服务使用详解》本文主要介绍了Java的ScheduledExecutorService接口和SpringBoot中如何使用调度线程池,包括核心参数、创建方式、自定...

1.调度服务

1.1.JDK之ScheduledExecutorService

讲到调度任务,我们脑海里马上会想到ScheduledExecutorService。

ScheduledExecutorService是 Java java.util.concurrent 包中的一个接口,它继承自 ExecutorService 接口。它主要用于在给定的延迟后运行任务,或者定期地执行任务。这个接口提供了几种安排任务执行的方法,包括单次执行、定期执行和周期性执行。

以下是 ScheduledExecutorService 提供的一些关键方法:

  • schedule(Callable<V> callable, long delay, TimeUnit unit): 安排所提交的 Callable 任务在指定的延迟后运行,返回一个 Future,代表任务的结果。
  • schedule(Runnable command, long delay, TimeUnit unit): 安排所提交的 Runnable 任务在指定的延迟后运行。
  • scheduleAtFixedRate(Runnable command, long initialDelay, long period, TimeUnit unit): 安排所提交的 Runnable 任务在指定的初始延迟后首次启动,并且随后按指定的周期重复执行。
  • scheduleWithFixedDelay(RunnabChina编程le command, long initialDelay, long delay, TimeUnit unit): 安排所提交的 Runnable 任务在指定的初始延迟后首次启动,并且随后在每次执行结束和下次执行开始之间都存在指定的延迟。

然而,如果采用了sprintboot,我们也可以直接采用springboot提供的调试线程池。这其中有一个最大的优势在于,可以利用spring的cron表达式,采用方法注解的方式,不用引入quartz第三方工具。

1.2.springboot使用调度线程池

我们尝试从源代码的角度,来看看springboot提供的调度线程池是怎么创建的。

首先,启用调度配置,启动类加上@EnableScheduling

springboot的自动配置类一般以AutoConfiguration作为后缀,采用模糊搜索ScheduleAutoConfiguration可以找到目标TaskSchedulingAutoConfiguration。

springboot的调度服务与异步服务使用详解

从截图我们可以看出,我们只需在application.yml加入以下的配置就可以启动了

spring:
  task:
    ## 定时任务(业务上定时任务量不多,2个足矣)
    scheduling:
      ## 线程池核心线程数量
      pool:
        size: 2
      ## 线程名称前线
      threadNamePrefix: common-scheduling-

spring对线程池进行二次封闭,最终调用的还是jdk的ThreadPoolExecutor类,我们在该类的构造函数打个断点,可以看到,pool.size参数已经被传参:

springboot的调度服务与异步服务使用详解

1.3.ThreadPoolExecutor核心参数与执行流程

这里有必要先介绍下 ThreadPoolExecutor类的几个函数参数及基本运行机制

构造函数参数:

  • 核心线程数(Core Pool Size): 线程池中始终保持的线程数量,即使它们处于空闲状态。如果任务数量少于核心线程数,线程池会创建新的线程来处理任务,而不会立即回收这些线程。
  • 最大线程数(Maximum Pool Size): 线程池中允许的最大线程数量。如果任务数量超过了核心线程数但小于最大线程数,且工作队列已满,线程池会创建新的线程来处理任务,直到达到最大线程数。
  • 工作队列(Work Queue): 用于存放待执行任务的阻塞队列。当所有核心线程都在忙碌时,新的任务会被放入工作队列中等待执行。
  • 线程工厂(Thread Factory): 用于创建新线程的工厂。它提供了一种方式来定制线程的创建过程,例如设置线程的名称、优先级、是否为守护线程等。
  • 拒绝策略(Rejected Execution Handler): 当任务无法被线程池及时处理时(即当线程池已满,且工作队列已满),线程池会采用拒绝策略来处理新提交的任务。常见的拒绝策略包括:
  • AbortPolicy:抛出 RejectedExecutionException
  • CallerRunsPolicy:由调用者线程运行该任务。
  • DiscardPolicy:静默丢弃任务。
  • DiscardOldestPolicy:丢弃队列中最老的任务,然后尝试再次提交当前任务。
  • 保持活动时间(Keep-Alive Time): 非核心线程空闲时在终止前等待新任务的最长时间。如果线程池允许核心线程空闲,这个参数也适用于核心线程。
  • 时间单位(Time Unit): 与保持活动时间配合使用的时间单位,例如 TimeUnit.SECONDS

执行流程:

  • 如果线程池中的线程数量少于核心线程数,即使有空闲线程,线程池也会优先创建新线程来执行新的任务。
  • 如果线程池中的线程数量达到核心线程数,新的任务会被放入工作队列等待执行。
  • 如果工作队列已满且线程数量少于最大线程数,线程池会创建新的非核心线程来执行任务。
  • 如果工作队列已满且线程数量达到最大线程数,新的任务会被拒绝,线程池会采用拒绝策略来处理。

1.4.自定义线程池

由于spingboot对调度任务线程池的参数支持有限,如果想定制自己的参数,可以注入自己的调度线程池,从代码可看出:

springboot的调度服务与异步服务使用详解

@Configuration
public class ThreadPoolConfig {

    @Bean
    public ScheduledExecutorService scheduledExecutorService() {
        return new ScheduledThreadPoolExecutor(2,
        编程        new NamedThreadFactory("common-schedule"),
                new ThreadPoolExecutor.CallerRunsPolicy()) {
            @Override
            protected void afterExecute(Runnable r, Throwable t) {
                super.afterExecute(r, t);
            }
        };
    }

}

1.5.spring cron注解

Cron 表达式是一种用于描述定时任务触发时间的字符串表达式。它由多个时间字段组成,每个字段代表定时任务在特定时间单位上的触发条件。

1.5.1.cron表达式语法格式

秒 分 时 日 月 星期 年份

其中,每个时间字段都有对应的取值范围和特殊符号。下面是每个时间字段的详细说明:

1、秒(Seconds):取值范围为 0~59。例如,`0/5` 表示从0秒开始,每隔 5 秒触发一次,`*` 表示每秒都触发。

2、分钟(Minutes):取值范围为 0~59。例如,`0/5` 表示从0分钟开始,每隔 5 分钟触发一次,`*` 表示每分钟都触发。

3、小时(Hours):取值范围为 0~23。例如,`0/2` 表示从0小时开始,每隔 2 小时触发一次,`*` 表示每小时都触发。

4、日期(Day of Month):取值范围为 1~31。例如,`1,15` 表示每月的 1 日和 15 日触发,`*` 表示每天都触发。

5、月份(Month):取值范围为 1~12,也可以使用英文缩写 JAN、FEB、MAR 等。例如,`1,6` 表示一月和六月触发,`*` 表示每个月都触发。

6、 星期(Day of Week):取值范围为 1~7,1 表示星期日,2 表示星期一,以此类推,也可以使用英文缩写 SUN、MON、TUE 等。例如,`2-6` 表示星期一到星期五触发,`*` 表示每个星期都触发。

7、年份(Year):可选字段,表示触发条件的年份。例如,`2023` 表示在 2023 年触发,`*` 表示每年都触发。

除了取值范围,Cron 表达式还支持一些特殊符号,用于指定特定的触发条件,例如:

  • - 星号(*):代表所有可能的取值,表示不限制该时间字段的取值范围。
  • - 问号(?):仅在日期和星期字段中使用,表示不指定具体的取值,可以任意匹配。
  • - 斜线(/):表示间隔触发,例如在分钟字段中,"*/5" 表示每隔 5 分钟触发一次。
  • - 逗号(,):用于指定多个取值,例如在小时字段中,"1,3,5" 表示在第 1、3、5 小时触发。
  • - 减号(-):用于指定一个范围,例如在月份字段中,"3-6" 表示三月到六月触发。
  • L : 表示最后,只能出现在星期和每月第几天域,如果在星期域使用1L,意味着在最后的一个星期日触发。
  • W : 表示有效工作日(周一到周五),只能出现在每月第几日域,系统将在离指定日期的最近的有效工作日触发事件。注意一点,W的最近寻找不会跨过月份
  • LW : 这两个字符可以连用,表示在某个月最后一个工作日,即最后一个星期五。

# : 用于确定每个月第几个星期几,只能出现在每月第几天域。例如在1#3,表示某月的第三个星期日。

1.5.2.cron表达式示例

作用表达式
每隔5秒执行一次*/5 * * * * ?
每天中午12点执行一次0 0 12 * * ?

2024年的每天上午10:00执行一次
0 0 10 * * ? 2023
每天下午6点到下午6:59每分钟执行一次0 * 18 * * ?
每月的最后一个星期五上午10:30执行一次0 30 10 ? * 6L
每月的第4个星期五上午10:25执行一次0 25 10 ? * 6#4
每天上午8点,下午1点,4点执行一次0 0 8,13,16 * * ?

2.异步任务

2.1.springboot配置

软件开发中,有些任务比较耗时但又无需马上获得结果。一般地,这些任务我们可以采用独立线程池异步执行。如果程序基于springboot环境,我们有现成的工具可以使用。

首先,我们需要在程序启动入口类增加@EnableAsync。

借着,我们尝试从源代码的角度,来看看springboot提供的异步线程池是怎么创建的。

从springboot的命名风格可知,通过模糊搜索TaskAutoConfiguration,可以找到TaskExecutionAutoConfiguration,如下:

springboot的调度服务与异步服务使用详解

从源代码可知,只需在application.yml配置如下参数即可:

spring:    
    execution:
      pool:
        coreSize: 4
        queueCapacity: 64
        maxSize: 8
        ## 禁止空闲线程关闭,保证最少有core个存活线程
        allowCoreThreadTimeout: false
        keepAlive: 300s
      threadNamePrefix: common-async_task-

这些参数跟jdk的ThreadPoolExecutor类的构造参数非常相似,这里不作解析 。

2.2.使用异步任务

使用方法,只要在目标方法的签名加上@Async

springboot的调度服务与异步服务使用详解

然而,执行结果却出乎意外(在main主线程上执行,没有异步执行)

springboot的调度服务与异步服务使用详解

熟悉springaop机制的同学,马上知道这是因为异步任务底层是基于动态代理机制实现的。Spring AOP 代理只有在通过 Spring 容器获取 Bean 时才会创建。

当在同一个类内部调用一个方法时,调用的是原始对象,而不是代理对象。因此,内部调用不会经过 Spring AOP 代理,也就无法触发异步执行。解决这个问题最简单的方法是用一个新的类来管理异步执行方法。

springboot的调度服务与异步服务使用详解

问题解决

springboot的调度服务与异步服务使用详解

2.3.模拟系统繁忙进行性能测试

我们尝试模拟一些极端情况,系统处理不过来的情况。修改上面的配置,改为

pool:
  coreSize: 1
  queueCapacity: 1
  maxSize: 8

同时,异步执行增加时间延迟来模拟耗时任务

@Component
@Slf4j
class AsyncTaskHandler {

    @Async
    public void busyTask1() {
        try {
            Thread.sleep(5000);
        } catch (InterruptedException ignored) {
        }
        log.info("----------busyTask1---------");
    }

    @Async
    public void busyTask2() {
        try {
            Thread.sleep(5000);
        } catch (InterruptedException ignored) {
        }
        log.info("----------busyTask2---------");
    }

}

执行结果会出现报错(线程数已达到最大数量,且任务队列已满,无法添加新任务)

springboot的调度服务与异步服务使用详解

调度任务执行频率是可预见的,有多少个任务,执行频率,开发可知,核心数量,最大数量,队列容量比较好设定。而异步执行频率很大程度是由系统的使用者(用户)决定的,因此这些参数需要根据流量动态修改。

2.4.异步线程池拒绝策略

如果不想把 queueCapacity和maxSize都设置成很大的话,我们可以考虑修改下线程池的拒绝策略。最妥当的方式是,既然异步不了,那就"熔断"成同步,直接在调用者所在的业务线程执行。然而,springboot没有提供相应的配置项。为此,我们只能关闭springboot的自动配置了。

从代码可看出,只要提供一个Executor实例,并且名字叫taskExecutor即可。

springboot的调度服务与异步服务使用详解

话不多说,上代码

@Configuration
public class ThreadPoolConfig {

    private final int core = Runtime.getRChina编程untime().availablePCdKNzrSKgXrocessors();

    /**
     * springboot 自动注入的异步执行线程池,拒绝策略为丢弃,难以配置maxPoolSize参数
     * @see TaskExecutionAutoConfiguration#taskExecutorBuilder
     */
    @Bean(name = "taskExecutor")
    public ThreadPoolTaskExecutor threadPoolTaskExecutor(TaskExecutionProperties properties) {
        ThreadPoolTaskExecutor executor = new ThreadPoolTaskExecutor();
        executor.setCorePoolSize(properties.getPool().getCoreSize());
        executor.setThreadNamePrefix(properties.getThreadNamePrefix());
        executor.setMaxPoolSize(properties.getPool().getMaxSize());
        executor.setQueueCapacity(properties.getPool().getQueueCapacity());
        executor.setKeepAliveSeconds((int) properties.getPool().getKeepAlive().toSeconds());
        executor.setAllowCoreThreadTimeOut(properties.getPool().isAllowCoreThreadTimeout());
        // 超过队列容量,则在业务线程上执行
        executor.setRejectedExecutionHandler(new ThreadPoolExecutor.CallerRunsPolicy());
        return executor;
    }

}

重新运行程序,可以看到,当任务超过线程池负载的时候,多余的线程会在调用线程http://www.chinasem.cn上执行,变为同步代码

springboot的调度服务与异步服务使用详解

个人认为:使用springboot创建的线程池,代码也只是稍微简化一点点。

采用原生线程池,每个业务代码必须实现Runnable接口,而使用springboot的异步线程池,只需以方法注解的形式即可,底层aop会生成对应的代理方法。但要确保避免内部方法调用导致异步逻辑失效。

总结

以上为个人经验,希望能给大家一个参考,也希望大家多多支持China编程(www.chinasem.cn)。

这篇关于springboot的调度服务与异步服务使用详解的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1153532

相关文章

java中使用POI生成Excel并导出过程

《java中使用POI生成Excel并导出过程》:本文主要介绍java中使用POI生成Excel并导出过程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录需求说明及实现方式需求完成通用代码版本1版本2结果展示type参数为atype参数为b总结注:本文章中代码均为

springboot简单集成Security配置的教程

《springboot简单集成Security配置的教程》:本文主要介绍springboot简单集成Security配置的教程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,... 目录集成Security安全框架引入依赖编写配置类WebSecurityConfig(自定义资源权限规则

Java的IO模型、Netty原理解析

《Java的IO模型、Netty原理解析》Java的I/O是以流的方式进行数据输入输出的,Java的类库涉及很多领域的IO内容:标准的输入输出,文件的操作、网络上的数据传输流、字符串流、对象流等,这篇... 目录1.什么是IO2.同步与异步、阻塞与非阻塞3.三种IO模型BIO(blocking I/O)NI

java中反射(Reflection)机制举例详解

《java中反射(Reflection)机制举例详解》Java中的反射机制是指Java程序在运行期间可以获取到一个对象的全部信息,:本文主要介绍java中反射(Reflection)机制的相关资料... 目录一、什么是反射?二、反射的用途三、获取Class对象四、Class类型的对象使用场景1五、Class

SpringBoot中封装Cors自动配置方式

《SpringBoot中封装Cors自动配置方式》:本文主要介绍SpringBoot中封装Cors自动配置方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录SpringBoot封装Cors自动配置背景实现步骤1. 创建 GlobalCorsProperties

Spring事务中@Transactional注解不生效的原因分析与解决

《Spring事务中@Transactional注解不生效的原因分析与解决》在Spring框架中,@Transactional注解是管理数据库事务的核心方式,本文将深入分析事务自调用的底层原理,解释为... 目录1. 引言2. 事务自调用问题重现2.1 示例代码2.2 问题现象3. 为什么事务自调用会失效3

在java中如何将inputStream对象转换为File对象(不生成本地文件)

《在java中如何将inputStream对象转换为File对象(不生成本地文件)》:本文主要介绍在java中如何将inputStream对象转换为File对象(不生成本地文件),具有很好的参考价... 目录需求说明问题解决总结需求说明在后端中通过POI生成Excel文件流,将输出流(outputStre

golang 日志log与logrus示例详解

《golang日志log与logrus示例详解》log是Go语言标准库中一个简单的日志库,本文给大家介绍golang日志log与logrus示例详解,感兴趣的朋友一起看看吧... 目录一、Go 标准库 log 详解1. 功能特点2. 常用函数3. 示例代码4. 优势和局限二、第三方库 logrus 详解1.

Spring Boot结成MyBatis-Plus最全配置指南

《SpringBoot结成MyBatis-Plus最全配置指南》本文主要介绍了SpringBoot结成MyBatis-Plus最全配置指南,包括依赖引入、配置数据源、Mapper扫描、基本CRUD操... 目录前言详细操作一.创建项目并引入相关依赖二.配置数据源信息三.编写相关代码查zsRArly询数据库数

SpringBoot实现MD5加盐算法的示例代码

《SpringBoot实现MD5加盐算法的示例代码》加盐算法是一种用于增强密码安全性的技术,本文主要介绍了SpringBoot实现MD5加盐算法的示例代码,文中通过示例代码介绍的非常详细,对大家的学习... 目录一、什么是加盐算法二、如何实现加盐算法2.1 加盐算法代码实现2.2 注册页面中进行密码加盐2.