java Fork/Join 框架的理解以及简单运用

2024-08-26 14:52

本文主要是介绍java Fork/Join 框架的理解以及简单运用,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Fork/Join 是一种并行计算模式,主要用于将任务分解为更小的子任务(Fork),递归地解决这些子任务,然后将结果合并(Join)以获得最终结果。这种模式非常适合于可以并行处理的任务,特别是那些可以分解为多个独立子问题的任务。

### Fork/Join 框架的关键概念:

1. **任务(Task)**:表示可以执行的工作单元。在 Java 中,可以通过实现 `Callable` 接口来创建任务。

2. **工作窃取(Work Stealing)**:这是一种算法,工作线程可以从其他线程的队列中窃取任务来执行,以此来平衡负载和提高资源利用率。

3. **Fork**:将一个复杂的任务分解为两个或多个更小的任务。

4. **Join**:等待一个或多个任务完成,并合并它们的结果。

5. **递归**:Fork/Join 模式通常与递归结合使用,即每个子任务可能进一步分解为更小的子任务。

6. **线程池**:Fork/Join 模式通常与线程池一起使用,以便有效地管理线程资源。

### Java 中的 Fork/Join 框架:

Java 7 引入了 `java.util.concurrent` 包中的 `ForkJoinPool` 类,它是专门为执行 Fork/Join 任务设计的线程池。使用 `ForkJoinPool` 可以简化并行任务的执行和管理。

以下是使用 Java Fork/Join 框架的基本步骤:

1. **创建 ForkJoinPool**:根据需要创建一个 `ForkJoinPool` 实例。

2. **定义任务**:实现 `Callable` 接口或继承 `RecursiveTask` 或 `RecursiveAction` 类来定义任务。`RecursiveTask` 有返回值,而 `RecursiveAction` 没有返回值。

3. **分解任务**:在任务的 `call` 方法中实现任务的分解逻辑。

4. **执行任务**:使用 `ForkJoinPool` 的 `invoke` 或 `execute` 方法来执行任务。

5. **合并结果**:对于 `RecursiveTask`,可以在任务完成后获取结果。

import java.util.concurrent.RecursiveTask;
import java.util.concurrent.ForkJoinPool;public class ForkJoinExample extends RecursiveTask<Integer> {private int start;private int end;private static final int THRESHOLD = 10;public ForkJoinExample(int start, int end) {this.start = start;this.end = end;}@Overrideprotected Integer compute() {int result = 0;if (end - start <= THRESHOLD) {// 基本情况,直接计算for (int i = start; i <= end; i++) {result += i;}} else {// 分解任务int middle = (start + end) / 2;ForkJoinExample subTask1 = new ForkJoinExample(start, middle);ForkJoinExample subTask2 = new ForkJoinExample(middle + 1, end);// 执行子任务subTask1.fork();subTask2.fork();// 合并结果result = subTask1.join() + subTask2.join();}return result;}public static void main(String[] args) {ForkJoinPool pool = new ForkJoinPool();ForkJoinExample task = new ForkJoinExample(1, 100);pool.invoke(task);System.out.println("Result: " + task.join());}
}

在这个示例中,我们创建了一个计算 1 到 100 整数之和的任务。任务被分解为更小的子任务,直到达到阈值 `THRESHOLD`,然后递归地计算并合并结果。`ForkJoinPool` 负责调度和执行这些任务。

Fork/Join 模式适用于可以分解为多个子任务的场景,如数值计算、大数据处理等。它通过工作窃取和递归分解提高了并行计算的效率。


利用Fork/Join遍历指定文件夹下的txt文件

package com;import java.io.File;
import java.util.ArrayList;
import java.util.List;
import java.util.concurrent.RecursiveAction;public class FileForkJoin extends RecursiveAction {private File file;public FileForkJoin(File file) {this.file = file;}@Overrideprotected void compute() {List<FileForkJoin> fileForkJoins= new ArrayList<>();if(file.exists()){if (file.isDirectory()){File[] files = file.listFiles();if(files != null){for (File file1 : files) {fileForkJoins.add(new FileForkJoin(file1));}}}else if(file.isFile() && file.getName().endsWith(".txt")){System.out.println(file.getAbsolutePath());}}if(!fileForkJoins.isEmpty()){//invokeAll 方法是 ForkJoinTask 的一个静态方法,它允许你启动一组 ForkJoinTask 任务并等待它们全部完成,然后返回包含所有结果的数组。for (FileForkJoin fileForkJoin : invokeAll(fileForkJoins)) {fileForkJoin.join();}}}}public class TestFileForkJoin {public static void main(String[] args) {ForkJoinPool pool = new ForkJoinPool();FileForkJoin fileForkJoin = new FileForkJoin(new File("F://"));//异步任务pool.submit(fileForkJoin);fileForkJoin.join();System.out.println("end");}
}


 

这篇关于java Fork/Join 框架的理解以及简单运用的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1108883

相关文章

JVM 的类初始化机制

前言 当你在 Java 程序中new对象时,有没有考虑过 JVM 是如何把静态的字节码(byte code)转化为运行时对象的呢,这个问题看似简单,但清楚的同学相信也不会太多,这篇文章首先介绍 JVM 类初始化的机制,然后给出几个易出错的实例来分析,帮助大家更好理解这个知识点。 JVM 将字节码转化为运行时对象分为三个阶段,分别是:loading 、Linking、initialization

Spring Security 基于表达式的权限控制

前言 spring security 3.0已经可以使用spring el表达式来控制授权,允许在表达式中使用复杂的布尔逻辑来控制访问的权限。 常见的表达式 Spring Security可用表达式对象的基类是SecurityExpressionRoot。 表达式描述hasRole([role])用户拥有制定的角色时返回true (Spring security默认会带有ROLE_前缀),去

浅析Spring Security认证过程

类图 为了方便理解Spring Security认证流程,特意画了如下的类图,包含相关的核心认证类 概述 核心验证器 AuthenticationManager 该对象提供了认证方法的入口,接收一个Authentiaton对象作为参数; public interface AuthenticationManager {Authentication authenticate(Authenti

Spring Security--Architecture Overview

1 核心组件 这一节主要介绍一些在Spring Security中常见且核心的Java类,它们之间的依赖,构建起了整个框架。想要理解整个架构,最起码得对这些类眼熟。 1.1 SecurityContextHolder SecurityContextHolder用于存储安全上下文(security context)的信息。当前操作的用户是谁,该用户是否已经被认证,他拥有哪些角色权限…这些都被保

Spring Security基于数据库验证流程详解

Spring Security 校验流程图 相关解释说明(认真看哦) AbstractAuthenticationProcessingFilter 抽象类 /*** 调用 #requiresAuthentication(HttpServletRequest, HttpServletResponse) 决定是否需要进行验证操作。* 如果需要验证,则会调用 #attemptAuthentica

Spring Security 从入门到进阶系列教程

Spring Security 入门系列 《保护 Web 应用的安全》 《Spring-Security-入门(一):登录与退出》 《Spring-Security-入门(二):基于数据库验证》 《Spring-Security-入门(三):密码加密》 《Spring-Security-入门(四):自定义-Filter》 《Spring-Security-入门(五):在 Sprin

Java架构师知识体认识

源码分析 常用设计模式 Proxy代理模式Factory工厂模式Singleton单例模式Delegate委派模式Strategy策略模式Prototype原型模式Template模板模式 Spring5 beans 接口实例化代理Bean操作 Context Ioc容器设计原理及高级特性Aop设计原理Factorybean与Beanfactory Transaction 声明式事物

Java进阶13讲__第12讲_1/2

多线程、线程池 1.  线程概念 1.1  什么是线程 1.2  线程的好处 2.   创建线程的三种方式 注意事项 2.1  继承Thread类 2.1.1 认识  2.1.2  编码实现  package cn.hdc.oop10.Thread;import org.slf4j.Logger;import org.slf4j.LoggerFactory

认识、理解、分类——acm之搜索

普通搜索方法有两种:1、广度优先搜索;2、深度优先搜索; 更多搜索方法: 3、双向广度优先搜索; 4、启发式搜索(包括A*算法等); 搜索通常会用到的知识点:状态压缩(位压缩,利用hash思想压缩)。

csu 1446 Problem J Modified LCS (扩展欧几里得算法的简单应用)

这是一道扩展欧几里得算法的简单应用题,这题是在湖南多校训练赛中队友ac的一道题,在比赛之后请教了队友,然后自己把它a掉 这也是自己独自做扩展欧几里得算法的题目 题意:把题意转变下就变成了:求d1*x - d2*y = f2 - f1的解,很明显用exgcd来解 下面介绍一下exgcd的一些知识点:求ax + by = c的解 一、首先求ax + by = gcd(a,b)的解 这个