用ForkJoin框架为归并排序提速

2024-05-15 02:04

本文主要是介绍用ForkJoin框架为归并排序提速,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

归并排序典型的分治思想的算法。每层递归有三个步骤

  1. 分解(Divide):将n个元素分成个含n/2个元素的子序列。
  2. 解决(Conquer):用合并排序法对两个子序列递归的排序。
  3. 合并(Combine):合并两个已排序的子序列已得到排序结果。

使用递归算法的代码demo

public class SortArray {int[] tmp;public int[] sortArray(int[] nums) {tmp = new int[nums.length];mergeSort(nums, 0, nums.length - 1);return nums;}private void mergeSort(int[] nums, int left, int right) {if (left >= right) {return;}int middle = (left + right) / 2;mergeSort(nums, left, middle);int newLeft = middle + 1;mergeSort(nums, newLeft, right);int i = left, j = newLeft;int k = 0;while (i <= middle && j <= right) {if (nums[i] < nums[j]) {tmp[k++] = nums[i++];} else {tmp[k++] = nums[j++];}}while (i <= middle) {tmp[k++] = nums[i++];}while (j <= right) {tmp[k++] = nums[j++];}for (i = 0; i < k; i++) {nums[left + i] = tmp[i];}}public static void main(String[] args) {SortArray test  = new SortArray();int[]     array = test.sortArray(new int[]{5, 2, 3, 1});System.out.println(Arrays.toString(array));array = test.sortArray(new int[]{5, 1, 1, 2, 0, 0});System.out.println(Arrays.toString(array));}
}

写完之后,想到这个程序仅仅利用到了一个cpu核心,如果数据量很大的情况下,会造成计算资源的浪费。这个需要计算多个子任务的分治算法,明显可以用Fork/Join框架提速。于是改写了一版。当数据量小于1024个的时候不再进行切割,否则任务太多,提速效果十分差。当小于1024个的时候,偷懒用了工具库的快排。源码地址:https://github.com/bruce256/LeetCodeOJ/blob/master/src/main/java/divideAndConquer/SortArrayTask.java

public class SortArrayTask extends RecursiveTask<int[]> {public static final int THRESHOLD = 1024;int[] nums;int   left;int   right;int[] tmp;public SortArrayTask(int[] nums, int[] tmp, int left, int right) {this.nums  = nums;this.left  = left;this.right = right;this.tmp   = tmp;}@Overrideprotected int[] compute() {if (right - left + 1 <= THRESHOLD) {Arrays.sort(nums, left, right + 1);return null;}int middle = (left + right) / 2;// 当前任务纳入计算队列SortArrayTask leftSortArrayTask = new SortArrayTask(nums, tmp, left, middle);leftSortArrayTask.fork();int           newLeft            = middle + 1;SortArrayTask rightSortArrayTask = new SortArrayTask(nums, tmp, newLeft, right);rightSortArrayTask.fork();// 等待任务计算结束,再做这个语句后的事情leftSortArrayTask.join();rightSortArrayTask.join();int i = left, j = newLeft;int k = 0;while (i <= middle && j <= right) {if (nums[i] < nums[j]) {tmp[k++] = nums[i++];} else {tmp[k++] = nums[j++];}}while (i <= middle) {tmp[k++] = nums[i++];}while (j <= right) {tmp[k++] = nums[j++];}for (i = 0; i < k; i++) {nums[left + i] = tmp[i];}return nums;}public static void main(String[] args) {int[] array = {10000, 100000, 1000000, 10000000, 100000000};for (int num : array) {compare(num);}}private static void compare(int num) {int[]  nums   = new int[num];int[]  tmp    = new int[num];Random random = new Random();for (int i = 0; i < nums.length; i++) {nums[i] = random.nextInt();}System.out.println(nums.length + " numbers \t" + Runtime.getRuntime().availableProcessors() + " cpus");ForkJoinPool  forkJoinPool = new ForkJoinPool();SortArrayTask task         = new SortArrayTask(nums, tmp, 0, nums.length - 1);long          start        = System.currentTimeMillis();Future<int[]> result       = forkJoinPool.submit(task);try {int[] r = result.get();long duration = System.currentTimeMillis() - start;System.out.println("fork/join time cost: \t" + duration + " ms");} catch (InterruptedException e) {e.printStackTrace();} catch (ExecutionException e) {e.printStackTrace();}SortArray test = new SortArray();for (int i = 0; i < nums.length; i++) {nums[i] = random.nextInt();}start = System.currentTimeMillis();int[] array    = test.sortArray(nums);long  duration = System.currentTimeMillis() - start;System.out.println("single thread time cost: \t" + duration + " ms");}
}

我的电脑是i7 4核心8线程,跑了10000, 100000, 1000000, 10000000, 100000000个数据对别单线程和多线程版本,运行结果

10000 numbers 	8 cpus
fork/join time cost: 	5 ms
single thread time cost: 	4 ms100000 numbers 	8 cpus
fork/join time cost: 	29 ms
single thread time cost: 	29 ms1000000 numbers 	8 cpus
fork/join time cost: 	80 ms
single thread time cost: 	142 ms10000000 numbers 	8 cpus
fork/join time cost: 	235 ms
single thread time cost: 	1725 ms100000000 numbers 	8 cpus
fork/join time cost: 	2284 ms
single thread time cost: 	17275 ms

当数据量较小时,由于CPU上下文切换,导致并行还不如串行快。当数据量较大时,提速明显。

这篇关于用ForkJoin框架为归并排序提速的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/990493

相关文章

Spring排序机制之接口与注解的使用方法

《Spring排序机制之接口与注解的使用方法》本文介绍了Spring中多种排序机制,包括Ordered接口、PriorityOrdered接口、@Order注解和@Priority注解,提供了详细示例... 目录一、Spring 排序的需求场景二、Spring 中的排序机制1、Ordered 接口2、Pri

修改若依框架Token的过期时间问题

《修改若依框架Token的过期时间问题》本文介绍了如何修改若依框架中Token的过期时间,通过修改`application.yml`文件中的配置来实现,默认单位为分钟,希望此经验对大家有所帮助,也欢迎... 目录修改若依框架Token的过期时间修改Token的过期时间关闭Token的过期时js间总结修改若依

大数据小内存排序问题如何巧妙解决

《大数据小内存排序问题如何巧妙解决》文章介绍了大数据小内存排序的三种方法:数据库排序、分治法和位图法,数据库排序简单但速度慢,对设备要求高;分治法高效但实现复杂;位图法可读性差,但存储空间受限... 目录三种方法:方法概要数据库排序(http://www.chinasem.cn对数据库设备要求较高)分治法(常

Python中lambda排序的六种方法

《Python中lambda排序的六种方法》本文主要介绍了Python中使用lambda函数进行排序的六种方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们... 目录1.对单个变量进行排序2. 对多个变量进行排序3. 降序排列4. 单独降序1.对单个变量进行排序

关于Java内存访问重排序的研究

《关于Java内存访问重排序的研究》文章主要介绍了重排序现象及其在多线程编程中的影响,包括内存可见性问题和Java内存模型中对重排序的规则... 目录什么是重排序重排序图解重排序实验as-if-serial语义内存访问重排序与内存可见性内存访问重排序与Java内存模型重排序示意表内存屏障内存屏障示意表Int

MyBatis框架实现一个简单的数据查询操作

《MyBatis框架实现一个简单的数据查询操作》本文介绍了MyBatis框架下进行数据查询操作的详细步骤,括创建实体类、编写SQL标签、配置Mapper、开启驼峰命名映射以及执行SQL语句等,感兴趣的... 基于在前面几章我们已经学习了对MyBATis进行环境配置,并利用SqlSessionFactory核

【数据结构】——原来排序算法搞懂这些就行,轻松拿捏

前言:快速排序的实现最重要的是找基准值,下面让我们来了解如何实现找基准值 基准值的注释:在快排的过程中,每一次我们要取一个元素作为枢纽值,以这个数字来将序列划分为两部分。 在此我们采用三数取中法,也就是取左端、中间、右端三个数,然后进行排序,将中间数作为枢纽值。 快速排序实现主框架: //快速排序 void QuickSort(int* arr, int left, int rig

usaco 1.3 Mixing Milk (结构体排序 qsort) and hdu 2020(sort)

到了这题学会了结构体排序 于是回去修改了 1.2 milking cows 的算法~ 结构体排序核心: 1.结构体定义 struct Milk{int price;int milks;}milk[5000]; 2.自定义的比较函数,若返回值为正,qsort 函数判定a>b ;为负,a<b;为0,a==b; int milkcmp(const void *va,c

hdu 1285(拓扑排序)

题意: 给各个队间的胜负关系,让排名次,名词相同按从小到大排。 解析: 拓扑排序是应用于有向无回路图(Direct Acyclic Graph,简称DAG)上的一种排序方式,对一个有向无回路图进行拓扑排序后,所有的顶点形成一个序列,对所有边(u,v),满足u 在v 的前面。该序列说明了顶点表示的事件或状态发生的整体顺序。比较经典的是在工程活动上,某些工程完成后,另一些工程才能继续,此时

cross-plateform 跨平台应用程序-03-如果只选择一个框架,应该选择哪一个?

跨平台系列 cross-plateform 跨平台应用程序-01-概览 cross-plateform 跨平台应用程序-02-有哪些主流技术栈? cross-plateform 跨平台应用程序-03-如果只选择一个框架,应该选择哪一个? cross-plateform 跨平台应用程序-04-React Native 介绍 cross-plateform 跨平台应用程序-05-Flutte