Java ForkJoin 框架初探

简介:

多核时代,编程语言如果不支持多核编程就OUT了,Java为了迎头赶上,在Java 8 版本增加大量支持多核编程的类库,如Stream等,Java 7开始支持的ForkJoin框架也是为了更好的支持多核编程。


设计思想:化整为零再化零为整,另外还要加上一种团队精神,即能者多劳。化整为零(split up)就是把一个复杂的任务分为许多足够小的任务计算;化零为整(merge)就是把小任务的计算结果不断往上合并值到得出最终结果;团队精神:ForkJoin使用了Work-Stealing算法,即先完成任务的线程不会闲着,会主动去偷别的线程待处理任务队列中的任务来帮忙处理,直到全部任务都处理完大伙才能停下来休息。


使用ForkJoin框架经常使用到两个类RecursiveTask 和 RecursiveAction,RecursiveTask 用于定义有返回值的任务,RecursiveAction用于定义没有返回值的任务,从类名看这两个类应该跟递归有一腿?经确认,ForkJoin框架处理的任务基本都能使用递归处理,比如求斐波那契数列等,但递归算法的缺陷是:一只会只用单线程处理,二是递归次数过多时会导致堆栈溢出;ForkJoin解决了这两个问题,使用多线程并发处理,充分利用计算资源来提高效率,同时避免堆栈溢出发生。当然像求斐波那契数列这种小问题直接使用线性算法搞定可能更简单,实际应用中完全没必要使用ForkJoin框架,所以ForkJoin是核弹,是用来对付大家伙的,比如超大数组排序。


最佳应用场景:多核、多内存、可以分割计算再合并的计算密集型任务。


ForkJoinTask类的几个重要方法:


fork()方法:将任务放入队列并安排异步执行,一个任务应该只调用一次fork()函数,除非已经执行完毕并重新初始化。


tryUnfork()方法:尝试把任务从队列中拿出单独处理,但不一定成功。


join()方法:等待计算完成并返回计算结果。


isCompletedAbnormally()方法:用于判断任务计算是否发生异常。


ForkJoinPool的使用与其它ExecutorService类似。


示例代码:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
package  com.stevex.app.forkjoin;
 
import  java.util.concurrent.ForkJoinPool;
import  java.util.concurrent.Future;
import  java.util.concurrent.RecursiveTask;
 
public  class  ForkJoinTest {
     public  static  void  main(String[] args) {
         long  beginTime = System.nanoTime();     
         System.out.println( "The sum from 1 to 1000 is "  + sum( 1 1000 ));
         System.out.println( "Time consumed(nano second) By recursive algorithm : "  + (System.nanoTime() - beginTime));
         
         
         beginTime = System.nanoTime();   
         System.out.println( "The sum from 1 to 1000000000 is "  + sum1( 1 1000000000 ));
         System.out.println( "Time consumed(nano second) By loop algorithm : "  + (System.nanoTime() - beginTime));
         
         
         ForkJoinTest app =  new  ForkJoinTest();
         ForkJoinPool forkJoinPool =  new  ForkJoinPool();
         CountTask task = app. new  CountTask( 1 , 1000000000 );
         beginTime = System.nanoTime();
         Future<Long> result = forkJoinPool.submit(task);
         try {
             System.out.println( "The sum from 1 to 1000000000 is "  + result.get());        
         }
         catch (Exception e){
             e.printStackTrace();
         }
         
         System.out.println( "Time consumed(nano second) By ForkJoin algorithm : "  + (System.nanoTime() - beginTime));
     }
 
     private  static  long  sum1( long  start,  long  end) {
         long  s = 0l;
         
         for ( long  i=start; i<= end; i++){
             s += i;
         }
         
         return  s;
     }
 
     private  static  long  sum( long  start,  long  end){
         if (end > start){
             return  end + sum(start, end- 1 );
         }
         else {
             return  start;
         }
     }
     
     private  class  CountTask  extends  RecursiveTask<Long>{
         private  static  final  int  THRESHOLD =  10000 ;
         private  int  start;
         private  int  end;
         
         public  CountTask( int  start,  int  end){
             this .start = start;
             this .end = end;
         }
         
         protected  Long compute(){
             //System.out.println("Thread ID: " + Thread.currentThread().getId());
             
             Long sum = 0l;
             
             if ((end -start) <= THRESHOLD){
                 sum = sum1(start, end);
             }
             else {
                 int  middle = (start + end) /  2 ;
                 CountTask leftTask =  new  CountTask(start, middle);
                 CountTask rightTask =  new  CountTask(middle +  1 , end);
                 leftTask.fork();
                 rightTask.fork();
                 
                 Long leftResult = leftTask.join();
                 Long rightResult = rightTask.join();
                 
                 sum = leftResult + rightResult;
             }
             
             return  sum;
         }
     }
}




     本文转自sarchitect 51CTO博客,原文链接:http://blog.51cto.com/stevex/1576108 ,如需转载请自行联系原作者

相关文章
|
人工智能 Java 开发者
阿里出手!Java 开发者狂喜!开源 AI Agent 框架 JManus 来了,初次见面就心动~
JManus是阿里开源的Java版OpenManus,基于Spring AI Alibaba框架,助力Java开发者便捷应用AI技术。支持多Agent框架、网页配置、MCP协议及PLAN-ACT模式,可集成多模型,适配阿里云百炼平台与本地ollama。提供Docker与源码部署方式,具备无限上下文处理能力,适用于复杂AI场景。当前仍在完善模型配置等功能,欢迎参与开源共建。
3635 58
阿里出手!Java 开发者狂喜!开源 AI Agent 框架 JManus 来了,初次见面就心动~
|
11月前
|
安全 前端开发 Java
《深入理解Spring》:现代Java开发的核心框架
Spring自2003年诞生以来,已成为Java企业级开发的基石,凭借IoC、AOP、声明式编程等核心特性,极大简化了开发复杂度。本系列将深入解析Spring框架核心原理及Spring Boot、Cloud、Security等生态组件,助力开发者构建高效、可扩展的应用体系。(238字)
|
11月前
|
消息中间件 缓存 Java
Spring框架优化:提高Java应用的性能与适应性
以上方法均旨在综合考虑Java Spring 应该程序设计原则, 数据库交互, 编码实践和系统架构布局等多角度因素, 旨在达到高效稳定运转目标同时也易于未来扩展.
923 8
|
11月前
|
存储 算法 安全
Java集合框架:理解类型多样性与限制
总之,在 Java 题材中正确地应对多样化与约束条件要求开发人员深入理解面向对象原则、范式编程思想以及JVM工作机理等核心知识点。通过精心设计与周密规划能够有效地利用 Java 高级特征打造出既健壮又灵活易维护系统软件产品。
279 7
|
11月前
|
存储 安全 Java
《数据之美》:Java集合框架全景解析
Java集合框架是数据管理的核心工具,涵盖List、Set、Map等体系,提供丰富接口与实现类,支持高效的数据操作与算法处理。
|
存储 缓存 安全
Java集合框架(二):Set接口与哈希表原理
本文深入解析Java中Set集合的工作原理及其实现机制,涵盖HashSet、LinkedHashSet和TreeSet三大实现类。从Set接口的特性出发,对比List理解去重机制,并详解哈希表原理、hashCode与equals方法的作用。进一步剖析HashSet的底层HashMap实现、LinkedHashSet的双向链表维护顺序特性,以及TreeSet基于红黑树的排序功能。文章还包含性能对比、自定义对象去重、集合运算实战和线程安全方案,帮助读者全面掌握Set的应用与选择策略。
1455 23
|
SQL Java 数据库连接
区分iBatis与MyBatis:两个Java数据库框架的比较
总结起来:虽然从技术角度看,iBATIS已经停止更新但仍然可用;然而考虑到长期项目健康度及未来可能需求变化情况下MYBATISS无疑会是一个更佳选择因其具备良好生命周期管理机制同时也因为社区力量背书确保问题修复新特征添加速度快捷有效.
955 12
|
安全 Java 开发者
Java集合框架:详解Deque接口的栈操作方法全集
理解和掌握这些方法对于实现像浏览器后退功能这样的栈操作来说至关重要,它们能够帮助开发者编写既高效又稳定的应用程序。此外,在多线程环境中想保证线程安全,可以考虑使用ConcurrentLinkedDeque,它是Deque的线程安全版本,尽管它并未直接实现栈操作的方法,但是Deque的接口方法可以相对应地使用。
579 12
|
存储 缓存 安全
Java集合框架(三):Map体系与ConcurrentHashMap
本文深入解析Java中Map接口体系及其实现类,包括HashMap、ConcurrentHashMap等的工作原理与线程安全机制。内容涵盖哈希冲突解决、扩容策略、并发优化,以及不同Map实现的适用场景,助你掌握高并发编程核心技巧。
|
存储 安全 Java
Java集合框架(一):List接口及其实现类剖析
本文深入解析Java中List集合的实现原理,涵盖ArrayList的动态数组机制、LinkedList的链表结构、Vector与Stack的线程安全性及其不推荐使用的原因,对比了不同实现的性能与适用场景,帮助开发者根据实际需求选择合适的List实现。
1348 0