成果被他人窃取_工作窃取模式

成果被他人窃取_工作窃取模式什么是ForkJoin、ForkJoin分支合并、ForkJoin工作窃取、ForkJoin大数据求和计算什么是ForkJoin?ForkJoin:分支合并ForkJoin特点:工作窃取如何让使用ForkJoinForkJoin求和计算Demo什么是ForkJoin?ForkJoin(分支合并)是jdk1.7之后出来的,并行执行任务,提高效率,用在大数据量场景下。大数据:MapReduce(把大任务拆分成多个小任务,怎么拆分用到了二分算法),每个小任务得出自己的结果,之后再把结果汇总,汇总的过程就是

大家好,又见面了,我是你们的朋友全栈君。如果您正在找激活码,请点击查看最新教程,关注关注公众号 “全栈程序员社区” 获取激活教程,可能之前旧版本教程已经失效.最新Idea2022.1教程亲测有效,一键激活。

Jetbrains全系列IDE使用 1年只要46元 售后保障 童叟无欺

什么是ForkJoin、ForkJoin分支合并、ForkJoin工作窃取、ForkJoin大数据求和计算

什么是ForkJoin?

ForkJoin(分支合并)是jdk1.7之后出来的,并行执行任务,提高效率,用在大数据量场景下。

大数据:Map Reduce(把大任务拆分成多个小任务,怎么拆分用到了二分算法),每个小任务得出自己的结果,之后再把结果汇总,汇总的过程就是分支合并的思想。

ForkJoin:分支合并

ForkJoin会把一个大任务分成若干个小任务去执行(任务是双端队列去存储的,两端都可以操作),然后再合并结果集。
请添加图片描述

ForkJoin特点:工作窃取

ForkJoin会把一个大任务分成若干个小任务去执行(任务是双端队列去存储的,两端都可以操作),然后再合并结果集。
线程的执行速度不一样,因此先执行完的线程,为了避免浪费时间,会去还没有执行完的线程那里拿到它未执行完的任务,去帮它执行,之所以能拿到,也是因为任务是双端队列存储的,两头都可以操作。

ForkJoinPool主要是为了并行计算使用(也就是新增加的并行流),但我觉得更适合IO密集型的场景。
比如大规模的并行查询。而CPU密集型的操作,过多的线程切换可能会影响效率
请添加图片描述

如何让使用ForkJoin

  • 1.ForkJoinPool,通过ForkJoinPool来执行
  • 2.计算任务forkJoinPool.execute(ForkJoinTask task)
  • 3.计算类要继承ForkJoinTask(执行任务RecursiveTask:有返回值 RecursiveAction:无返回值)

Class ForkJoinPool有一个异步执行任务的方法

在这里插入图片描述

在这里插入图片描述

我们需要用到有返回值的RecursiveTask

使用RecursiveTask需要继承RecursiveTask,并定义返回值类型

class Fibonacci extends RecursiveTask<Integer>

ForkJoin求和计算Demo

import java.util.concurrent.*;
import java.util.stream.LongStream;

/** * 求和计算 * 1.最low的:循环求和 * 2.一般的:ForkJoin分支求和 * 3.最快的:Stream并行流求和 */
public class ForkJoinDemo { 
   
    public static void main(String[] args) throws ExecutionException, InterruptedException { 
   
        new ForkJoinDemo().test1();
        new ForkJoinDemo().test2();
        new ForkJoinDemo().test3();
        /** * test1===>和为500000000500000000,耗时9937 * test2===>和为500000000500000000,耗时8622 * test3===>和为500000000500000000,耗时276 */


    }

    //1.最low的:循环求和
    public void test1() { 
   
        long start = System.currentTimeMillis();
        Long sum = 0L;
        for (Long i = 0L; i <= 10_0000_0000L; i++) { 
   
            sum += i;
        }
        long end = System.currentTimeMillis();
        System.out.println("test1===>和为" + sum + ",耗时" + (end - start));
    }

    //2.一般的:ForkJoin分支求和
    public void test2() throws ExecutionException, InterruptedException { 
   
        long start = System.currentTimeMillis();
        // 也可以使用公用的线程池 ForkJoinPool.commonPool():
        // pool = ForkJoinPool.commonPool()
        ForkJoinPool pool = new ForkJoinPool();
        ForkJoinTask<Long> task = pool.submit(new MySumForkJoin(0L, 10_0000_0000L));//提交任务
        Long sum = task.get();
        long end = System.currentTimeMillis();
        System.out.println("test2===>和为" + sum + ",耗时" + (end - start));
    }

    //3.最快的:Stream并行流求和
    public void test3() { 
   //没有Long的拆箱装箱操作
        long start = System.currentTimeMillis();
        long sum = LongStream.rangeClosed(0L, 10_0000_0000L).parallel().reduce(0, Long::sum);//reduce第一个参数为0,为了保证,在进行流条件计算下,保证每次累计的值不受多线程影响
        long end = System.currentTimeMillis();
        System.out.println("test3===>和为" + sum + ",耗时" + (end - start));
    }
}


/** * 如何让使用ForkJoin * 1.ForkJoinPool,通过ForkJoinPool来执行 * 2.计算任务forkJoinPool.execute(ForkJoinTask task) * 3.计算类要继承ForkJoinTask(执行任务RecursiveTask:有返回值 RecursiveAction:无返回值) */
class MySumForkJoin extends RecursiveTask<Long> { 
   
    private Long start;//开始值
    private Long end;//结束值
    private Long criticalValue = 10000L;//临界值,超过这个值开始分任务执行

    public MySumForkJoin(Long start, Long end) { 
   
        this.start = start;
        this.end = end;
    }

    //计算方法:递归调用的
    @Override
    protected Long compute() { 
   
        if (end - start <= criticalValue) { 
   
            Long sum = 0L;
            for (Long i = start; i <= end; i++) { 
   
                sum += i;
            }
            return sum;
        } else { 
   //ForkJoin执行分支合并计算,
// System.out.println("开始ForkJoin执行分支合并计算");
            //1.先求中间值
            Long middle = (start + end) / 2;//不直接(start+end)/2,防止溢出
            /*把任务一分为二,递归拆分(注意此处有递归)到底拆分成多少分 需要根据具体情况而定*/
            MySumForkJoin task1 = new MySumForkJoin(start, middle);
            MySumForkJoin task2 = new MySumForkJoin(middle + 1, end);
// task1.fork();//拆分任务,把任务压入双端队列,这里手动只拆分成两个任务,可以拆分多个
// task2.fork();//拆分任务,把任务压入双端队列
            invokeAll(task1, task2);//拆分任务,把任务压入双端队列

            /** * compute分出多个task后:以task1,task2为例 * 错误做法: * 1)依次执行task1.fork(),task2.fork() * 2)依次执行task1.join(),task2.join() * 正确做法: * 1)直接调用invokeAll(task1,task2) * * fork(): * 把task置入当前ForkJoinWorkerThread的queue中,等待被消费 * join(): * 当前ForkJoinWorkerThread执行等待该task执行结束 * * 错误做法过程: * 将task1与task2置入queue中,当前ForkJoinWorkerThread停下来等待task1,task2的执行结束。 * * 分析: * 当前的ForkJoinWorkerThread可以说join之后什么事情都没有做,只是等待ing。而task1和task2会在新的线程中执行。 * 会浪费当前ForkJoinWorkerThread的宝贵线程资源。而且最糟糕的是,会创建一个新的ForkJoinWorkerThread去执行新的task,可想而知,如果任务量特别多,那会同时开启特别多的线程。 */
            return task1.join() + task2.join();
        }
    }
}
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请联系我们举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/194149.html原文链接:https://javaforall.net

(0)
全栈程序员-站长的头像全栈程序员-站长


相关推荐

  • win10JDK环境变量的配置

    win10JDK环境变量的配置在win10系统下进行jdk环境变量与win7的一些区别,作者踩过一些坑,最后通过网上查找资料才将问题解决,但是网上的资料比较零碎,作者整理一下亲自操作过程并且将步骤详细的写了下来,希望能够帮助需要的人。一、下载安装完成jdk之后,桌面右键此电脑选择属性,进入以下界面,然后选择高级系统设置,进入系统配置二、进入系统配置之后点击环境变量,进入环境变量配置窗口三、此时我们可以看到有用户变量…

    2022年7月21日
    9
  • 使用极光推送(www.jpush.cn)向安卓手机推送消息【服务端向客户端主送推送】C#语言…

    使用极光推送(www.jpush.cn)向安卓手机推送消息【服务端向客户端主送推送】C#语言…

    2022年3月1日
    66
  • docker认证_spring 全局异常处理

    docker认证_spring 全局异常处理项目背景:采用SpringCloud+IDEA+Maven搭建了由多个微服务组成的项目,部署上线是在多个阿里服务器里的。问题描述:部署上线过程中,各个微服务都正常启动,而且都注册到了eureka注册中心,但是相互调用时报java.net.UnknownHostException:主机名的错误。问题原因思考:各个微服务是以“主机名:服务名:端口”的形式注册到注册中心。当发布测试时,服务器…

    2022年8月21日
    4
  • 方法重载和重写的区别[通俗易懂]

    方法重载和重写的区别[通俗易懂]一、方法重载(overload)重载方法的定义是在同一个类中,某方法允许存在一个以上的同名方法,只要它们的参数列表不同即可。方法重载的作用:屏蔽了同一功能的方法由于参数不同所造成方法名称不同。方法重载判断原则: “两同一不同”两同:同类中,方法名相同;一不同:方法参数列表不同(参数类型、参数个数、参数顺序);       只要参数类型,参数个数,参数顺序有一个不同,参数列表就不同.注意:方法重载和…

    2022年6月13日
    25
  • Oracle查看那些用户具有DBA权限「建议收藏」

    Oracle查看那些用户具有DBA权限「建议收藏」Oracle查看哪些用户具有DBA权限colGRANTEEfora20colgranted_rolefora20select*fromsys.dba_role_privswheregranted_role=’DBA’;GRANTEEGRANTED_ROLEADMDELDEFCOMINH——————————————————-AAA_DBA

    2022年9月25日
    0
  • Java 并发专题 : Timer的缺陷 用ScheduledExecutorService替代「建议收藏」

    Java 并发专题 : Timer的缺陷 用ScheduledExecutorService替代「建议收藏」继续并发,上篇博客对于ScheduledThreadPoolExecutor没有进行介绍,说过会和Timer一直单独写一篇Blog.1、Timer管理延时任务的缺陷a、以前在项目中也经常使用定时器,比如每隔一段时间清理项目中的一些垃圾文件,每个一段时间进行数据清洗;然而Timer是存在一些缺陷的,因为Timer在执行定时任务时只会创建一个线程,所以如果存在多个任务,且任务时间过长,超过了两

    2022年6月2日
    42

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号