AI 助理
备案控制台
开发者社区 问答 正文

Spaek程序执行，如何修改默认task执行个数？

Spaek程序执行，如何修改默认task执行个数？

展开
收起
芯在这 2021-12-06 23:36:32 343 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 真的很搞笑

    有很多小文件的时候，有多少个输入block就会有多少个task启动

    spark中有partition的概念，每个partition都会对应一个task，task越多，在处理大规模数据的时候，就会越有效率

    2021-12-06 23:36:44
    赞同 展开评论
问答地址：
开发者社区 > 云计算 > 问答
相关问答
每次执行根任务（子任务有1500条，2主机）都会增加20MB内存，是不是每次执行根任务都要创建线程的
427
1
0
函数计算设置的间隔1440分钟，今天执行了3次， 配置的执行完自动push一次codeu
1261
1
0
有什么方法能让他按照第一个执行完毕自动执行下面节点（只进行第一个任务时间配置，下面以上面执行完毕自动
311
1
0
循环指令中，key值的作用是什么呀？
313
1
0
我请教一下，flinksql-cdc代码里面有group by情况下，需要设置，空闲状态保留时间么？
377
0
0
为什么case1条件里第一个Test方法前不插入探针？
283
1
0
请问，用下列命令测试内存大小，传入4个内存大小，但是实际执行的时候，只会执行第一个内存大小的测试 s
580
1
0
只会被初始化一次，在第一次进入函数时创建，退出函数时值会保留下来如何体现？
467
1
0
Spaek程序执行，有时候默认为什么会产生很多task，怎么才可以修改默认task执行个数呢？
313
1
0
Spark程序执行，有时候默认为什么会产生很多task，怎么修改默认task执行个数？
662
1
0