开发者社区 问答 正文

spark的优化应用程序层面的调优作用是什么?

spark的优化应用程序层面的调优作用是什么?

展开
收起
游客y244y7ln2rlpa 2021-12-07 07:27:35 565 分享 版权
1 条回答
写回答
取消 提交回答
  • spark的优化应用程序层面的调优作用是过滤操作符的优化降低过多小任务,降低单条记录的资源开销,处理数据倾斜,复用RDD进行缓存,作业并行化执行等等。

    2021-12-07 07:27:57
    赞同 展开评论