开发者社区> 问答> 正文

在MR阶段,有哪些可以优化的点?

在MR阶段,有哪些可以优化的点?

展开
收起
芯在这 2021-12-06 21:55:14 249 0
1 条回答
写回答
取消 提交回答
  • 1、加大环形缓冲区的内存

    2、增大缓冲区阈值的大小 (考虑剩余的空间是不是够系统使用)

    3、对输出的进行压缩(压缩-解压的过程会消耗CPU)

    2021-12-06 21:55:38
    赞同 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
Spark优化实践 立即下载
Flink中的两类新型状态存储 立即下载
图计算优化技术探索 立即下载