开发者社区> 问答> 正文

E-MapReduce管控中的集群监控界面看到YARN-HOME监控的Yarn Memory参...

已解决

E-MapReduce管控中的集群监控界面看到YARN-HOME监控的Yarn Memory参数是如何计算的

展开
收起
提个问题 2024-06-13 17:11:31 8 0
1 条回答
写回答
取消 提交回答
  • 开发者社区问答官方账号
    官方回答
    采纳回答
    • yarn memory监控中包含的yarn_cluster_totalMB(集群中的内存量) 指标对应的是yarn-site配置文件中的 yarn.nodemanager.resource.memory-mb参数的内存。
    • 该参数默认为节点组实例规格内存的80%,需要根据集群部署情况进行增减
    • 该参数不建议调整到90%,毕竟ECS服务器自身以及其他组件也都使用该节点的内存。如果设置过大,可能就会导致该节点系统因为资源不足而触发OOM造成节点卡死;或者其他服务获取不到资源而出现GC造成组件重启。调整后需要重启NodeManager组件才能生效。
    • 注意:修改yarn.nodemanager.resource.memory-mb和yarn.nodemanager.resource.cpu-vcores参数时,必须选择节点组配置才能生效,具体请参考YARN资源配置
    2024-06-13 17:11:32
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
深度学习+大数据 TensorFlow on Yarn 立即下载
Docker on Yarn 微服务实践 立即下载
深度学习+大数据-TensorFlow on Yarn 立即下载