x-pack spark如何监控核心指标
spark集群有哪些核心指标可以监控，以及如何监控、streaming报警怎么监控：
展开
收起
1
条回答
写回答
写回答
-
spark集群的云监控配置和hbase类似的，在云监控里面 查看 "系统指标"、"分析集群指标"。 spark层面主要关注的指标有几个：
- hdfs容量：使用指标 “实例存储空间使用比例”
- 集群的计算资源容量：使用指标 “AvailableVCores”、“AvailableMB” https://help.aliyun.com/document_detail/95995.html?spm=5176.11065259.1996646101.searchclickresult.4fbf384bjLFkEm
- 作业的运行情况：可以在数据工作台上面直接配置报警的dingding机器人，如果作业失败了可以提示 https://help.aliyun.com/document_detail/106546.html?spm=a2c4g.11186623.6.611.77a56cb5pLQIIa
- streaming作业的延迟相关报警：可以通过“StreamingInputRate(records/s)”、“StreamingLatency(ms)”配置 https://help.aliyun.com/document_detail/95995.html?spm=5176.11065259.1996646101.searchclickresult.4fbf384bjLFkEm
2019-08-14 11:41:30赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
