如何监控AWS EMR集群中托管的spark中的hive thrift服务器运行状况?-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文

如何监控AWS EMR集群中托管的spark中的hive thrift服务器运行状况?

社区小助手 2018-12-21 13:49:23 1017

我们使用JDBC连接到我们的spark EMR集群上的hive thrift服务器。我们遇到了一些thrift服务器崩溃的瞬态问题,需要手动重启。

我们想知道是否有任何[希望简单]的方式来监控服务器的健康状况?至少,我们希望在它发生故障时收到警报。拥有其他服务器运行状况指标也很不错。

SQL 分布式计算 监控 Java 数据库连接 HIVE Spark
分享到
取消 提交回答
全部回答(1)
  • 社区小助手
    2019-07-17 23:23:25

    Hive thrift服务器只是一个spark应用程序,它还为您提供Spark UI来监控您正在执行的所有查询,内存消耗和更多信息。

    任何spark UI的默认端口是4040.但如果没有。

    然后jps在主机上执行命令。它将列出所有java应用程序及其相应的进程ID。执行后netstat -ntpul | grep ,将列出与该进程相关的所有端口。

    0 0
大数据
使用钉钉扫一扫加入圈子
+ 订阅

大数据计算实践乐园,近距离学习前沿技术

推荐文章
相似问题