怎么 开通 EMR Doctor 呢?
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
开通阿里云EMR Doctor功能需要按照以下步骤操作,具体流程如下:
首先,您需要访问阿里云EMR Doctor开通登记表,填写相关信息。阿里云EMR团队会根据您提供的联系方式安排专业工程师与您对接。
在工程师对接后,他们会评估您的集群运行情况,并与您约定具体的开通时间。此步骤旨在确保服务安装不会对现有任务造成影响。
在约定的时间,EMR Doctor团队会对您的集群进行服务安装。安装过程中,系统会自动下发未生效的配置(涉及Hive、Spark、YARN和Tez等服务),并调整相关服务的配置参数。重要提示:安装过程不会影响正在运行或即将运行的任务,但建议您在任务低峰期完成安装。
安装完成后,EMR会自动为您配置以下参数: - Hive: 在hive-env.sh
文件中追加环境变量。 - YARN: 在mapred-site.xml
和yarn-env.sh
文件中追加配置项和环境变量。 - Spark: 在spark-defaults.conf
文件中追加配置项。 - Tez: 在tez-site.xml
文件中追加配置项。
安装完成后,建议您在任务低峰期重启以下三个服务,以确保所有功能正常运行: - AppTimeline Server - HiveServer2 - Spark Thrift Server
注意:如果不重启这些服务,部分任务(如Hive on MR)的采集可能会缺失部分内容。
服务安装完毕后,您可以登录EMR控制台查看EMR Doctor生成的分析报告。报告内容包括: - 集群健康日报:全面分析存储和计算引擎,以日报形式呈现集群健康状况。 - 集群实时报告:实时监控计算任务和服务,发现潜在问题以便及时排查。
如果您在开通或使用过程中遇到任何问题,可以通过以下方式联系阿里云EMR团队: - 填写EMR Doctor开通登记表。 - 使用钉钉搜索群号44846846
加入钉钉群,阿里云EMR团队将安排工程师为您提供专业支持。
重要提醒: - 开通EMR Doctor不会影响现有任务,仅进行必要的数据采集(如任务指标和事件)。 - 安装过程中可能会下发未生效的配置,请提前评估可能的影响。
通过以上步骤,您可以顺利开通并使用EMR Doctor功能,提升集群的运维效率和稳定性。
阿里云EMR是云原生开源大数据平台,为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎,计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。