DataWorks如何配置MaxCompute监控进行订阅管理?
在DataWorks中配置MaxCompute监控进行订阅管理,可以按照以下步骤进行:
以上就是配置MaxCompute监控进行订阅管理的方法。
在DataWorks中配置MaxCompute监控进行订阅管理,你可以按照以下步骤进行操作:
登录DataWorks控制台,选择需要进行监控订阅的项目。
在左侧导航栏中,点击"运维中心",然后选择"告警订阅"。
在告警订阅页面,点击"新增订阅"。
在新增订阅页面,选择"MaxCompute"作为数据源类型。
根据你的需求,选择要监控的MaxCompute项目、表或者任务。你可以根据需要选择具体的对象,也可以选择整个项目进行监控。
定义告警规则:根据你的需求,设置告警规则,例如设置阈值、条件等。你可以设置多个规则来满足不同的监控需求。
配置订阅方式:选择你希望接收告警通知的方式,包括邮件、消息推送等。
点击"确定"完成订阅配置。
完成上述步骤后,DataWorks会按照你配置的规则和方式来监控MaxCompute项目、表或者任务,并在触发告警条件时发送通知给你。
在DataWorks中配置MaxCompute监控进行订阅管理,可以按照以下步骤进行:
配置完成后,系统将根据订阅内容和告警阈值自动监测MaxCompute表或视图的状态,并及时发出告警通知。通过这种方式,可以帮助用户及时发现并解决MaxCompute表或视图的问题,保障系统的正常运行。
配置示例:MaxCompute
https://help.aliyun.com/zh/dataworks/user-guide/configure-monitoring-rules-for-maxcompute?spm=a2c4g.11186623.0.i1
监控规则是数据质量(DQC)的核心。数据质量支持EMR(E-MapReduce)、Hologres、AnalyticDB for PostgreSQL、MaxCompute、CDH Hive监控,本文为您介绍如何配置MaxCompute监控。
新增MaxCompute数据源
进入数据源页面。
登录DataWorks控制台,单击左侧导航栏的管理中心,在下拉框中选择对应工作空间后单击进入管理中心。
进入工作空间管理中心页面后,单击左侧导航栏的数据源,进入数据源页面。
单击右上方的新增数据源添加MaxCompute数据源,详情请参见配置MaxCompute数据源。
选择数据源
单击当前页面左上方的图标图标,选择全部产品 > 数据治理 > 数据质量。
在左侧导航栏,单击规则管理 > 按表配置。
选择引擎/数据源为MaxCompute,显示当前数据源下所有的表。
您也可以输入目标表名(支持表名首字母模糊搜索),查找对应的表。
单击相应表后的配置监控规则。
配置分区表达式
数据质量通过分区表达式来确定需要配置的规则:
如果您的检查对象为非分区表,可以配置分区表达式为NOTAPARTITIONTABLE。
如果您的检查对象为分区表,可以配置为业务日期的表达式(例如$[yyyymmdd-1])。
说明
数据质量规则中,分区表达式不支持使用大括号相关格式。例如,${yyyymmdd-1}。
在数据表的监控规则页面,单击分区表达式后的+,添加分区表达式。
订阅管理默认通知创建者,如果想通知其它用户,您可以手动添加。在相应表的监控规则页面,单击订阅管理。在订阅管理对话框中,选择相应的订阅方式。订阅方式包括邮件通知、邮件和短信通知、钉钉群机器人和钉钉群机器人@ALL。说明 添加钉钉群机器人获取Webhook地址后,复制Webhook地址至订阅管理中即可。详情请参见添加钉钉群机器人获取Webhook地址。单击保存。
https://help.aliyun.com/document_detail/73690.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”
要配置MaxCompute监控进行订阅管理,您可以使用DataWorks的运维中心功能。以下是基本的操作步骤:
这样,您就可以接收到相关的告警消息,以便及时关注MaxCompute作业的运行状况。此外,您还可以使用告警订阅功能,将告警信息推送到钉钉、短信、邮件等渠道,以便及时收到告警信息。总之,在DataWorks中,可以使用告警订阅功能来配置MaxCompute监控,以便及时关注MaxCompute作业的运行状况。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。