开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks就odps里可以直接抛异常吗?

DataWorks就odps里可以直接抛异常吗?或者自定义规则里可以配置sql吗根据sql告警

展开
收起
真的很搞笑 2023-12-10 19:57:51 99 0
4 条回答
写回答
取消 提交回答
  • 任务实例状态异常https://help.aliyun.com/zh/dataworks/support/node-instance-status?spm=a2c4g.11186623.0.i47

    本文为您介绍实例异常排查的相关问题。

    2023-12-11 13:55:37
    赞同 展开评论 打赏
  • 关于告警,目前是任务执行失败,成功可以告警,但告警内容不包含ODPS SQL报错信息,而是提供了出错的实例信息,需要去查看实例的日志。此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-12-11 11:03:35
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    DataWorks中对于ODPS的异常处理,您可以在SQL脚本中直接使用"throw"关键字来抛出异常。当SQL查询提示"ODPS request failed"时,可能涉及到的是诸如访问密钥无效等问题,这需要检查并确保您正在使用正确的数据源,并且该数据源已启用。如果数据源不正确或未启用,则可能会导致数据规则配置失败。

    同时,DataWorks也支持通过自定义规则进行告警配置。具体来说,您可以在自定义规则中配置告警阈值和告警通知方式等信息。但是,这里需要注意的是,虽然自定义规则可以配置sql语句,但目前还不支持根据sql告警。所以如果您希望实现基于sql执行情况的告警,可能需要结合其他工具或方案来实现。

    2023-12-11 09:56:53
    赞同 展开评论 打赏
  • 在 DataWorks(MaxCompute)中,可以通过抛出异常或使用自定义规则来实现告警。

    1. 抛出异常:在 MaxCompute 的脚本中,您可以使用 Raise Exception 语句来抛出异常。例如,在脚本中添加逻辑判断,如果满足某个条件,则使用 Raise Exception 抛出一个自定义的异常信息。这样,当任务执行时,如果满足该条件,就会触发异常,进而触发告警。

    2. 自定义规则和SQL告警:DataWorks 中的自定义规则功能可以监控任务运行状态,并基于指定的规则进行告警通知。虽然自定义规则主要用于检测任务的状态和数据质量等方面,但也可以间接实现 SQL 告警。您可以创建一条自定义规则,将目标设置为需要监控的任务,然后在规则的配置中编写 SQL 来检查某个条件是否满足,如果满足则触发告警操作。

    2023-12-10 21:32:28
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载