开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks中兜底意图是什么?

DataWorks中兜底意图是什么?

展开
收起
真的很搞笑 2023-08-07 18:54:16 61 0
2 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    可以理解为:

    处理数据流中的异常情况。
    当数据处理管道中的某个节点发生异常时,采取相应的“兜底”措施,保证数据流可以继续执行下去。

    具体来说:

    当上游节点出现数据错误/缺失/延迟时,兜底节点可以提供缺省值或历史数据,保证下游任务可以正常执行。

    当中间节点由于硬件错误等原因无法运行时,兜底节点可以根据策略重试或跳过该任务。

    当下游节点拒收数据时,兜底节点可以将数据暂时缓存,待下游恢复后再发送。

    兜底节点也可以记录异常日志,方便后续排查问题。

    更极致的做法是预测可能出现的异常情况,提前设置相应的兜底规则。

    2023-08-10 16:37:44
    赞同 展开评论 打赏
  • 查看我们的官网文档:
    DataWorks 文档。
    如果文档无法解决您的问题,您可以提交工单寻找阿里云售后工程师的帮助。,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-08-07 20:03:30
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多