如何实现dataworks分支节点的空跑属性?

如何实现dataworks分支节点的空跑属性?

展开
收起
wenti 2023-02-13 17:14:09 191 分享 版权
1 条回答
写回答
取消 提交回答
  • 考虑到某些分支节点的下游有两个节点,通常只有一个节点被选中,另外一个节点会被置为空跑,同时该空跑属性会不断向下传导至其子节点的情况,DataWorks新增了上游节点空跑属性不进行跨周期传导的调度特性。但如果下游分支节点中,某一个分支节点依赖自身的上一周期,同时上一周期节点未被选中,则该节点会永远空跑。例如,节点(我是左边)被置为空跑,则其下游节点也会被置为空跑。 image.png 为了满足下一周期的节点是否运行由下一周期的分支节点决定,而不是上一周期的空跑属性来决定的需求,您可以进行以下操作:单击节点编辑页面右侧的调度配置。在时间属性区域,选中依赖上一周期。单击高级配置。选中上游节点空跑属性不进行跨周期传导,该任务将不被上一周期分支节点的空跑属性影响。 image.png 说明 普通节点上一周期的空跑属性不适用该选项,仅分支节点未被选中导致的空跑属性会被影响。——该回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-02-13 20:44:38
    赞同 展开评论

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

收录在圈子:
+ 订阅
还有其他疑问?
咨询AI助理