开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks中我设置了虚拟节点 作为调度开始点 完了 设置了 6.30开始跑 为什么虚拟节点?

DataWorks中我设置了虚拟节点 作为调度开始点 完了 设置了 6.30开始跑 为什么虚拟节点后面的调度不跑呢?如何解决

展开
收起
cuicuicuic 2023-06-18 10:47:12 86 0
2 条回答
写回答
取消 提交回答
  • 对于DataWorks中的虚拟节点,其作用是为了模拟调度,方便用户进行调试和测试。虚拟节点本身并不执行任何实际的任务,因此在其后面的调度不会运行。

    如果你设置了虚拟节点作为调度开始点,并且在虚拟节点后面设置了其他的调度,但是这些调度没有运行,那么可能是以下原因之一:

    调度时间设置不正确:请确保你设置的实际运行时间正确,包括时区、日期、时间等。 调度条件不满足:请确保你设置的调度条件得到了满足,例如数据触发、手动触发等。 任务配置不正确:请检查任务配置是否正确,包括输入、输出、处理逻辑等。 系统故障:如果以上原因都不成立,那么可能是系统出现了故障。请联系DataWorks客服或管理员进行排查和解决问题。 针对以上原因,你可以尝试以下解决方法:

    确认调度时间设置正确,并重新设置调度时间。 检查调度条件是否得到满足,并重新设置调度条件。 重新配置任务,包括输入、输出、处理逻辑等。 如果问题仍然存在,请联系DataWorks客服或管理员进行排查和解决问题。

    2023-06-19 09:30:13
    赞同 展开评论 打赏
  • 任务不运行,【1.运维中心周期任务没有找到该任务】 image.png 节点尚未发布到生产环境,请检查下是否发布失败。

    image.png

    【2.有周期任务,但是周期实例一个都没有】

    image.png

    **【排查方式】**请在右上角工作空间配置检查工作空间是否开启调度。

    【3.有周期任务,有其他周期实例,但是这个任务没有产生周期实例】

    **【排查方式】**场景一:23:30分之后的发布操作第三天生效。

    **【排查方式】**场景二:右键周期任务DAG图--展开多层父节点,检查该节点是否变成了没有挂在_root下的孤立节点,孤立节点不产生实例(收到孤立节点报警请第一时间处理)

    **【排查方式】**场景三:检查本节点及上游节点是否在有效期内。过期任务不产生周期实例。 image.png

    **【现象原因】**节点依赖关系变动,导致节点没有上游依赖。

    **【解决办法】**检查孤立节点的上游节点状态是否正常,为孤立节点重新设置依赖关系。孤立节点不产生实例(收到孤立节点报警请第一时间处理)

    【4.有周期任务,有周期实例但未运行(节点状态灰色)】

    **【排查方式】**右键灰色实例DAG--展开多层父节点,检查任务是否有正在运行、运行中、运行失败、等待状态,未冻结。如果都是灰色,请根据第二条检查是否没有挂在_root下,孤立节点不运行。

    【现象原因】 1.正常调度,任务运行需要有多个条件,调度资源,定时时间,上游节点运行状态,正常调度(未被冻结) 2.上游没有出现以上任何一种状态,整个业务流程均为灰色,说明上游依赖关系变动导致业务流程都被孤立。

    【解决办法】 1.正常调度情况下,如果等待资源的情况较多,请使用独享调度资源。 2.整个业务流程孤立请给该业务流程的root节点添加依赖的上游。

    【5.任务运行必须满足的4个条件详述】

    5.1 任务定时时间已到(等待时间的节点状态:黄色)

    5.2 该节点所有的依赖的父节点都已经运行完成(运行成功节点状态:绿色,运维中心DAG图展开父节点)

    5.3 项目下有足够的资源可让任务运行(等待资源节点状态:黄色,日志中显示当前项目下任务并发达到上限,正在等待gateway资源)

    5.4.任务正常调度(任务被冻结节点状态:紫色)

    【5.开发环境运维中心能否周期性调度】

    开发环境为测试环境,不支持周期性调度任务。 image.png ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-06-18 11:04:11
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks全链路数据质量解决方案-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多