开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks在运维中心里 根据定时时间做筛选 为什么还会出现在定时时间范围外的实例?

DataWorks在运维中心里 根据定时时间做筛选 为什么还会出现在定时时间范围外的实例?image.png

展开
收起
真的很搞笑 2023-12-24 13:46:20 43 0
1 条回答
写回答
取消 提交回答
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    在DataWorks的运维中心,周期任务是根据调度配置自动定时运行的任务。任务的定时时间基于单个节点维度定义,但实际运行时间可能与节点依赖的上游节点的定时时间有关。即使当前节点的定时时间早于上游节点,当前节点也必须等待上游节点的定时时间到来并且执行成功后,才会执行。

    如果您发现在定时时间范围外出现的实例,可能的原因有:

    1. 上游节点未按时执行或执行失败,导致后续节点无法按预期启动。
    2. 任务配置中的调度参数或调度资源组设置不正确。
    3. 调度系统中存在动态替换的调度参数,这些参数在实际运行时可能会影响任务的启动时机。

    为避免此类问题,建议您采取以下措施:

    1. 在任务发布后,首先检查周期任务配置的调度参数、调度资源组等是否正确。
    2. 利用冒烟测试功能验证周期任务在生产环境的正确执行。
    3. 如果发现错误或异常,及时根据报错信息进行处理,确保任务可以正常运行。
    4. 对于存在依赖关系的任务,特别关注上游节点的执行情况,确保它们能够按时并成功执行。
    2023-12-24 19:04:47
    赞同 1 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    企业运维之云原生和Kubernetes 实战 立即下载
    可视化架构运维实践 立即下载
    2021云上架构与运维峰会演讲合集 立即下载