开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

dataworks运维中心补数据,跑一个根节点下的所有子节点,这个可以设置吗?

dataworks运维中心补数据,跑一个根节点下的所有子节点,这些子节点里面有定时每天的节点,有小时节点,是两种混合一块的。因为业务日期的粒度是到日,所以其中小时节点,它现在是每个节点会默认的生成24个实例。这个可以设置吗?我想让小时调度的节点在补数据中也是只跑一次,能实现吗?

展开
收起
真的很搞笑 2024-01-15 11:42:58 52 0
2 条回答
写回答
取消 提交回答
  • 小时任务在执行补数据的时候可以指定周期image.png
    ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2024-01-15 15:56:00
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    可以实现。在DataWorks运维中心中,您可以为每个节点设置不同的调度策略。对于小时节点,您可以将其设置为仅运行一次。具体操作如下:

    1. 登录DataWorks运维中心控制台。
    2. 在左侧导航栏中,选择“任务管理”。
    3. 找到您需要修改的小时节点,点击进入详情页面。
    4. 在详情页面中,找到“调度策略”部分。
    5. 将“调度策略”设置为“仅运行一次”,然后点击保存。

    这样,当您进行补数据操作时,小时调度的节点将只运行一次。其他子节点(包括每天定时节点)将继续按照原有的调度策略运行。

    2024-01-15 13:25:39
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    企业运维之云原生和Kubernetes 实战 立即下载
    可视化架构运维实践 立即下载
    2021云上架构与运维峰会演讲合集 立即下载