开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks新建的离线同步DI节点什么时候会生效开始跑?

DataWorks新建的离线同步DI节点什么时候会生效开始跑?

展开
收起
真的很搞笑 2024-01-28 16:46:14 102 0
3 条回答
写回答
取消 提交回答
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    新建的离线同步DI节点会在提交至调度系统后的第二天开始生效并运行

    当您在DataWorks中新建一个离线同步DI节点后,需要配置相关的自定义参数和取值。完成配置后,您可以在节点编辑页面的工具栏中点击提交图标,将该离线同步节点提交至调度系统。一旦提交,调度系统会根据您设置的属性,从第二天开始自动定时运行该节点。这意味着,如果您今天提交了节点,那么它将在明天开始按照预定的时间间隔执行同步任务。

    需要注意的是,数据集成同步任务不允许同一时间运行相同节点的不同实例。这意味着如果您设置了周期性的同步任务,例如每5分钟运行一次,由于上游延迟或其他原因,系统不会在同一时间运行多个相同配置的同步任务。

    此外,为了确保同步任务的正确性和效率,建议在创建节点后仔细检查配置,并在提交前进行必要的测试。同时,您也可以在运维大屏的离线同步页面查看任务的运行状态、数据同步进度等相关信息,以便及时监控和管理同步任务。

    2024-01-28 22:12:36
    赞同 1 展开评论 打赏
  • 默认T+1自动调度 ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2024-01-28 21:24:01
    赞同 1 展开评论 打赏
  • 在DataWorks中,新建的离线同步(DI)节点在配置和保存后会根据设置的调度时间开始生效并运行。具体来说,离线同步节点的生效时间取决于以下几个方面:

    1.调度配置:在创建离线同步节点时,可以设置节点的调度配置,包括调度时间、调度周期等。根据这些配置,系统会确定节点的运行时间。
    2.依赖关系:如果新建的离线同步节点依赖于其他节点,那么它会在依赖的节点运行完成后开始运行。系统会确保按照依赖关系正确执行节点。
    3.手动触发:在某些情况下,可以手动触发离线同步节点的运行。这可以通过在DataWorks界面上选择相应的节点并手动启动来实现。

    请注意,节点的实际运行时间还可能受到系统资源、队列等待时间等因素的影响。因此,建议根据实际需求合理设置节点的调度配置,并监控节点的运行状态以确保数据同步的准确性和及时性。

    2024-01-28 20:13:47
    赞同 1 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多