AI 助理
备案控制台
开发者社区 问答 正文

DataWorks实时同步任务下游如何挂依赖

已解决

DataWorks实时同步任务下游如何挂依赖

展开
收起
提个问题 2024-06-07 15:03:33 33 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 社区答人
    开发者社区问答官方账号
    官方回答
    采纳回答
    DataWorks实时同步任务下游如何挂依赖
    比如实时任务按每小时写入分区，当20点的分区已经存在的时候就已经可以判断为19点的分区已经结束。可以建一个shell节点 ，里面加一个while循环去检查20点的分区，再留10分钟左右的buffer时间。当maxpt(表名)==调度参数值，退出循环，任务结束。
    2024-06-07 15:03:36
    赞同 展开评论
问答分类：
DataWorks 大数据开发治理平台 DataWorks
问答标签：
大数据开发治理平台 DataWorks依赖 大数据开发治理平台 DataWorks任务 大数据开发治理平台 DataWorks实时同步 大数据开发治理平台 DataWorks实时同步任务 大数据开发治理平台 DataWorks下游
问答地址：
开发者社区 > 大数据 > 问答
相关问答
请问内网怎么调用dataworks的openapi，把依赖拷贝到内网缺失很多在maven仓库的包
35
1
0
dataworks数据集成的‘实时同步’功能是通过flink cdc实现的吗，有没有介绍文档？
79
1
0
dataworks虚拟节点这里看着像是自依赖的，这个怎么修改一下虚拟节点不让它自依赖呢？
26
1
0
只想购买一个dataworks的基于mysqlbinlog的实时同步到selectDB的功能推荐下？
48
2
0
dataworks整库全增量同步任务，出现了这个报错？对我实时同步的数据有影响吗？
49
1
0
DataWorks有办法让其它工作空间的任务清单不要直接出现在当前工作空间的任务的依赖检索项中码？
45
1
0
DataWorks为什么设置了这个前置依赖，就导致整个任务都被跳过了？
43
1
0
DataWorks为什么这个配置发布后 在运维中心没生效 没有下游？
29
1
0
DataWorks每天上游跑多长时间我不知道 那下游的开始时间要怎么设置？
41
1
0
DataWorks下游任务的这个调度时间需要配置吗 我只想配置根结点的？
37
1
0