AI 助理
备案控制台
开发者社区 问答 正文

DataWorks实时同步任务下游如何挂依赖

已解决

DataWorks实时同步任务下游如何挂依赖

展开
收起
提个问题 2024-06-07 15:03:33 33 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 社区答人
    开发者社区问答官方账号
    官方回答
    采纳回答
    DataWorks实时同步任务下游如何挂依赖
    比如实时任务按每小时写入分区，当20点的分区已经存在的时候就已经可以判断为19点的分区已经结束。可以建一个shell节点 ，里面加一个while循环去检查20点的分区，再留10分钟左右的buffer时间。当maxpt(表名)==调度参数值，退出循环，任务结束。
    2024-06-07 15:03:36
    赞同 展开评论
问答分类：
DataWorks 大数据开发治理平台 DataWorks
问答标签：
大数据开发治理平台 DataWorks依赖 大数据开发治理平台 DataWorks任务 大数据开发治理平台 DataWorks实时同步 大数据开发治理平台 DataWorks实时同步任务 大数据开发治理平台 DataWorks下游
问答地址：
开发者社区 > 大数据 > 问答
相关问答
请问内网怎么调用dataworks的openapi，把依赖拷贝到内网缺失很多在maven仓库的包
35
1
0
DataWorks数据集成的实时同步任务，如果源数据库的数据删掉了，mc的目标表数据的删除策略？
68
1
0
DataWorks这个exec_time我是在实时同步任务的时候，通过系统时间赋值？
52
1
0
dataworks数据集成的‘实时同步’功能是通过flink cdc实现的吗，有没有介绍文档？
80
1
0
DataWorks为什么实时同步里面数据源没有他，离线同步都有？
42
1
0
只想购买一个dataworks的基于mysqlbinlog的实时同步到selectDB的功能推荐下？
48
2
0
DataWorks有办法让其它工作空间的任务清单不要直接出现在当前工作空间的任务的依赖检索项中码？
47
1
0
DataWorks整库实时同步里，这两个参数是什么意思？
52
1
0
DataWorks所有其他节点在这个赋值节点的下游或者下下游可以公用赋值吗？
51
1
0
DataWorks赋值节点与for-each节点循环的问题，放for-each节点下游有可行方案吗？
71
1
0