开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks针对小时任务补数据,需要先这种问题该怎么处理 ?

DataWorks针对小时任务补数据(每个小时任务执行针对同一个分区的同一张表,会进行覆盖),需要先执行完成一整个任务流程才能进行下一个离线任务(抽取数据到rds层);不能先执行所有的小时任务后再整体执行离线任务。这种问题该怎么处理 ?

展开
收起
真的很搞笑 2024-04-15 16:43:51 29 0
1 条回答
写回答
取消 提交回答
  • 小时任务希望串行执行是吗 小时任务设置自依赖(跨周期依赖本节点),补数据 不跨天的情况下 可以串行 ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2024-04-17 17:12:44
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载