DataWorks同步任务动态分区是什么?

DataWorks同步任务动态分区是什么?

展开
收起
wenti 2023-02-07 13:27:30 215 分享 版权
2 条回答
写回答
取消 提交回答
  • DataWorks同步任务动态分区是指DataWorks可以根据源表的分区信息,自动创建目标表的分区,并将源表的数据同步到目标表的对应分区中。DataWorks同步任务动态分区可以有效提高数据同步的效率,减少数据同步的时间。

    2023-02-09 10:05:59
    赞同 展开评论
  • 单表实时同步写入到MaxCompute支持根据来源字段内容动态分区;

    离线同步任务不支持动态分区,但是可以通过增量同步的方式来实现动态分区,比如源端mysql通过where过滤出update_time为20221010的数据,写入到目标odps表20221010的分区。

    图片.png ——该回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-02-07 16:26:10
    赞同 展开评论

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

收录在圈子:
+ 订阅
还有其他疑问?
咨询AI助理