开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

数据集成中,分区表ds可以指定某个字段做动态分区吗?

数据集成中,分区表ds可以指定某个字段做动态分区吗?

展开
收起
爱喝咖啡嘿 2023-01-03 13:38:53 249 0
1 条回答
写回答
取消 提交回答
  • 单表实时同步写入到MaxCompute支持根据来源字段内容动态分区;

    离线同步任务不支持动态分区,但是可以通过增量同步的方式来实现动态分区,比如源端mysql通过where过滤出update_time为20221010的数据,写入到目标odps表20221010的分区。 image.png——该回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-01-06 10:47:28
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

热门讨论

热门文章

相关电子书

更多
Flink CDC:新一代数据集成框架 立即下载
DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
《DataWorks 数据集成实时同步》 立即下载