开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks这边这些分表同步使用的全增量的同步方式是不是全量同步会把历史数据都放在一个分区里?

DataWorks这边这些分表同步使用的全增量的同步方式,是不是全量同步会把历史数据都放在一个分区里,可以把历史数据按照时间字段放到对应的分区吗,因为数据量有些大?image.png

展开
收起
cuicuicuic 2024-05-05 20:40:32 30 0
1 条回答
写回答
取消 提交回答
  • 对的 都放一个分区里 默认生成的全量任务 没有过滤条件 所以不能按照时间字段分区 ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2024-05-05 21:13:32
    赞同 3 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关电子书

更多
DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

相关实验场景

更多