开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks交中mongo增量同步是什么?

DataWorks交中mongo增量同步是什么?

展开
收起
cuicuicuic 2023-04-28 22:46:46 122 0
1 条回答
写回答
取消 提交回答
  • "1. mongo reader增量同步: 实时场景:增量的标志是mongodb里的一个字段为createtime,每次导入的数据范围是业务时间00:00到业务时间23:59 * {createtime :{$gte:ISODate(""unknownT00:00:00.000+0800""),$lte:ISODate(""unknownT23:59:59.999+0800"")}} 注意: * 1.不支持时间戳 * 2.query 可结合调度参数同步使用 * 3.详情请参见MongoDB查询语法。,此回答整理自钉群“DataWorks交流群(答疑@机器人)”"

    2023-05-01 15:02:26
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多