AI 助理
备案控制台
开发者社区 数据库 正文

MongoDB 增量同步流程是怎样的

MongoDB 增量同步流程是怎样的

展开
收起
一人吃饱，全家不饿 2021-01-08 17:27:39 838 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 一人吃饱，全家不饿
    1. Oplog Fetcher 线程负责拉取 Oplog Find 命令创建 Tailable Cursor，GetMore 命令批量从同步源拉取 Oplog，单个 Batch 最大 16MB；
    2. 拉取的 Oplog Batch 放到内存中的 Blocking Queue 中；
    3. ReplBatcher 线程负责从 Blocking Queue 中取出 Batch 生成新的可 Apply 的 Batch 放到 Deque 中，这里主要是因为需要控制并发，有些操作需要放到一个单独的 Batch；
    4. OplogApplier 线程负责从 Deque 中取出 Batch 写 Oplog， 然后把 Batch 拆分， 分发到 Worker 线程进行并发 Apply；
    5. 为了保持一致性，中间需要保存多个不同的 Oplog 应用位点信息。
    2021-01-11 10:12:17
    赞同 展开评论
问答分类：
NoSQL MongoDB 云数据库 MongoDB 版
问答标签：
云数据库 MongoDB 版同步 云数据库 MongoDB 版增量 云数据库 MongoDB 版增量同步 云数据库 MongoDB 版流程
问答地址：
开发者社区 > 数据库 > 问答
相关问答
DTS MongoDB里的数据怎么同步到RDS mysql里
233
1
0
DTS同步MongoDB提示oplog开启问题
105
1
0
DTS是否支持MongoDB增量迁移
59
1
0
flink cdc同步 mongodb支持用证书验证的方式嘛？
94
1
0
DataWorks中mongodb这种到毫秒的数据类型，同步到odps应该用什么类型才能保留毫秒？
76
1
0
用dataworks把mongodb数据同步到maxcompute，支持增量同步吗？
69
1
0
通过DBS数据库备份对自建MongoDB(4.0.6版本)进行数据的增量备份，对服务器性能影响大吗？
108
0
0
DTS MongoDB单节点模式不支持增量吗
58
1
0
DTS MongoDB单节点实例是否支持增量数据迁移
41
1
0
MongoDB的数类型array同步到odps的效果
67
1
0

数据库

数据库领域前沿技术分享与交流

我要提问
收录在圈子:
阿里云数据库
279461
+ 订阅
让用户数据永远在线，让数据无缝的自由流动

相关文章

  • 十年大厂员工终明白：MySQL性能优化的尽头，是对B+树的极致理解
  • PHP-Casbin：一个让开发者不再为权限控制 “重复造轮子” 的工具
  • 如何开发工程项目部管理系统中的进度管理板块（附架构图+流程图+代码参考）
  • Facebook内部都在用的存储引擎，LSM凭什么能硬扛亿级写入流量？
  • GPU集群扩展：Ray Serve与Celery的技术选型与应用场景分析

    • 热门讨论

    热门文章

  • “数据超人”MCP工具，到底是怎么让数据‘燃’起来的？
  • 如何让 Dify on DMS 助力智能应用开发？
  • 如何利用 AI 提升数据库运维效率？
  • DTS是什么的缩写，是什么意思？
  • 你印象最深的一道SQL题目是什么？
  • 什么是DTS？
  • 运营与运维的概念区别是什么？
  • 游戏行业细分场景与解决方案存在哪些优势？
  • 聊一聊你眼中的Data Agent，它能帮我们完成什么？
  • RDS，DRDS，REDIS，ADS，ODPS之间的联系和区别是什么？
    • 展开全部
  • 阿里云图数据库GDB公测，高度连接数据查询效率提升10倍
  • MongoDB查询优化：从 10s 到 10ms
  • 【HBase从入门到精通系列】如何避免HBase写入过快引起的各种问题
  • 鉴黄、视频、图片去重、图像搜索业务分析与实践
  • redis4.0之RDB-AOF混合持久化
  • PostgreSQL 同步流复制原理和代码浅析
  • 旋转门数据压缩算法在PostgreSQL中的实现 - 流式压缩在物联网、监控、传感器等场景的应用
  • 阿里云Redis云数据库（KVStore For Redis）控制台介绍
  • 阿里云专访Redisson作者Rui Gu：构建开源企业级Redis客户端之路
  • MySQL · 引擎新特性 · 可开关的InnoDB死锁检测
    • 展开全部
    还有其他疑问?
    咨询AI助理