利用DTS数据传输服务进行数据库迁移的方法汇总

简介: 最近在搞数据库迁移,顺便汇总了一下各种数据库迁移的做法。其中最主要用到的是阿里云的DTS数据传输服务产品:一种将用户的MySQL、SQLServer、Redis、Mongodb从一个地方或账号迁移到另一个地方或账号的迁移工具(仅支持数据库的迁移)。

最近在搞数据库迁移,顺便汇总了一下各种数据库迁移的做法。其中最主要用到的是阿里云的DTS数据传输服务产品:一种将用户的MySQL、SQLServer、Redis、Mongodb从一个地方或账号迁移到另一个地方或账号的迁移工具(仅支持数据库的迁移)。
DTS官网链接是:https://www.aliyun.com/product/dts。

DTS支持的迁移形式有三种:
 结构迁移:是指进行结构对象定义语法的迁移,包括表、视图、触发器、存储过程、存储函数、同义词等结构对象的语法迁移
 全量迁移:将源实例数据库中的所有数据,不包括结构语法定义,迁移到目标实例。如果创建迁移任务时,只选择全量数据迁移,而不选增量数据迁移,那么在迁移过程中,如果源实例有数据写入,那么对于迁移过程中源实例的新增数据,不会迁移到目标实例。
 增量迁移:将源实例写入的增量数据同步到目标实例。如果创建迁移任务时,选择了全量数据迁移及增量数据迁移,那么数据传输服务会先在源实例实现静态快照,先将快照数据迁移到目标实例之后,再将迁移过程中源实例写入的增量数据同步到目标实例中。增量数据迁移是一个保持目标实例跟源实例数据实时同步的过程,不会自动结束,如果需要结束迁移,那么需要在控制台手动结束任务。

迁移之前需要在阿里云上购买目标数据库,建议先开通按量的,迁移完成数据无误后再转成包年包月。

一、 用DTS迁移到RDS For MySQL

  1. 从AWS云迁移到阿里云
    https://help.aliyun.com/document_detail/52555.html
  2. 从腾讯云迁移到阿里云
    https://help.aliyun.com/document_detail/52904.html
  3. 从本地MySQL迁移到RDS for MySQL(必选:结构迁移、全量迁移,可选:增量迁移)
    https://help.aliyun.com/document_detail/26621.html
  4. RDS实例间的数据迁移(可跨账号)
    https://help.aliyun.com/document_detail/26626.html
  5. 使用DTS跨阿里云账号迁移RDS数据(和第4点类似)
    https://help.aliyun.com/document_detail/26652.html
  6. 跨阿里云账号的ECS自建数据库迁移至RDS(和第4点类似)
    https://help.aliyun.com/document_detail/26653.html
  7. ECS上的自建MySQL迁移至POLARDB实例
    https://help.aliyun.com/document_detail/100167.html
  8. 将RDS MySQL迁移至POLARDB
    https://help.aliyun.com/document_detail/100169.html

小技巧
迁移完成后将在程序中用新RDS地址替换老的RDS地址,可以修改链接地址为自己想要的,避免再修改程序中数据库地址。具体操作见:https://help.aliyun.com/document_detail/96941.html
image

二、用DTS迁移RDS For SQL Server

  1. 从本地 SQL Server 迁移到 RDS for SQL Server
    https://help.aliyun.com/document_detail/26622.html

  2. SQL Server 不停机迁移
    https://help.aliyun.com/document_detail/34357.html

三、用DTS迁移到阿里云Redis

  1. ECS上的自建数据库到Redis的数据迁移
  1. 自建 Redis 实例到阿里云 Redis 实例的迁移
    https://help.aliyun.com/document_detail/47896.html

  2. 将AWS ElastiCache for Redis数据库迁移到阿里云
    https://help.aliyun.com/document_detail/101071.html

  3. 将Google Cloud Platform Memorystore数据库迁移到阿里云Redis
    https://help.aliyun.com/document_detail/108871.html

  4. 将SSDB数据库迁移到云数据库Redis版
    https://help.aliyun.com/document_detail/102928.html

  5. 云下到云上的迁移

    a. Redis集群迁移

    b. Codis集群迁移

    c. 使用redis-port进行迁移

    d. 使用redis-shake进行迁移
    https://help.aliyun.com/document_detail/111066.html
    e. 使用RDB文件进行迁移

    f. 使用AOF文件进行迁移
    https://help.aliyun.com/document_detail/26357.html
    g. 使用redis-shake迁移RDB文件内的数据
    https://help.aliyun.com/document_detail/116378.html

  6. 云数据库Redis版之间迁移
    a. 使用rump在云数据库Redis版之间迁移

    b. 全球多活进行跨地域实例迁移
    https://help.aliyun.com/document_detail/97729.html
    c. 使用redis-port跨账号迁移

    d. 全球多活进行跨VPC实例迁移

  1. 更多Reids迁移方案
    https://help.aliyun.com/document_detail/97027.html

四、用DTS迁移到阿里云MongoDB

  1. ECS上的自建数据库到MongoDB的数据迁移
  1. 本地MongoDB数据库迁移至云数据库MongoDB
  1. MongoDB副本集实例迁移至分片集群实例(源实例数据库版本需为3.2或3.4版本,暂不支持4.0版本)
    https://help.aliyun.com/document_detail/113516.html

  2. DTS将腾讯云MongoDB数据库迁移至阿里云
    https://help.aliyun.com/document_detail/101442.html

  3. MongoDB更多迁移方法
    a. 腾讯云MongoDB数据库迁移至阿里云
    https://help.aliyun.com/document_detail/101445.html
    b. 华为云文档数据库迁移至阿里云
    https://help.aliyun.com/document_detail/101825.html
    c. Atlas MongoDB数据库迁移至阿里云
    https://help.aliyun.com/document_detail/102305.html
    d. Amazon DynamoDB数据库迁移至阿里云

    e. MongoDB数据迁移方案概览
    https://help.aliyun.com/document_detail/99995.html

相关实践学习
自建数据库迁移到云数据库
本场景将引导您将网站的自建数据库平滑迁移至云数据库RDS。通过使用RDS,您可以获得稳定、可靠和安全的企业级数据库服务,可以更加专注于发展核心业务,无需过多担心数据库的管理和维护。
Sqoop 企业级大数据迁移方案实战
Sqoop是一个用于在Hadoop和关系数据库服务器之间传输数据的工具。它用于从关系数据库(如MySQL,Oracle)导入数据到Hadoop HDFS,并从Hadoop文件系统导出到关系数据库。 本课程主要讲解了Sqoop的设计思想及原理、部署安装及配置、详细具体的使用方法技巧与实操案例、企业级任务管理等。结合日常工作实践,培养解决实际问题的能力。本课程由黑马程序员提供。
相关文章
|
人工智能 运维 关系型数据库
数据库运维:mysql 数据库迁移方法-mysqldump
本文介绍了MySQL数据库迁移的方法与技巧,重点探讨了数据量大小对迁移方式的影响。对于10GB以下的小型数据库,推荐使用mysqldump进行逻辑导出和source导入;10GB以上可考虑mydumper与myloader工具;100GB以上则建议物理迁移。文中还提供了统计数据库及表空间大小的SQL语句,并讲解了如何使用mysqldump导出存储过程、函数和数据结构。通过结合实际应用场景选择合适的工具与方法,可实现高效的数据迁移。
1783 1
|
数据库
【YashanDB知识库】数据库一主一备部署及一主两备部署时,主备手动切换方法及自动切换配置
【YashanDB知识库】数据库一主一备部署及一主两备部署时,主备手动切换方法及自动切换配置
【YashanDB知识库】数据库一主一备部署及一主两备部署时,主备手动切换方法及自动切换配置
|
12月前
|
存储 关系型数据库 MySQL
MySQL数据库中进行日期比较的多种方法介绍。
以上方法提供了灵活多样地处理和对比MySQL数据库中存储地不同格式地日子信息方式。根据实际需求选择适当方式能够有效执行所需操作并保证性能优化。
1051 10
|
SQL Oracle 关系型数据库
比较MySQL和Oracle数据库系统,特别是在进行分页查询的方法上的不同
两者的性能差异将取决于数据量大小、索引优化、查询设计以及具体版本的数据库服务器。考虑硬件资源、数据库设计和具体需求对于实现优化的分页查询至关重要。开发者和数据库管理员需要根据自身使用的具体数据库系统版本和环境,选择最合适的分页机制,并进行必要的性能调优来满足应用需求。
580 11
|
存储 算法 Java
实现不同数据库的表间的 JOIN 运算的极简方法
跨库计算是数据分析中的常见难题,尤其涉及多数据库系统时,表间 JOIN 操作复杂度显著提升。esProc 提供了一种高效解决方案,能够简化跨库 JOIN 的实现。例如,在车辆管理、交管和公民信息系统中,通过 esProc 可轻松完成如下任务:按城市统计有车公民事件数量、找出近一年获表彰的车主信息,以及按年份和品牌统计车辆违章次数。esProc 支持不同关联场景(如维表关联与主子表关联)的优化算法,如内存索引、游标处理和有序归并,从而大幅提升编码和运算效率。无论是同构还是异构数据源,esProc 均能灵活应对,为复杂数据分析提供强大支持。
|
Oracle 安全 关系型数据库
【Oracle】使用Navicat Premium连接Oracle数据库两种方法
以上就是两种使用Navicat Premium连接Oracle数据库的方法介绍,希望对你有所帮助!
2718 28
|
SQL 关系型数据库 MySQL
大数据新视界--大数据大厂之MySQL数据库课程设计:MySQL 数据库 SQL 语句调优方法详解(2-1)
本文深入介绍 MySQL 数据库 SQL 语句调优方法。涵盖分析查询执行计划,如使用 EXPLAIN 命令及理解关键指标;优化查询语句结构,包括避免子查询、减少函数使用、合理用索引列及避免 “OR”。还介绍了索引类型知识,如 B 树索引、哈希索引等。结合与 MySQL 数据库课程设计相关文章,强调 SQL 语句调优重要性。为提升数据库性能提供实用方法,适合数据库管理员和开发人员。
|
SQL 数据库连接 Linux
数据库编程:在PHP环境下使用SQL Server的方法。
看看你吧,就像一个调皮的小丑鱼在一片广阔的数据库海洋中游弋,一路上吞下大小数据如同海中的珍珠。不管有多少难关,只要记住这个流程,剩下的就只是探索未知的乐趣,沉浸在这个充满挑战的数据库海洋中。
571 16
|
存储 缓存 Java
java语言后台管理ruoyi后台管理框架-登录提示“无效的会话,或者会话已过期,请重新登录。”-扩展知识数据库中密码加密的方法-问题如何解决-以及如何重置若依后台管理框架admin密码-优雅草卓伊凡
java语言后台管理ruoyi后台管理框架-登录提示“无效的会话,或者会话已过期,请重新登录。”-扩展知识数据库中密码加密的方法-问题如何解决-以及如何重置若依后台管理框架admin密码-优雅草卓伊凡
2664 3
java语言后台管理ruoyi后台管理框架-登录提示“无效的会话,或者会话已过期,请重新登录。”-扩展知识数据库中密码加密的方法-问题如何解决-以及如何重置若依后台管理框架admin密码-优雅草卓伊凡
|
数据库
【YashanDB 知识库】数据库一主一备部署及一主两备部署时,主备手动切换方法及自动切换配置
**数据库主备切换简介** 在数据库正常或异常情况下,实现主备切换至关重要。若配置不当,主节点故障将影响业务使用,尤其在23.2版本中。原因包括资源紧张或主节点异常。解决方法涵盖手动和自动切换: 1. **一主一备部署**: - **手动切换**:支持Switchover(同步正常时)和Failover(主库损坏时)。 - **自动切换**:启用yasom仲裁选主开关。 2. **一主两备部署**: - 默认最大保护模式,自动切换开启。 需检查并配置自动切换以确保高可用性。经验总结:一主一备默认关闭自动切换,需手动开启;一主两备默认开启。