Mysql全量数据同步Oracle步骤详解

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
简介: 0、题记项目实战中我们会遇到数据库选型的问题,有时会需要将已有Mysql数据库中的数据库全部同步到Oracle数据库中。

我们知道,Mysql的数据类型、sql语句和oracle是不通用的。所以,直接的导入、导出sql的方式在mysql与mysql之间可以,oracle与oracle之间可以,但是,在mysql和oracle之间是不可以的。


这里,就有了这篇文章要探讨的问题:有没有比较快速的方式实现Mysql与Oracle之间的同步?


1、同步工具选择

Google N久后,选择了sqldeveloper自带的同步模块实现二者的同步。

经验证,该方法对于数据库的全量同步非常好用。(验证环境,同一数据库的50个库表,数据量不大,同步时间2分钟左右)


其他的同步方案:

1)otter阿里巴巴分布式数据库同步系统(解决中美异地机房) https://github.com/alibaba/otter

没有验证,尚不知是否好用。


2)Kettle (Kettle是一款国外开源的ETL工具,纯java编写,可以在Window、Linux、Unix上运行,数据抽取高效稳定。)

里面有数据库间同步、插入/更新、导出sql等的模块。

尝试了下,没有发现整体同步整个数据库的方法。


2、sqldeveloper同步操作步骤

步骤1:在新建的oracle数据库中,新建待同步mysql数据库同名的用户及表空间(表空间名称可以自定义)。

原因如下:在Mysql中,数据库和用户之间的关系不是特别明显,只要我们链接到Mysql服务器,可以看到所有的数据库和表。


而Oracle新建一个用户是没有任何资源和权限的,需要我们为其分配资源权限,也可以在这个用户下面建立表,但不能向Oracle那样建数据库,

因为对oracle来说,一个用户就对应Mysql的一个数据库。


所以迁移数据库,需要在Oracle中创建一个与相应mysql数据库同名的用户。


1)基础操作——创建新用户

create user 用户名 identified by 密码 default tablespace 表空间名


2)表空间及用户创建操作

create tablespace test datafile '/home/oracle/oradata/test .dbf' size 20000m;

create user test identified by test default tablespace test quota 500m on users;

grant all privileges to test ;

1

2

3

以上,创建了20G的表空间,表空间名称为 test .dbf。

用户名: test ,密码: test 。

创建后的表空间如下所示:


[root@Node01 oradata]# ls -al

总用量 20480020

drwxr-xr-x. 2 oracle oinstall 4096 3月 9 11:09 .

drwx------. 25 oracle oinstall 4096 3月 9 11:07 ..

-rw-r-----. 1 oracle oinstall 20971528192 3月 9 16:05 test.dbf

[root@Node01 oradata]# pwd

/home/oracle/oradata

1

2

3

4

5

6

7

步骤2:通过Oracle SQL Developer转换数据库

image.png

image.png

导出最后,之前配置的导出存储文件会生成导出sql:image.png

3、同步注意事项

表名中有中文等特殊字符,会导致导出报错。


4、小结

1)不要迷恋所谓的权威,当一个问题你遇到时,要Google一下是否有成熟的方案,有的话就不要重复“造轮子”。有的话,要调研下,找到效率最高的方式。


2)sqldeveloper大家都有用,但是其自带的同步模块却鲜为人知。


3)sqldeveloper同步优点:无需修改表结构,傻瓜式点击”下一步“操作,同步效率极高。


参考:

1)步骤向导:http://www.jb51.net/article/95345.htm(非常详细,一篇足够)

2)http://blog.csdn.net/u012814041/article/details/17530141

3)http://blog.csdn.net/wwwzys/article/details/8813503(有点乱)

相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
1月前
|
SQL API 数据处理
实时计算 Flink版产品使用合集之DataStream方式是否可以实现oracle-->的数据同步
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStreamAPI、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
|
1月前
|
SQL Oracle 关系型数据库
实时计算 Flink版产品使用合集之和Oracle数据同步必须是使用主库吗
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStreamAPI、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
实时计算 Flink版产品使用合集之和Oracle数据同步必须是使用主库吗
|
10天前
|
监控 关系型数据库 MySQL
MySQL索引的创建步骤是什么?
【6月更文挑战第15天】MySQL索引的创建步骤是什么?
16 5
|
5天前
|
Oracle 关系型数据库 数据库
Oracle 11G数据库安装步骤及截图操作2
Oracle 11G数据库安装步骤及截图操作
8 0
|
5天前
|
Oracle 安全 关系型数据库
Oracle 11G数据库安装步骤及截图操作1
Oracle 11G数据库安装步骤及截图操作
16 0
|
8天前
|
Java 关系型数据库 流计算
实时计算 Flink版操作报错合集之配置cats进行从MySQL到StarRocks的数据同步任务时遇到报错,该怎么办
在使用实时计算Flink版过程中,可能会遇到各种错误,了解这些错误的原因及解决方法对于高效排错至关重要。针对具体问题,查看Flink的日志是关键,它们通常会提供更详细的错误信息和堆栈跟踪,有助于定位问题。此外,Flink社区文档和官方论坛也是寻求帮助的好去处。以下是一些常见的操作报错及其可能的原因与解决策略。
292 0
|
1月前
|
SQL Kubernetes 关系型数据库
实时计算 Flink版产品使用合集之如何实现MySQL单表数据同步到多个表
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStreamAPI、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
|
1月前
|
SQL 关系型数据库 MySQL
实时计算 Flink版产品使用合集之使用 MySQL CDC 进行数据同步时,设置 server_id 参数如何解决
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStream API、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
|
11天前
|
关系型数据库 MySQL 数据库
【已解决】[图文步骤] message from server: “Host ‘172.17.0.1‘ is not allowed to connect to this MySQL server“
【已解决】[图文步骤] message from server: “Host ‘172.17.0.1‘ is not allowed to connect to this MySQL server“
22 0
|
1月前
|
SQL 关系型数据库 MySQL
实时计算 Flink版产品使用合集之从MySQL到StarRocks的操作步骤是怎样的
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStreamAPI、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。

热门文章

最新文章

推荐镜像

更多