Oracle 10g通过创建物化视图实现不同数据库间表级别的数据同步

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: Oracle 10g通过创建物化视图实现不同数据库间表级别的数据同步

Materialized View(物化视图)是包括一个查询结果的数据库对像, 它是远程数据的的本地副本,或者用来生成基于数据表求和的汇总表。物化视图存储基于远程表的数据,也可以称为快照。 这个基本上就说出了物化视图的本质,它是一组查询的结果


一. Oracle 10g 物化视图语法如下:


create materialized view [view_name]
refresh [fast|complete|force]
[
on [commit|demand] |
start with (start_time) next (next_time)
]
as
{创建物化视图用的查询语句}


以上是Oracle创建物化视图(Materialized View,以下简称MV)时的常用语法,各参数的含义如下:


  1. refresh [fast|complete|force] 视图刷新的方式:

fast: 增量刷新.假设前一次刷新的时间为t1,那么使用fast模式刷新物化视图时,只向视图中添加t1到当前时间段内,主表变化过的数据。
       为了记录这种变化,建立增量刷新物化视图还需要一个物化视图日志表。
       create materialized view log on (主表名)。(多张表时,此语句也生效,创建后,原来的表中会多出两类视图表:MLOG$_table_name和RUPD$_table_name)
 complete: 全部刷新。相当于重新执行一次创建视图的查询语句。
 force: 这是默认的数据刷新方式。当可以使用fast模式时,数据刷新将采用fast方式;否则使用complete方式。


  1. MV数据刷新的时间:


on demand: 在用户需要刷新的时候刷新,这里就要求用户自己动手去刷新数据(可以使用JOB定时刷新);
 on commit: 当主表中有数据提交的时候,立即刷新MV中的数据;
 start ……:从指定的时间开始,每隔一段时间(由next指定)就刷新一次;
 全刷新mv_test物化视图:

begin
     dbms_mview.refresh(TAB=>'MV_TEST',
                        METHOD=>'COMPLETE',
                        PARALLELISM=>8);
end;
/


增量刷新:

begin
     dbms_mview.refresh(TAB=>'MV_TEST',
                        METHOD=>'FAST',
                        PARALLELISM=>1);
end;
/


或者,也可以这样执行:

exec dbms_mview.refresh('MV_TEST','F');

dbms_mview.refresh('表名', 'F')   --快速刷新,也就是增量刷新
dbms_mview.refresh('表名', 'C')   --完全刷新


二. 实例演示:



以下是我通过创建物化视图,实现不同数据库间表级别的数据同步的一个过程记录,(两台服务器A和B,其中要把数据从A节点的表zh_major_item同步到B节点上)。目前实现同步的过程还只是一个单向的过程,也就是从A节点 ---> B节点:


主要步骤:


  1. 在A节点创建原表和物化视图日志
  2. 在B节点创建连接A节点的远程链接
  3. 在B节点处,创建目标表和与目标表名称相同的物化视图


1. 在A节点创建原表和物化视图日志:

--在源A处 创建物化视图日志
sqlplus tianzhi_smart/tianzhi_smart@localhost:1521/orcl
--原表zh_major_item之前已经存在,这里就不赘述表创建的过程了
--创建物化视图日志
create materialized view log on zh_major_item;


2. 在B节点创建连接A节点的远程链接:

--在目标B处 创建远程连接
--如果没有创建远程连接的权限,需要登录sysdba,为用户授权;
--之所以跟上面一样,因为我的用户名和密码相同而已
sqlplus tianzhi_smart/tianzhi_smart@localhost:1521/orcl
--创建远程连接 db_link
create public database link db_link_A 
    connect to tianzhi_smart 
    identified by "tianzhi_smart" 
    using '192.168.56.6:1521/ORCL';
--验证是否创建成功
select * from zh_major_item@db_link_A ;


3. 在B节点处,创建目标表和与目标表名称相同的物化视图:

--B节点处创建目标表bc_major_item
create table bc_major_item 
as select * from zh_major_item@db_link_A where 1=2;
--通过远程连接向A节点建立一个与目标表(bc_major_item)名称相同的物化视图    
--使用on prebuilt table注册新的物化视图,注意view名称必须和表名称一样
--使用on prebuilt table创建的物化视图被删除后,原来的表不被删除
--注意这里我创建是refresh fast on demand 类型的物化视图
 create materialized view bc_major_item 
 on prebuilt table refresh fast on demand 
 as select * from zh_major_item@db_link_A ;


4.在B节点处,刷新物化视图

--刷新物化视图
 exec dbms_mview.refresh('bc_major_item ','C');
 --刷新后,查询目标表,比对是否和原表数据相同
 select * from bc_major_item ;


5.升级采用存储过程+定时任务JOB方式,定时刷新物化视图

--创建存储过程,进行增量刷新
    create or replace procedure refresh_bc_major_item
    as
    begin
        dbms_mview.refresh('bc_major_item','F');
    end;
    /
    --创建任务JOB
    SQL> variable job1 number;
    SQL>begin
 dbms_job.submit(:job1,'refresh_bc_major_item;',sysdate,'sysdate+1/(86400)');  
    end;
    /
    --运行JOB
    SQL> begin
       dbms_job.run(:job1);
      end;
      /


6.进一步优化:


可以再写一个存储过程+定时任务JOB,定时清空物化视图日志。


三. 文章更新记录



v1.0 -- 表面是实现了同步,其实查询的只是视图,并没有完成如题目所指的问题

v2.0 -- 将目标表和物化视图建立联系,真正实现数据同步。2016.12.6

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
18天前
|
Oracle 关系型数据库 数据库
数据库数据恢复—Oracle数据库文件出现坏块的数据恢复案例
打开oracle数据库报错“system01.dbf需要更多的恢复来保持一致性,数据库无法打开”。 数据库没有备份,无法通过备份去恢复数据库。用户方联系北亚企安数据恢复中心并提供Oracle_Home目录中的所有文件,急需恢复zxfg用户下的数据。 出现“system01.dbf需要更多的恢复来保持一致性”这个报错的原因可能是控制文件损坏、数据文件损坏,数据文件与控制文件的SCN不一致等。数据库恢复工程师对数据库文件进一步检测、分析后,发现sysaux01.dbf文件损坏,有坏块。 修复并启动数据库后仍然有许多查询报错,export和data pump工具使用报错。从数据库层面无法修复数据库。
数据库数据恢复—Oracle数据库文件出现坏块的数据恢复案例
|
6天前
|
Oracle 关系型数据库 数据库
Oracle数据恢复—异常断电导致Oracle数据库数据丢失的数据恢复案例
Oracle数据库故障: 机房异常断电后,Oracle数据库启库报错:“system01.dbf需要更多的恢复来保持一致性,数据库无法打开”。数据库没有备份,归档日志不连续。用户方提供了Oracle数据库的在线文件,需要恢复zxfg用户的数据。 Oracle数据库恢复方案: 检测数据库故障;尝试挂起并修复数据库;解析数据文件。
|
6天前
|
Oracle NoSQL 关系型数据库
主流数据库对比:MySQL、PostgreSQL、Oracle和Redis的优缺点分析
主流数据库对比:MySQL、PostgreSQL、Oracle和Redis的优缺点分析
17 2
|
25天前
|
Oracle 安全 关系型数据库
Oracle数据恢复—Oracle数据库误删除的数据恢复方法探讨
删除Oracle数据库数据一般有以下2种方式:delete、drop或truncate。下面针对这2种删除oracle数据库数据的方式探讨一下oracle数据库数据恢复方法(不考虑全库备份和利用归档日志)。
|
1月前
|
存储 Oracle 关系型数据库
Oracle同一台服务器创建多个数据库
【8月更文挑战第30天】在 Oracle 中,可在同一服务器上创建多个数据库。首先确保已安装 Oracle 软件并具有足够资源,然后使用 DBCA 工具按步骤创建,包括选择模板、配置存储及字符集等。重复此过程可创建多个数据库,需确保名称、SID 和存储位置唯一。创建后,可通过 Oracle Enterprise Manager 进行管理,注意服务器资源分配与规划。
38 10
|
9天前
|
SQL Oracle 关系型数据库
Oracle数据库管理:从入门到精通
表(Table):表是Oracle数据库中存储数据的基本结构单元,由行(Row)和列(Column)组成。每行代表一个记录,每列代表一个字段。 SQL(Structured Query Language):SQL是Oracle数据库的核心语言,用于与数据库交互,执行查询、插入、更新和删除等操作。 数据库实例与数据库:在Oracle中,数据库实例是一组后台进程和内存结构,用于管理数据库并提供服务。而数据库则是数据的物理存储,包括数据文件、控制文件、联机日志和参数文件等。
31 0
|
2月前
|
SQL Oracle 关系型数据库
实时计算 Flink版产品使用问题之Oracle数据库是集群部署的,怎么进行数据同步
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStream API、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
|
18天前
|
NoSQL 关系型数据库 MySQL
微服务架构下的数据库选择:MySQL、PostgreSQL 还是 NoSQL?
在微服务架构中,数据库的选择至关重要。不同类型的数据库适用于不同的需求和场景。在本文章中,我们将深入探讨传统的关系型数据库(如 MySQL 和 PostgreSQL)与现代 NoSQL 数据库的优劣势,并分析在微服务架构下的最佳实践。
|
20天前
|
存储 SQL 关系型数据库
使用MySQL Workbench进行数据库备份
【9月更文挑战第13天】以下是使用MySQL Workbench进行数据库备份的步骤:启动软件后,通过“Database”菜单中的“管理连接”选项配置并选择要备份的数据库。随后,选择“数据导出”,确认导出的数据库及格式(推荐SQL格式),设置存储路径,点击“开始导出”。完成后,可在指定路径找到备份文件,建议定期备份并存储于安全位置。
160 11
|
16天前
|
存储 SQL 关系型数据库
MySQL的安装&数据库的简单操作
本文介绍了数据库的基本概念及MySQL的安装配置。首先解释了数据库、数据库管理系统和SQL的概念,接着详细描述了MySQL的安装步骤及其全局配置文件my.ini的调整方法。文章还介绍了如何启动MySQL服务,包括配置环境变量和使用命令行的方法。最后,详细说明了数据库的各种操作,如创建、选择和删除数据库的SQL语句,并提供了实际操作示例。
58 13
MySQL的安装&数据库的简单操作

推荐镜像

更多
下一篇
无影云桌面