Oracle 10g通过创建物化视图实现不同数据库间表级别的数据同步

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: Oracle 10g通过创建物化视图实现不同数据库间表级别的数据同步

Materialized View(物化视图)是包括一个查询结果的数据库对像, 它是远程数据的的本地副本,或者用来生成基于数据表求和的汇总表。物化视图存储基于远程表的数据,也可以称为快照。 这个基本上就说出了物化视图的本质,它是一组查询的结果


一. Oracle 10g 物化视图语法如下:


create materialized view [view_name]
refresh [fast|complete|force]
[
on [commit|demand] |
start with (start_time) next (next_time)
]
as
{创建物化视图用的查询语句}


以上是Oracle创建物化视图(Materialized View,以下简称MV)时的常用语法,各参数的含义如下:


  1. refresh [fast|complete|force] 视图刷新的方式:

fast: 增量刷新.假设前一次刷新的时间为t1,那么使用fast模式刷新物化视图时,只向视图中添加t1到当前时间段内,主表变化过的数据。
       为了记录这种变化,建立增量刷新物化视图还需要一个物化视图日志表。
       create materialized view log on (主表名)。(多张表时,此语句也生效,创建后,原来的表中会多出两类视图表:MLOG$_table_name和RUPD$_table_name)
 complete: 全部刷新。相当于重新执行一次创建视图的查询语句。
 force: 这是默认的数据刷新方式。当可以使用fast模式时,数据刷新将采用fast方式;否则使用complete方式。


  1. MV数据刷新的时间:


on demand: 在用户需要刷新的时候刷新,这里就要求用户自己动手去刷新数据(可以使用JOB定时刷新);
 on commit: 当主表中有数据提交的时候,立即刷新MV中的数据;
 start ……:从指定的时间开始,每隔一段时间(由next指定)就刷新一次;
 全刷新mv_test物化视图:

begin
     dbms_mview.refresh(TAB=>'MV_TEST',
                        METHOD=>'COMPLETE',
                        PARALLELISM=>8);
end;
/


增量刷新:

begin
     dbms_mview.refresh(TAB=>'MV_TEST',
                        METHOD=>'FAST',
                        PARALLELISM=>1);
end;
/


或者,也可以这样执行:

exec dbms_mview.refresh('MV_TEST','F');

dbms_mview.refresh('表名', 'F')   --快速刷新,也就是增量刷新
dbms_mview.refresh('表名', 'C')   --完全刷新


二. 实例演示:



以下是我通过创建物化视图,实现不同数据库间表级别的数据同步的一个过程记录,(两台服务器A和B,其中要把数据从A节点的表zh_major_item同步到B节点上)。目前实现同步的过程还只是一个单向的过程,也就是从A节点 ---> B节点:


主要步骤:


  1. 在A节点创建原表和物化视图日志
  2. 在B节点创建连接A节点的远程链接
  3. 在B节点处,创建目标表和与目标表名称相同的物化视图


1. 在A节点创建原表和物化视图日志:

--在源A处 创建物化视图日志
sqlplus tianzhi_smart/tianzhi_smart@localhost:1521/orcl
--原表zh_major_item之前已经存在,这里就不赘述表创建的过程了
--创建物化视图日志
create materialized view log on zh_major_item;


2. 在B节点创建连接A节点的远程链接:

--在目标B处 创建远程连接
--如果没有创建远程连接的权限,需要登录sysdba,为用户授权;
--之所以跟上面一样,因为我的用户名和密码相同而已
sqlplus tianzhi_smart/tianzhi_smart@localhost:1521/orcl
--创建远程连接 db_link
create public database link db_link_A 
    connect to tianzhi_smart 
    identified by "tianzhi_smart" 
    using '192.168.56.6:1521/ORCL';
--验证是否创建成功
select * from zh_major_item@db_link_A ;


3. 在B节点处,创建目标表和与目标表名称相同的物化视图:

--B节点处创建目标表bc_major_item
create table bc_major_item 
as select * from zh_major_item@db_link_A where 1=2;
--通过远程连接向A节点建立一个与目标表(bc_major_item)名称相同的物化视图    
--使用on prebuilt table注册新的物化视图,注意view名称必须和表名称一样
--使用on prebuilt table创建的物化视图被删除后,原来的表不被删除
--注意这里我创建是refresh fast on demand 类型的物化视图
 create materialized view bc_major_item 
 on prebuilt table refresh fast on demand 
 as select * from zh_major_item@db_link_A ;


4.在B节点处,刷新物化视图

--刷新物化视图
 exec dbms_mview.refresh('bc_major_item ','C');
 --刷新后,查询目标表,比对是否和原表数据相同
 select * from bc_major_item ;


5.升级采用存储过程+定时任务JOB方式,定时刷新物化视图

--创建存储过程,进行增量刷新
    create or replace procedure refresh_bc_major_item
    as
    begin
        dbms_mview.refresh('bc_major_item','F');
    end;
    /
    --创建任务JOB
    SQL> variable job1 number;
    SQL>begin
 dbms_job.submit(:job1,'refresh_bc_major_item;',sysdate,'sysdate+1/(86400)');  
    end;
    /
    --运行JOB
    SQL> begin
       dbms_job.run(:job1);
      end;
      /


6.进一步优化:


可以再写一个存储过程+定时任务JOB,定时清空物化视图日志。


三. 文章更新记录



v1.0 -- 表面是实现了同步,其实查询的只是视图,并没有完成如题目所指的问题

v2.0 -- 将目标表和物化视图建立联系,真正实现数据同步。2016.12.6

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
19天前
|
存储 Oracle 关系型数据库
oracle数据恢复—oracle数据库执行错误truncate命令的数据恢复案例
oracle数据库误执行truncate命令导致数据丢失是一种常见情况。通常情况下,oracle数据库误操作删除数据只需要通过备份恢复数据即可。也会碰到一些特殊情况,例如数据库备份无法使用或者还原报错等。下面和大家分享一例oracle数据库误执行truncate命令导致数据丢失的数据库数据恢复过程。
|
2月前
|
Oracle 安全 关系型数据库
【Oracle】使用Navicat Premium连接Oracle数据库两种方法
以上就是两种使用Navicat Premium连接Oracle数据库的方法介绍,希望对你有所帮助!
556 28
|
2月前
|
SQL Oracle 关系型数据库
【赵渝强老师】Oracle的闪回数据库
Oracle闪回数据库功能类似于“倒带按钮”,可快速将数据库恢复至 earlier 状态,无需还原备份。本文介绍了闪回数据库的使用方法及实战案例:包括设置归档模式、开启闪回功能、记录SCN号、执行误操作后的恢复步骤等。通过具体 SQL 操作演示了如何利用闪回数据库恢复被误删的用户数据。注意,使用此功能前需确保数据库为归档模式。
108 9
|
3月前
|
Oracle 关系型数据库 数据库
【赵渝强老师】Oracle数据库的闪回表
本文介绍了Oracle数据库中的闪回表(Flashback Table)功能,它能够将表的数据快速恢复到特定时间点或系统改变号(SCN),无需备份。文章通过实战示例详细演示了如何使用闪回表恢复数据,包括授权、创建测试表、记录时间与SCN号、删除数据、启用行移动功能、执行闪回操作以及验证恢复结果等步骤。同时,还展示了如何通过触发器禁止插入操作,并在闪回过程中处理触发器的启用问题。文末附有视频讲解,帮助读者更好地理解闪回表的使用方法。
152 10
|
3月前
|
Oracle 关系型数据库 数据库
【赵渝强老师】Oracle数据库的闪回查询
本文介绍了Oracle数据库的闪回查询(Flashback Query)功能及其实际应用。闪回查询通过`AS OF`子句,结合时间戳或SCN号,可查询历史数据状态,帮助分析数据差异。文中通过具体示例演示了如何使用闪回查询:创建测试表、记录当前SCN号、更新数据并提交事务,最后通过闪回查询获取历史数据。附带的视频和代码块详细展示了操作步骤与结果。
130 4
|
3月前
|
Oracle 关系型数据库 网络安全
崖山异构数据库迁移利器YMP初体验-Oracle迁移YashanDB
文章是作者小草对崖山异构数据库迁移利器 YMP 的初体验分享,包括背景、YMP 简介、体验环境说明、YMP 部署(含安装前准备、安装、卸载、启动与停止)、数据迁移及遇到的问题与解决过程。重点介绍了 YMP 功能、部署的诸多细节和数据迁移流程,还提到了安装和迁移中遇到的问题及解决办法。
|
3月前
|
Oracle 关系型数据库 数据管理
【赵渝强老师】Oracle数据库的闪回技术
在Oracle数据库操作中,难免会遇到误删表或提交错误事务等问题,可能导致数据丢失甚至数据库停止运行。传统解决方法依赖备份恢复,但需提前准备正确备份。为此,Oracle提供了闪回技术,无需备份即可快速恢复数据。它支持7种类型的操作,如闪回查询、版本查询、表恢复等,能有效应对逻辑损坏和用户错误。闪回技术基于还原(undo)数据管理,启用自动管理后可实现高效恢复。
120 0
|
3月前
|
SQL Oracle 关系型数据库
【赵渝强老师】Oracle数据库的客户端工具
本文介绍了Oracle数据库的三种客户端工具:SQL*Plus、Oracle Enterprise Manager Database Express(EM)和SQL Developer的使用方法。首先通过命令行工具SQL*Plus登录数据库,创建用户并授权,建立部门与员工表,插入数据并查询;接着讲解了如何通过浏览器访问EM界面监控数据库及表空间状态;最后演示了SQL Developer的下载安装、连接配置以及执行查询的过程,帮助用户快速上手Oracle数据库管理与操作。
|
6月前
|
存储 Oracle 关系型数据库
数据库数据恢复—ORACLE常见故障的数据恢复方案
Oracle数据库常见故障表现: 1、ORACLE数据库无法启动或无法正常工作。 2、ORACLE ASM存储破坏。 3、ORACLE数据文件丢失。 4、ORACLE数据文件部分损坏。 5、ORACLE DUMP文件损坏。
350 11

推荐镜像

更多