物化视图全量刷新的简单测试

简介: 关于物化视图的刷新,如果数据的变化比较大采用了全量刷新的时候,会将现有表里的数据都清空然后放入新的数据,整个过程有点类似delete,insert的感觉,但是刷新后表的高水位线还是会保持不变,效果类似于truncate,insert.
关于物化视图的刷新,如果数据的变化比较大采用了全量刷新的时候,会将现有表里的数据都清空然后放入新的数据,整个过程有点类似delete,insert的感觉,但是刷新后表的高水位线还是会保持不变,效果类似于truncate,insert.
对于堆表来说,在重要的一些表上做truncate简直就是灾难,如果一个表访问频繁,做了truncate之后,在插入数据的过程中,如果访问该表,数据都是0条,这就会带来一些高可用性的问题来,如果采用一个事务,使用delete,insert的方式,那高水位线的问题还是得不到解决,可能在高版本中可以使用shrink之类的方式来做,但是还是有一定的影响。

创建一个物化视图,数据量在40万左右。
create materialized view test_mv tablespace pool_data as select *from test;

使用如下的shell脚本在另一个窗口中执行,来查看物化视图中的数据条数。
while true
do
sqlplus -s n1/n1
set timing on
set pages 0
set feedback off
select count(*)  from test_mv;
EOF
done

插入数据之后,反复刷新,让刷新的时间基本稳定下来。
SQL> set time on
08:37:52 SQL>  exec dbms_mview.refresh('TEST_MV','C');
PL/SQL procedure successfully completed.
Elapsed: 00:00:50.27

插入一条数据,然后采用全量刷新
08:38:50 SQL> insert into test select *from test where rownum
1 row created.
Elapsed: 00:00:00.10
08:39:44 SQL> commit;
Commit complete.

18:20:33 SQL> exec dbms_mview.refresh('TEST_MV','C');
PL/SQL procedure successfully completed.
Elapsed: 00:00:24.62
18:21:12 SQL> exec dbms_mview.refresh('TEST_MV','C');
PL/SQL procedure successfully completed.
Elapsed: 00:00:26.05
时间基本稳定在20多秒的样子,然后开始测试,在另外一个窗口中执行shell脚本,不停的会去查物化视图里的数据,根据oracle的读一致性,基本都会从undo中读取数据
可以看到刷新的时间开始延长,但是数据条数没有任何变化。

18:24:48 SQL>  exec dbms_mview.refresh('TEST_MV','C');
PL/SQL procedure successfully completed.
Elapsed: 00:00:37.49

以下是shell脚本执行时的日志,可以看到数据条数没有任何变化,也算是高可用性的一种体现吧,不过在特定的场景中可以考虑一下。
411425
Elapsed: 00:00:03.76
    411425
Elapsed: 00:00:01.01
    411425
Elapsed: 00:00:01.03
    411425
Elapsed: 00:00:01.07
    411425
Elapsed: 00:00:01.87
    411425
Elapsed: 00:00:00.76
    411425
Elapsed: 00:00:03.60
    411425
Elapsed: 00:00:03.00
    411425
Elapsed: 00:00:04.28
    411425
Elapsed: 00:00:05.06
    411425
Elapsed: 00:00:08.61
    411425
Elapsed: 00:00:02.44
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.03
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.03
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.03
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.03
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.03
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.04
    411425
Elapsed: 00:00:00.03

    







目录
相关文章
|
7月前
|
SQL 关系型数据库 MySQL
实时计算 Flink版产品使用合集之测试使用initial模式,使用savepoint停掉再加上表,不会做全量同步,是什么导致的
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStreamAPI、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
|
存储 关系型数据库 MySQL
深聊性能测试,从入门到放弃之:性能测试技术栈,看完这篇,保证刷新你对性能测试的认知~~
深聊性能测试,从入门到放弃之:性能测试技术栈,看完这篇,保证刷新你对性能测试的认知~~
203 1
|
7月前
|
存储 前端开发 Oracle
物化视图添加删除列测试
物化视图添加删除列测试
52 2
|
安全 Java 数据库
案例之刷新token测试|学习笔记
快速学习案例之刷新token测试
案例之刷新token测试|学习笔记
|
存储 Cloud Native 多模数据库
阿里云数据库Lindorm刷新TPC物联网测试纪录:性能比第二名高40%
国际处理性能委员会TPC官方披露,在该机构组织的衡量物联网网关系统性能的基准测试中,阿里自研云原生多模数据库Lindorm性能指标创下新纪录,达到485万IoTps,比第二名高出40%,同时成本降低60%以上。
3595 0
阿里云数据库Lindorm刷新TPC物联网测试纪录:性能比第二名高40%
|
计算机视觉
Qt实用技巧:测试80*1080p拼接后显示刷新帧率
Qt实用技巧:测试80*1080p拼接后显示刷新帧率
|
监控 Oracle 关系型数据库
物化视图的快速刷新测试与物化视图日志
前言:一般在创建物化视图的时候,在数据量不大的时候,刷新的方式都是采用完全刷新的。随着系统的使用一些物化视图的源表的数据量在不断的增长,原本采用完全方式几秒就能刷新完成的物化视图,现在需要等待很久的时间才能刷新完成。
1200 0
|
27天前
|
JSON Java 测试技术
SpringCloud2023实战之接口服务测试工具SpringBootTest
SpringBootTest同时集成了JUnit Jupiter、AssertJ、Hamcrest测试辅助库,使得更容易编写但愿测试代码。
55 3
|
2月前
|
JSON 算法 数据可视化
测试专项笔记(一): 通过算法能力接口返回的检测结果完成相关指标的计算(目标检测)
这篇文章是关于如何通过算法接口返回的目标检测结果来计算性能指标的笔记。它涵盖了任务描述、指标分析(包括TP、FP、FN、TN、精准率和召回率),接口处理,数据集处理,以及如何使用实用工具进行文件操作和数据可视化。文章还提供了一些Python代码示例,用于处理图像文件、转换数据格式以及计算目标检测的性能指标。
71 0
测试专项笔记(一): 通过算法能力接口返回的检测结果完成相关指标的计算(目标检测)