物化视图全量刷新与insert的redo生成量测试(69天)

之前的一篇博客中提到,物化视图的全量刷新也是一种高可用性的体现,但是性能如何呢,下面来简单的测试一下。

首先需要创建一个函数,这个函数会计算当前session下的一些指标信息。比如redo的生成量。

  CREATE OR REPLACE FUNCTION "GET_STAT_VAL" (p_name in varchar2) 
   return number 
as 
l_val number; 
begin 
select b.value into l_val from v$statname a,v$mystat b 
where a.statistic#=b.statistic# 
and a.name=p_name; 
return l_val; 
end;
/

然后创建一个shell脚本test.sh,这样就可以直接来运行sql语句,马上得到结果了。脚本内容如下:

sqlplus -s xxx/xxxx <<EOF 
set echo on 
set feedback off 
variable redo number 
exec :redo :=get_stat_val('redo size'); 
prompt start to gather redo size ... 
set serveroutput on 
set timing on 
alter system flush buffer_cache; 
$1 
--prompt finished gather redo size ... 
set timing off 
exec dbms_output.put_line((get_stat_val('redo size')-:redo)||' bytes of redo generated...'); 
EOF 
exit

首先来创建基表

SQL> create table tab_test tablespace pool_data as select *from dba_objects;
Table created.
SQL> select bytes from dba_segments where segment_name='TAB_TEST';
     BYTES 
---------- 
   2097152

然后使用Insert into tab_test select *from tab_test;然数据自增。达到24M左右的样子。

SQL> select bytes from user_segments where segment_name='TAB_TEST';
     BYTES 
---------- 
 24117248
SQL> commit;
Commit complete.

创建物化视图,默认使用全量刷新,可以看到生成的redo和物理段的大小基本一致。

$ ksh test.sh "create materialized view mv_test as select *from tab_test;" 
start to gather redo size ... 
Elapsed: 00:00:00.11 
Elapsed: 00:00:02.87 
23327504 bytes of redo generated...

然后创始全量刷新,发现redo量有了极大的增长,一下子达到了100多M. 响应时间从2秒一下子涨到了13秒。

$  ksh test.sh "exec dbms_mview.refresh('MV_TEST','C'); " 
start to gather redo size ... 
Elapsed: 00:00:00.83 
Elapsed: 00:00:13.36 
102212976 bytes of redo generated...

是不是所有的场景下全量刷新都会这么慢呢,看下面的例子。先truncate掉,然后再次全量刷新。发现响应时间一下子又恢复了2秒的样子。

$ ksh test.sh "truncate table mv_test;" 
start to gather redo size ... 
Elapsed: 00:00:25.13 
Elapsed: 00:00:00.17 
65220 bytes of redo generated...
$ ksh test.sh "exec dbms_mview.refresh('MV_TEST','C');" 
start to gather redo size ... 
Elapsed: 00:00:15.02 
Elapsed: 00:00:01.65 
23112468 bytes of redo generated...

如果已经刷新过,再次刷新,redo量又开始达到100M左右,我感觉物化视图刷新的过程中,对已有数据的刷新,又要删除原有数据,又要保证数据的读一致性,可能在实现上性能不够理想。

$ ksh test.sh "exec dbms_mview.refresh('MV_TEST','C');" 
start to gather redo size ... 
Elapsed: 00:00:14.86 
Elapsed: 00:00:11.13 
102370296 bytes of redo generated... 
$

下面来看看普通表的Insert性能相比物化视图刷新的情况,创建表insert_test。

首先来测试一下表在nologging的时候redo的情况,可以看到redo生成量只有118k左右。

create with nologging 
$ ksh test.sh "create table insert_Test tablespace pool_data nologging as select *from tab_test;" 
start to gather redo size ... 
Elapsed: 00:00:23.48 
Elapsed: 00:00:02.88 
117892 bytes of redo generated...

毕竟nologging使用的场景有限,在没有确认备份和业务需要的时候,不建议这么做。来看看默认使用Logging的时候。redo生成量和物理段基本一致。

create with logging 
$ ksh test.sh "create table insert_test tablespace pool_data as select *from tab_test;"          
start to gather redo size ... 
Elapsed: 00:00:00.08 
Elapsed: 00:00:01.96 
23291008 bytes of redo generated...

然后尝试truncate以后,使用insert插入数据。

$ ksh test.sh "truncate table insert_test;" 
start to gather redo size ... 
Elapsed: 00:00:00.06 
Elapsed: 00:00:00.16 
62956 bytes of redo generated...

如果使用insert append的方式插入,测试的这个库在archive的模式下,可以看到性能没有什么变化。

$ ksh test.sh "insert into /*+append */ insert_test select *from  tab_test;" 
start to gather redo size ... 
Elapsed: 00:00:03.15 
Elapsed: 00:00:01.60 
23085680 bytes of redo generated...

使用常规的insert的时候,redo生成量也没有明显的变化。

ksh a.sh "insert into insert_test select *from tab_test;" 
start to gather redo size ... 
Elapsed: 00:00:00.09 
Elapsed: 00:00:01.34 
23078764 bytes of redo generated...

这么看materialized view和insert的性能没有明显的差别。

可以考虑使用parallel让性能提升一个层次。

首先设置object级别的parallel

$ ksh a.sh " alter table insert_test parallel 2;" 
start to gather redo size ... 
Elapsed: 00:00:00.06 
Elapsed: 00:00:00.08 
2224 bytes of redo generated...

然后开启session级别的parallel,就是在test.sh里面加入一句

alter session enable parallel dml;

然后执行,可以看到redo的生成量才18K的样子,性能确实有了很大的提升。

ksh a.sh "insert into insert_test select *from tab_test;" 
start to gather redo size ... 
Elapsed: 00:00:00.10 
Elapsed: 00:00:00.01 
Elapsed: 00:00:04.19 
17908 bytes of redo generated...

看到并行的效果这么明显,难道物化视图刷新就没有并行吗,可以的,不过性能也确实没有什么提升,不知道自己设置的参数不够合理还是本来物化视图的实现细节复杂。

ksh a.sh "exec dbms_mview.refresh('MV_TEST','C',PARALLELISM=>2);" 
start to gather redo size ... 
Elapsed: 00:00:24.23 
Elapsed: 00:00:11.30 
102474472 bytes of redo generated...

由上可以看到,物化视图的刷新在性能和灵活性上没有普通表那么灵活。生成的Redo量要比普通表多,但是考虑到高可用性的使用,还是不错的选择,毕竟物化视图的优点不在于此,增量刷新和查询重写才是它的亮点所在。

原文发布于微信公众号 - 杨建荣的学习笔记(jianrong-notes)

原文发表时间:2014-05-11

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏我和未来有约会

Kit 3D 更新

Kit3D is a 3D graphics engine written for Microsoft Silverlight. Kit3D was inita...

2496
来自专栏pangguoming

Spring Boot集成JasperReports生成PDF文档

由于工作需要,要实现后端根据模板动态填充数据生成PDF文档,通过技术选型,使用Ireport5.6来设计模板,结合JasperReports5.6工具库来调用渲...

1.2K7
来自专栏落花落雨不落叶

canvas画简单电路图

57911
来自专栏跟着阿笨一起玩NET

c#实现打印功能

2592
来自专栏张善友的专栏

Silverlight + Model-View-ViewModel (MVVM)

     早在2005年,John Gossman写了一篇关于Model-View-ViewModel模式的博文,这种模式被他所在的微软的项目组用来创建Expr...

2878
来自专栏闻道于事

js登录滑动验证,不滑动无法登陆

js的判断这里是根据滑块的位置进行判断,应该是用一个flag判断 <%@ page language="java" contentType="text/html...

6518
来自专栏张善友的专栏

Miguel de Icaza 细说 Mix 07大会上的Silverlight和DLR

Mono之父Miguel de Icaza 详细报道微软Mix 07大会上的Silverlight和DLR ,上面还谈到了Mono and Silverligh...

2657
来自专栏魂祭心

原 canvas绘制clock

3964
来自专栏一个会写诗的程序员的博客

Spring Reactor 项目核心库Reactor Core

Non-Blocking Reactive Streams Foundation for the JVM both implementing a Reactiv...

2102
来自专栏大内老A

The .NET of Tomorrow

Ed Charbeneau(http://developer.telerik.com/featured/the-net-of-tomorrow/) Exciti...

30710

扫码关注云+社区