学习 Materialized View

学习 Materialized View

学习 Materialized View

 

 

    目前打算使用物化视图的方法来同步两个数据库之间的数据，这样肯定会比每天用DB Link定时传导数据效率来得高，而且逻辑更易控置，不用再去判断旧的表是否有更改。所以先大致了解一下物化视图的概念和基本用法：

 

 

一、物化视图的定义：

 

    物化视图是包括一个查询结果的数据库对像 (由系统实现定期刷新数据 )，物化视图不是在使用时才读取，而是预先计算并保存表连接或聚集等耗时较多的操作结果，这样在查询时大大提高了读取速度，特别适用抽取大数据量表某些信息以及数据链连接表使用。而且在数据仓库中使用到重写机制，对于用户来说，Oracle会自己选择合适的物化视图进行查询，不需要重新写SQL。

 

    物化视图还可以进行远程数据的的本地复制，此时的物化视图存储也可以称为快照。可是用于实施数据库间的同步。通常情况下，物化视图用于复制的时候为“主表”，而在运用于数据仓库时称为“明细表”。

 

 

二、物化视图的创建

 

先看一个网上的例子：

 

--创建物化视图时应先创建存储的日志空间
CREATE MATERIALIZED VIEW LOG ON mv_lvy_levytaxbgtdiv
tablespace ZGMV_DATA --日志保存在特定的表空间
WITH ROWID ;
CREATE MATERIALIZED VIEW LOG ON tb_lvy_levydetaildata
tablespace ZGMV_DATA --日志保存在特定的表空间
WITH ROWID,sequence(LEVYDETAILDATAID);
CREATE MATERIALIZED VIEW LOG ON tb_lvy_levydata
tablespace ZGMV_DATA --日志保存在特定的表空间
WITH rowid,sequence(LEVYDATAID);

 

然后创建物化视图：

 

--创建物化视图
create materialized view MV_LVY_LEVYDETAILDATA
TABLESPACE ZGMV_DATA --保存表空间
BUILD DEFERRED  --延迟刷新不立即刷新
refresh force   --如果可以快速刷新则进行快速刷新，否则完全刷新
on demand --按照指定方式刷新
start with to_date('24-11-2005 18:00:10', 'dd-mm-yyyy hh24:mi:ss') --第一次刷新时间
next TRUNC(SYSDATE+1)+18/24 --刷新时间间隔
as
SELECT levydetaildataid, detaildatano, taxtermbegin, taxtermend,
......
ROUND(taxdeduct * taxpercent1, 2) - ROUND(taxdeduct * taxpercent2, 2) -
ROUND(taxdeduct * taxpercent3, 2) - ROUND(taxdeduct * taxpercent4, 2) -
ROUND(taxdeduct * taxpercent5, 2) taxdeduct, ROUND(taxfinal * taxpercent1, 2) -
ROUND(taxfinal * taxpercent2, 2) - ROUND(taxfinal * taxpercent3, 2) -
ROUND(taxfinal * taxpercent4, 2) - ROUND(taxfinal * taxpercent5, 2) taxfinal,
a.levydataid, a.budgetitemcode, taxtypecode,
......
FROM tb_lvy_levydetaildata a, tb_lvy_levydata c, MV_LVY_LEVYTAXBGTDIV b
WHERE a.levydataid = c.levydataid
AND a.budgetdistrscalecode = b.budgetdistrscalecode
AND a.budgetitemcode = b.budgetitemcode
AND c.incomeresidecode = b.rcvfisccode
AND C.TAXSTATUSCODE='08'
AND C.NEGATIVEFLAG!='9'

 

说明：
    1、创建方式(Build Methods)： 

    包括BUILD IMMEDIATE和BUILD DEFERRED两种。BUILD IMMEDIATE是在创建物化视图的时候就生成数据，而BUILD DEFERRED则在创建时不生成数据，以后根据需要在生成数据。默认为BUILD IMMEDIATE。

 

    2、查询重写(Query Rewrite)： 

    包括ENABLE QUERY REWRITE和DISABLE QUERY REWRITE两种。分别指出创建的物化视图是否支持查询重写。查询重写是指当对物化视图的基表进行查询时，Oracle会自动判断能否通过查询物化视图来得到结果，如果可以，则避免了聚集或连接操作，而直接从已经计算好的物化视图中读取数据。默认为DISABLE QUERY REWRITE。

 

    3、刷新(Refresh)： 

    指当基表发生了DML操作后，物化视图何时采用哪种方式和基表进行同步。刷新的模式有两种：ON DEMAND和ON COMMIT。ON DEMAND指物化视图在用户需要的时候进行刷新，可以手工通过DBMS_MVIEW.REFRESH等方法来进行刷新，也可以通过JOB定时进行刷新。ON COMMIT指出物化视图在对基表的DML操作提交的同时进行刷新。刷新的方法有四种：FAST、COMPLETE、FORCE和NEVER。FAST刷新采用增量刷新，只刷新自上次刷新以后进行的修改。COMPLETE刷新对整个物化视图进行完全的刷新。如果选择FORCE方式，则Oracle在刷新时会去判断是否可以进行快速刷新，如果可以则采用FAST方式，否则采用COMPLETE的方式。NEVER指物化视图不进行任何刷新。默认值是FORCE ON DEMAND。

 

    4、快速刷新限制(Refresh FAST)： 

    如果需要进行快速刷新，则需要建立物化视图日志。物化视图日志根据不同物化视图的快速刷新的需要，可以建立为ROWID或PRIMARY KEY类型的。还可以选择是否包括SEQUENCE、INCLUDING NEW VALUES以及指定列的列表。

 

    5、基于物理表的物化视图： 

    可以指明ON PREBUILD TABLE语句将物化视图建立在一个已经存在的表上。这种情况下，物化视图和表必须同名。当删除物化视图时，不会删除同名的表。这种物化视图的查询重写要求参数QUERY_REWRITE_INTEGRITY必须设置为trusted或者stale_tolerated。

 

    6、REFRESH 子句 

    [refresh [fast|complete|force]
    [on demand | commit]
    [start with date] [next date]
    [with {primary key|rowid}]

 

    Refresh  FAST  
    增量刷新用物化视图日志 (参照上面所述 )来发送主表已经修改的数据行到物化视图中.如果指定REFRESH FAST子句，那么应该对主表创建物化视图日志

 

    SQL> CREATE MATERIALIZED VIEW LOG ON emp;
    Materialized view log created.
    对于增量刷新选项，如果在子查询中存在分析函数，则物化视图不起作用。

 

    Refresh  COMPLETE  
    完全刷新重新生成整个视图，如果请求完全刷新，oracle会完成完全刷新即使增量刷新可用。

 

    Refresh FORCE  
    当指定FORCE子句，如果增量刷新可用Oracle将完成增量刷新，否则将完成完全刷新,如果不指定刷新方法(FAST、COMPLETE、FORCE)。Force选项是默认选项

 

    primary key 和 rowid  
    WITH PRIMARY KEY选项生成主键物化视图，也就是说物化视图是基于主表的主键，而不是ROWID(对应于ROWID子句)。 PRIMARY KEY是默认选项，为了生成PRIMARY KEY子句，应该在主表上定义主键，否则应该用基于ROWID的物化视图。

 

    主键物化视图允许识别物化视图主表而不影响物化视图增量刷新的可用性。
Rowid物化视图只有一个单一的主表，不能包括“Distinct、聚合函数、Group by、子查询、连接、SET操作”

 

    7、刷新时间      

    START WITH子句通知数据库完成从主表到本地表第一次复制的时间，应该及时估计下一次运行的时间点， NEXT 子句说明了刷新的间隔时间。

 

    另外：快速刷新的各类操作： http://blog.itpub.net/post/468/14245

 

三、使用物化视图的设置和查错：

    COMPATIBLE参数必须高于 8.1.0
    QUERY_REWRITE_ENABLED = TRUE
    QUERY_REWRITE_INTEGRETY =
      ENFORCED - 查询仅用Oracle强制与保证的约束、规则重写；
      TRUSTED – 查询除用Oracle强制与保证的约束、规则，也可用用户设定的数据间的任何关系来重写；
      STALE_TOLERATED – 即便Oracle知道物化视图中数据过期（与事实表等不同步），也重写查询。

 

    当建立物化视图失败时，10g之前可查询DBMS_MVIEW包中的EXPLAIN_MVIEW、EXPLAIN_REWRITE过程进行错误定位。

    具体操作见yang版主博客： http://blog.itpub.net/post/468/13318

 

   

 

另附：10g中可使用新的 DBMS_ADVISOR 程序包中的一个名为 TUNE_MVIEW 的过程使得这项工作变得非常容易：

-------------------------------------------------------------------------

SQL> -- 首先定义一个变量来保存 OUT 参数
SQL> var adv_name varchar2(20)
SQL> begin
  2  dbms_advisor.tune_mview
  3　(
  4　 :adv_name,
  5　　'create materialized view mv_hotel_resv
        refresh fast enable query rewrite as
        select distinct city, resv_id, cust_name from hotels h,
　　 　 reservations r where r.hotel_id = h.hotel_id');
  6  end;

 

SQL> print adv_name
　　
　　ADV_NAME
　　-----------------------
　　TASK_117

 

SQL> select script_type, statement
     from　dba_tune_mview
     where　task_name = 'TASK_117'
     order　by script_type,action_id;

 

　　SCRIPT_TYPE　　STATEMENT
　　-------------- -----------------------------------------------------------
　　IMPLEMENTATION CREATE MATERIALIZED VIEW LOG ON "ARUP"."HOTELS" WITH ROWID,
　　SEQUENCE ("HOTEL_ID","CITY")　INCLUDING NEW VALUES
　　
　　IMPLEMENTATION ALTER MATERIALIZED VIEW LOG FORCE ON "ARUP"."HOTELS" ADD
　　ROWID, SEQUENCE ("HOTEL_ID","CITY")　INCLUDING NEW VALUES
　　
　　IMPLEMENTATION CREATE MATERIALIZED VIEW LOG ON "ARUP"."RESERVATIONS" WITH
　　ROWID, SEQUENCE ("RESV_ID","HOTEL_ID","CUST_NAME")
　　INCLUDING NEW VALUES
　　
　　IMPLEMENTATION ALTER MATERIALIZED VIEW LOG FORCE ON "ARUP"."RESERVATIONS"
　　ADD ROWID, SEQUENCE ("RESV_ID","HOTEL_ID","CUST_NAME")
　　INCLUDING NEW VALUES
　　
　　IMPLEMENTATION CREATE MATERIALIZED VIEW ARUP.MV_HOTEL_RESV　 REFRESH FAST
　　WITH ROWID ENABLE QUERY REWRITE AS SELECT
　　ARUP.RESERVATIONS.CUST_NAME C1, ARUP.RESERVATIONS.RESV_ID
　　C2, ARUP.HOTELS.CITY C3, COUNT(*) M1 FROM ARUP.RESERVATIONS,
　　ARUP.HOTELS WHERE ARUP.HOTELS.HOTEL_ID =
　　ARUP.RESERVATIONS.HOTEL_ID GROUP BY
　　ARUP.RESERVATIONS.CUST_NAME, ARUP.RESERVATIONS.RESV_ID,
　　ARUP.HOTELS.CITY
　　
　　UNDO　　　　　 DROP MATERIALIZED VIEW ARUP.MV_HOTEL_RESV