zoukankan      html  css  js  c++  java
  • 建立物化视图,提高查询效率

    网站上面的查询效率已经慢的奇葩。目前能想到的办法只有物化视图,提高查询速率。

    物化视图也是种视图。 Oracle的物化视图是包括一个查询结果的数据库对像,它是远程数据的的本地副本,或者用来生成基于数据表求和的汇总表。物化视图存储基于远程表的数据,也可以称为快照。

    物化视图可以查询表,视图和其它的物化视图。

    特点:

    (1) 物化视图在某种意义上说就是一个 物理表 (而且不仅仅是一个物理表),这通过其可以被user_tables查询出来,而得到确认;

    (2) 物化视图也是一种段(segment),所以其有自己的物理存储属性;

    (3) 物化视图会占用数据库磁盘空间,这点从user_segment的查询结果,可以得到佐证;

    创建语句:create materialized view mv_name as select * from table_name

    因为物化视图由于是物理真实存在的,故可以创建索引。

    创建时生成数据:

    分为两种: build immediate build deferred

    build immediate是在 创建物化视图的时候就生成数据 。

    build deferred 则在创建时不生成数据,以后根据需要在生成数据 。

    如果不指定,则默认为 build immediate

     

    刷新模式:

    物化视图有二种刷新模式:

    在创建时refresh mode是 on demand 还是 on commit

    on demand 顾名思义,仅在该物化视图“需要”被刷新了,才进行刷新(REFRESH),即更新物化视图,以保证和基表数据的一致性;

    on commit  提交触发,一旦基表有了commit,即事务提交,则立刻刷新,立刻更新物化视图,使得数据和基表一致。一般用这种方法在操作基表时速度会比较慢。

    创建物化视图时未作指定,则Oracle按 on demand 模式来创建。

     

    上面说的是 刷新模式 ,针对于如何刷新,则有如下三种 刷新方法 :

     

    完全刷新(COMPLETE): 会删除表中所有的记录(如果是单表刷新,可能会采用TRUNCATE的方式),然后根据物化视图中查询语句的定义重新生成物化视图。

    快速刷新(FAST): 采用增量刷新的机制,只将自上次刷新以后对基表进行的所有操作刷新到物化视图中去。FAST必须创建基于主表的视图日志。对于增量刷新选项,如果在子查询中存在分析函数,则物化视图不起作用。

    FORCE方式: 这是默认的数据刷新方式。Oracle会自动判断是否满足快速刷新的条件,如果满足则进行快速刷新,否则进行完全刷新。

     

    关于快速刷新: Oracle物化视图的 快速刷新 机制是通过 物化视图日志 完成的。 Oracle通过一个物化视图日志还可以支持多个物化视图的快速刷新 。 物化视图日志根据不同物化视图的快速刷新的需要,可以建立为ROWID或PRIMARY KEY类型的 。还可以选择是否包括SEQUENCE、INCLUDING NEW VALUES以及指定列的列表。

    查询重写(QueryRewrite):

    包括 enable query rewrite disable query rewrite 两种。

    分别指出创建的物化视图是否支持查询重写。 查询重写是指当对物化视图的基表进行查询时 , oracle会自动判断能否通过查询物化视图来得到结果,如果可以,则避免了聚集或连接操作,而直接从已经计算好的物化视图中读取数据。

    默认为 disable query rewrite

     

    语法:

    create  materialized  view   view_name
    refresh  [ fast|complete|force ]
    [
    on [commit|demand ]   |
    start  with  (start_time)  next  (next_time)

    ]

    AS subquery;

    闲话少说下面弄具体操作:

    创建物化视图需要的权限:

    grant   create   materialized   view   to  user_name;  
    grant   create   materialized   view   to  creditfw;  

    在源表建立 物化视图日志 :

    create table lhcj(id number, name varchar2(30), num number);
    create materialized view log on lhcj with rowid, sequence(id, name) including new values;

    物化视图日志已经创建完成。

    SQL> desc mlog$_lhcj

    ID和NAME是建立物化视图日志时指定的基表中的列,它们记录每次DML操作对应的ID和NAME的值。
    M_ROW$$保存基表的ROWID信息,根据M_ROW$$中的信息可以定位到发生DML操作的记录。
    SEQUENCE$$根据DML操作发生的顺序记录序列的编号,当刷新时,根据SEQUENCE$$中的顺序就可以和基表中的执行顺序保持一致。
    SNAPTIME$$列记录了刷新操作的时间。
    DMLTYPE$$的记录值I、U和D,表示操作是INSERT、UPDATE还是DELETE。
    OLD_NEW$$表示物化视图日志中保存的信息是DML操作之前的值(旧值)还是DML操作之后的值(新值)。除了O和N这两种类型外,对于UPDATE操作,还可能表示为U。
    CHANGE_VECTOR$$记录DML操作发生在那个或那几个字段上。

    在目标数据库上创建award_punish_view:

     create   materialized   view  award_punish_view  refresh   force   on   demand   start   with   sysdate   next
    
    to_date( concat (to_char(  sysdate + 1 , 'dd-mm-yyyy' ), '22:00:00' ), 'dd-mm-yyyy hh24:mi:ss' )  as
    
    select  *  from  lhjc_view;--lhjc_view为之前查询用的视图,查询太慢,需转化为物化视图

    设置为每天晚10点更新一次数据。

    修改刷新时间:

     alter   materialized   view  award_punish_view refresh   force   on   demand   start   with   sysdate  
    
    next  to_date( concat (to_char( sysdate + 1 , 'dd-mm-yyyy' ), ' 23:00:00' ), 'dd-mm-yyyy hh24:mi:ss' );
    
    或
    
    alter   materialized   view  award_punish_view refresh   force   on   demand   start   with   sysdate  
    
    next   trunc ( sysdate , 'dd' )+ 1 + 1 / 24 ;  -- 每天1点刷新  

    删除物化视图及日志:

     drop   materialized   view   log   on  test_table;     --删除物化视图日志: 
    
    drop   materialized   view  mv_materialized_test;  --删除物化视图   

     

    当物化视图建立好后,肯定要测试一下这个效率如何,这时候,就要用到网站上面查询语句,进行查询速率比较咯:

    首先是之前的视图查询效率时间

     

     查询速度为20.972秒。速度极其慢。

    有坏的,才可以做明显的比对,现在来看看物化视图的效率:

     

     查询速度2.5秒,已经快了8倍左右了,速度杠杠的,当然还有更多优化的地方。

     

  • 相关阅读:
    从HDFS下载文件到本地
    oracle jdbc jar包异常
    spring jdbctemplate 启动报错(oracle驱动bug)
    solr搜索异常
    jdbc 处理Clob
    Wavosaur音频编辑软件: 功能专业,体积超小(500KB)
    isa server 2004中找不到HTTP过滤选项。
    cisco pix logging facility含义
    IPSec基础-密钥交换和密钥保护
    cisco 831 使用 SDM
  • 原文地址:https://www.cnblogs.com/jianshuai520/p/10179757.html
Copyright © 2011-2022 走看看