zoukankan      html  css  js  c++  java
  • 数据库优化

    D1 业务逻辑 (影响最大)比如不要多次调用数据库,不要循环里调用,多用缓存,
    D2 数据设计 (表结构设计,数据建模) 范式,第一范式:无重复的列;第二范式:有一个主键列,非主属性要完全依赖于主键;第三范式:属性不依赖于其它非主属性(一个表里的非主属性不再其他表里列出,避免重复。)
    D3 应用程序设计 (SQL 语句的写法) SQL 写法优化
    D4 数据库的逻辑结构 (索引,区间,段,表空间)
    D5 数据库操作 (参数和配置)
    D6 访问路径
    D7 内存分配情况
    D8 I/O 和物理设计 (DBA 与业务沟通)(峰值多大,使用周期)
    D9 资源的征用
    D10 操作系统的调节

    D1-D3 影响最大但比较难修改 (事先去做)
    D4-D9 性能影响不是最大但经常去做的(DBA)
    D10 手段不是很多

    可以看出D1-D3都是和程序员相关的,这也正合我以前的想法------良好的程序,业务逻辑设计是最好的调优。其他的数据库系统都为我们做的差不多了

    D3 SQL 优化

    1Exists,in选择 ;in 后面跟静态的代码的话,速度很快,跟变化的东西得话,会慢。

     not in  是强列不推荐使用的,因为它不能应用表的索引。用NOT EXISTS 方案代替。

    2.1使用预编译PreparedStatement

    2.2使用重复完全一样的SQL,同一功能同一性能不同写法SQL的影响。

    如一个SQL在A程序员写的为  Select * from zl_yhjbqk

    B程序员写的为 Select * from dlyx.zl_yhjbqk(带表所有者的前缀)

    C程序员写的为 Select * from DLYX.ZLYHJBQK(大写表名)

    D程序员写的为 Select *  from DLYX.ZLYHJBQK(中间多了空格)

    以上四个SQL在ORACLE分析整理之后产生的结果及执行的时间是一样的,但是从ORACLE共享内存SGA的原理,可以得出ORACLE对每个SQL 都会对其进行一次分析,并且占用共享内存,如果将SQL的字符串及格式写得完全相同,则ORACLE只会分析一次,共享内存也只会留下一次的分析结果,这不仅可以减少分析SQL的时间,而且可以减少共享内存重复的信息,ORACLE也可以准确统计SQL的执行频率。

    3尽量不用*

    4.分页sql ,一级查询就尽量多排出。
    一般的分页sql如下所示:
    sql1:select * from (select t.*,rownum rn from XXX t)where rn>0 and rn <10;
    sql2:select * from (select t.*,rownum rn from XXX t where rownum <10)where rn>0;
    乍看一下没什么区别,实际上区别很大...125万条数据测试,
    sql1平均需要1.25秒(咋这么准呢? )
    sql2平均需要... 0.07秒
    原因在于,子查询中,sql2排除了10以外的所有数据

    5.能用一句sql,千万别用2句sql ,可以用union关键字来组成自己想要的表返回。

    6.IS NULL 或IS NOT NULL操作(判断字段是否为空)

    判断字段是否为空一般是不会应用索引的,因为索引是不索引空值的。

    推荐方案:用其它相同功能的操作运算代替,如:a is not null 改为 a>0 或a>’’等。不允许字段为空,而用一个缺省值代替空值,如申请中状态字段不允许为空,缺省为申请。

    7.> 及 < 操作符(大于或小于操作符)

    大于或小于操作符一般情况下是不用调整的,因为它有索引就会采用索引查找,但有的情况下可以对它进行优化,如一个表有100万记录,一个数值型字段A,30万记录的A=0,30万记录的A=1,39万记录的A=2,1万记录的A=3。那么执行A>2与A>=3的效果就有很大的区别了,因为A>2时ORACLE会先找出为2的记录索引再进行比较,而A>=3时ORACLE则直接找到=3的记录索引。

    8.LIKE操作符

    LIKE操作符可以应用通配符查询,里面的通配符组合可能达到几乎是任意的查询,但是如果用得不好则会产生性能上的问题,如LIKE ‘%5400%’ 这种查询不会引用索引,而LIKE ‘X5400%’则会引用范围索引。

    一个实际例子:用YW_YHJBQK表中营业编号后面的户标识号可来查询营业编号 YY_BH LIKE ‘%5400%’ 这个条件会产生全表扫描,如果改成YY_BH LIKE ’X5400%’ OR YY_BH LIKE ’B5400%’ 则会利用YY_BH的索引进行两个范围的查询,性能肯定大大提高。

    9.UNION操作符

    UNION在进行表链接后会筛选掉重复的记录,所以在表链接后会对所产生的结果集进行排序运算,删除重复的记录再返回结果。实际大部分应用中是不会产生重复的记录,最常见的是过程表与历史表UNION。如:
    select * from gc_dfys
    union
    select * from ls_jg_dfys
    这个SQL在运行时先取出两个表的结果,再用排序空间进行排序删除重复的记录,最后返回结果集,如果表数据量大的话可能会导致用磁盘进行排序。

    推荐方案:采用UNION ALL操作符替代UNION,因为UNION ALL操作只是简单的将两个结果合并后就返回。

    10.WHERE后面的条件顺序影响

    WHERE子句后面的条件顺序对大数据量表的查询会产生直接的影响。如:
    Select * from zl_yhjbqk where dy_dj = '1KV以下' and xh_bz=1
    Select * from zl_yhjbqk where xh_bz=1 and dy_dj = '1KV以下'
    以上两个SQL中dy_dj(电压等级)及xh_bz(销户标志)两个字段都没进行索引,所以执行的时候都是全表扫描,第一条SQL的dy_dj = '1KV以下'条件在记录集内比率为99%,而xh_bz=1的比率只为0.5%,在进行第一条SQL的时候99%条记录都进行dy_dj及xh_bz的比较,而在进行第二条SQL的时候0.5%条记录都进行dy_dj及xh_bz的比较,以此可以得出第二条SQL的CPU占用率明显比第一条低。

  • 相关阅读:
    VS2008 编译出错 fatal error C1859: unexpected precompiled header error, simply rerunning the compiler might fix this problem
    解析XML出错,无法创建DOMDocument对象
    strncpy, strncpy_s
    Mongodb: Sort operation used more than the maximum 33554432 bytes of RAM
    node-cache
    【Boost】boost::string_algo详解2——find相关函数
    Compiler Error: Function call with parameters that may be unsafe
    fopen和fopen_s用法的比较
    fopen_s遇到的一个问题
    Data type conversion in MongoDB
  • 原文地址:https://www.cnblogs.com/onlywujun/p/2937312.html
Copyright © 2011-2022 走看看