zoukankan      html  css  js  c++  java
  • Top与ROW_NUMBER

    论Top与ROW_NUMBER读取第一页的效率问题

     

    前一段时间研究关于分页的问题,由于数据库属于百万级的,考虑了关于优化方面的问题。其中一个考虑是:第一页展现的频率肯定是最高的,所以我想第一页就使用Top N来读取。

    这个想法本身是没有错,因为通常我读取某条件下的N条记录我一直都是使用Top N。后面拿Top N和分页读取第一条进行效率比较,发现分页的效率居然还高一些,以下是测试代码:

    复制代码
    USE [d_study];
    GO
    
    SET STATISTICS IO ON;
    SET NOCOUNT ON;
    GO
    
    DECLARE @BeginTime datetime;
    DECLARE @EndTime datetime;
    DECLARE @ExecTime int;
    DECLARE @ExecNum int;
    
    SET @ExecNum = 1;
    SET @ExecTime = 0;
    
    -- 测试Top读取第一页的执行时间
    WHILE @ExecNum <= 30 BEGIN SET @BeginTime = getdate(); SELECT TOP 30 * FROM users WHERE nID>2000 And nID<50000 ORDER BY nID DESC; SET @EndTime = getdate(); SET @ExecTime = @ExecTime + datediff(ms,@BeginTime,@EndTime); SET @ExecNum = @ExecNum + 1; CHECKPOINT; /*写脏的缓冲入磁盘*/ DBCC FREEPROCCACHE WITH NO_INFOMSGS; /*清除执行计划*/ DBCC DROPCLEANBUFFERS WITH NO_INFOMSGS; /*清除缓冲数据*/ END PRINT 'TOP平均执行速度:' + Cast((@ExecTime / 30) AS varchar(10)) + '毫秒'; --测试分页读取第一页的执行时间 SET @ExecNum = 1; --重置执行次数 SET @ExecTime = 0; --重置记录时间 WHILE @ExecNum <= 30 BEGIN Set @BeginTime = getdate(); SELECT * FROM (SELECT ROW_NUMBER() OVER(ORDER BY nID asc) AS rownum,* FROM users Where nID>2000 And nID<50000 ) AS D WHERE rownum>0 AND rownum<31; Set @EndTime = getdate(); SET @ExecTime = @ExecTime + datediff(ms,@BeginTime,@EndTime); SET @ExecNum = @ExecNum + 1; CHECKPOINT; --写脏的缓冲入磁盘 DBCC FREEPROCCACHE WITH NO_INFOMSGS; --清除执行计划 DBCC DROPCLEANBUFFERS WITH NO_INFOMSGS; --清除缓冲数据 END Print '分页类似于TOP效果:' + Cast((@ExecTime / 30) AS varchar(10)) + '毫秒'; GO SET NOCOUNT OFF SET STATISTICS IO OFF
    复制代码

    修改读取的记录数N和修改读取条件的范围值,依然是分页效率更高。

    查看了不少的资源和做了各种跟踪,均没有找到满意的答案。

    最后我分析了这两条SQL,他们的不同之处在于“提取N条记录”的这个操作,Top N和 WHERE rownum>0 AND rownum<31。

    它们具体是如何运行我讲不出理论,但是我可以做个比方:

    体育老师让我们跑30步的距离,Top N的做法就是跑30步,自己边跑边数;WHERE rownum>0 AND rownum<31 相当于老师在30步的位置花了个标记,你只管死跑,到了那个标记就相当于跑了30步。我想做了标记死跑这个要快点吧,:)

     
    分类: SQL
  • 相关阅读:
    Jmeter分离登录事务的另一种方式
    数据驱动 vs 关键字驱动:对搭建UI自动化测试框架的探索
    使用jmeter往指定文件中插入一定数量的数据
    JMeter 各组件介绍以及用法
    JVM(2) Java内存溢出异常
    JVM(1) Java内存区域
    OptimalSolution(1)--递归和动态规划(4)其他问题
    MySQL开发篇(5)索引、视图、触发器、SQL中的安全问题、SQL Mode、
    OptimalSolution(1)--递归和动态规划(3)数组和字符串问题
    OptimalSolution(1)--递归和动态规划(2)矩阵的最小路径和与换钱的最少货币数问题
  • 原文地址:https://www.cnblogs.com/Leo_wl/p/4921799.html
Copyright © 2011-2022 走看看