zoukankan      html  css  js  c++  java
  • mongoDB分页的两种方法

    mongoDB的分页查询是通过limit(),skip(),sort()这三个函数组合进行分页查询的

    下面这个是我的测试数据

    db.test.find().sort({"age":1});

    第一种方法

    查询第一页的数据:db.test.find().sort({"age":1}).limit(2);

    查询第二页的数据:db.test.find().sort({"age":1}).skip(2).limit(2);

    查询其他页数以此类推。。。

    第二种方法

    查询第一页的数据:db.test.find().sort({"age":1}).limit(2);

    跟上面的第一种方法一样的。

    查询第二页的数据:

    这个是获取第一页最后一条记录的值,然后排除前面的记录,就能获取到新的记录了

    总结来说,如果数据量不是很大的话,可以使用第一种方法,毕竟比较简单,如果数据量比较大的话,使用第二种方法比较好,因为这样就可以不用到skip()这个函数,skip跳过太多的记录,效率有点低


    经过认真的考虑,第二种方法确实不适合跳页,而且效率也不是很高

    对于海量数据的话,我们要做些特殊的处理,

    有以下2种方法

    第一种方法

    限制分页的页数,类似百度的百度的分页处理,只是显示前面的七百多条记录,这样的就不用考虑性能的问题了,毕竟一般人都只是翻到前面十页,就找到自己需要的了

    后面的统计结果应该是估算出来的,根据查出来的这些记录所占的比例估算出总的记录数

    第二种方法

    我们可以这样做,假设是根据id排序的,我们可以id跟id所在的页数的序号存到redis/MemberCached中,

    就像这样,假设每一页有10条记录 

    id   page

    1    1

    2    1

    。。。

    10   1

    11    2

    12   2

    。。。。

    20   2

    这样我们查第一页的时候就能直接取出十条数据

    假设有1亿条数据,一条记录id占4个字节,其他信息的占一个字节,一条记录就占5个字节

    1 0000 0000 *5/(1024*1024)=476MB 

    这种做法使用空间换时间,一般数据库查询的时间大多花在跟数据库的连接上,放在缓存中,可以大大加快查询的速度

  • 相关阅读:
    【iOS系列】-iOS的多线程解析
    【iOS系列】-单例模式的实现
    Mac下Apache+MySQL+PHP安装
    【ios系列】-Quartz 2D常用方法介绍
    【ios系列】-数据储存
    【iOS系列】-文件管理
    我是怎么用FullCalendar记录我的2013年(辞职N次,面试2N次)的,它还兼容IE6
    2014年我去哪里过年?
    unity3d Human skin real time rendering plus 真实模拟人皮实时渲染 plus篇
    Unity3d shader之次表面散射(Subsurface Scattering)
  • 原文地址:https://www.cnblogs.com/xiaolai/p/3401289.html
Copyright © 2011-2022 走看看