• mongoDB分页的两种方法


    mongoDB的分页查询是通过limit(),skip(),sort()这三个函数组合进行分页查询的

    下面这个是我的测试数据

    db.test.find().sort({"age":1});

    第一种方法

    查询第一页的数据:db.test.find().sort({"age":1}).limit(2);

    查询第二页的数据:db.test.find().sort({"age":1}).skip(2).limit(2);

    查询其他页数以此类推。。。

    第二种方法

    查询第一页的数据:db.test.find().sort({"age":1}).limit(2);

    跟上面的第一种方法一样的。

    查询第二页的数据:

    这个是获取第一页最后一条记录的值,然后排除前面的记录,就能获取到新的记录了

    总结来说,如果数据量不是很大的话,可以使用第一种方法,毕竟比较简单,如果数据量比较大的话,使用第二种方法比较好,因为这样就可以不用到skip()这个函数,skip跳过太多的记录,效率有点低


    经过认真的考虑,第二种方法确实不适合跳页,而且效率也不是很高

    对于海量数据的话,我们要做些特殊的处理,

    有以下2种方法

    第一种方法

    限制分页的页数,类似百度的百度的分页处理,只是显示前面的七百多条记录,这样的就不用考虑性能的问题了,毕竟一般人都只是翻到前面十页,就找到自己需要的了

    后面的统计结果应该是估算出来的,根据查出来的这些记录所占的比例估算出总的记录数

    第二种方法

    我们可以这样做,假设是根据id排序的,我们可以id跟id所在的页数的序号存到redis/MemberCached中,

    就像这样,假设每一页有10条记录 

    id   page

    1    1

    2    1

    。。。

    10   1

    11    2

    12   2

    。。。。

    20   2

    这样我们查第一页的时候就能直接取出十条数据

    假设有1亿条数据,一条记录id占4个字节,其他信息的占一个字节,一条记录就占5个字节

    1 0000 0000 *5/(1024*1024)=476MB 

    这种做法使用空间换时间,一般数据库查询的时间大多花在跟数据库的连接上,放在缓存中,可以大大加快查询的速度

  • 相关阅读:
    Virtio:针对 Linux 的 I/O 虚拟化框架
    修复MySQL的MyISAM表命令check table用法
    Linux 下用 smartd 监测硬盘状况
    借助JVM生日的时机,说说关于JVM你所不知道的那些事
    实时流计算、Spark Streaming、Kafka、Redis、Exactly-once、实时去重
    使用Kafka、Elasticsearch、Grafana搭建业务监控系统(三)Elasticsearch
    zabbix监控多实例tomcat--不使用JMX
    KAFKA随机产生JMX 端口指定的问题
    nginx+keepalived高可用服务器宕机解决方案
    tomcat 内存参数优化示例
  • 原文地址:https://www.cnblogs.com/xiaolai/p/3401289.html
Copyright © 2020-2023  润新知