MySQL分页优化解析
来源：www.jb51.net 发布时间：2008-12-22 14:56:00
似乎讨论分页的人很少，难道大家都沉迷于limit m,n?在有索引的情况下，limit m,n速度足够，可是在复杂条件搜索时，where somthing order by somefield+somefieldmysql会搜遍数据库，找出“所有”符合条件的记录，然后取出m,n条记录。
如果你的数据量有几十万条，用户又搜索一些很通俗的词，然后要依次读最后几页重温旧梦。mysql该很悲壮的不停操作硬盘。
所以，可以试着让mysql也存储分页，当然要程序配合。(这里只是提出一个设想，欢迎大家一起讨论)
ASP的分页：在ASP系统中有Recordset对象来实现分页，但是大量数据放在内存中，而且不知道什么时候才失效(请ASP高手指点). SQL数据库分页：用存储过程+游标方式分页，具体实现原理不是很清楚，设想如果用一次查询就得到需要的结果，或者是id集，需要后续页时只要按照结果中的IDs读出相关记录。这样只要很小的空间保留本次查询的所有IDs. (SQL中的查询结果不知道怎样清楚过期垃圾?)
这样，可以让mysql模拟存储分页机制：
1. select id from $table where $condition order by $field limit $max_pages*$count;查询符合条件的IDs.限定最大符合条件的记录数量，也可以不加。
2. 因为php在执行结束后所有变量都要lost，所以可以考虑:方案a. 在mysql建立临时表，查询结果用一个时间或随机数作为唯一标志插入。其中建立page1~pagen个字段，每个字段保存该页中需要的ids, 这样一个id对一条记录.方案b. 如果打开session,也可以放在session中保存，实际上是放在文件中保存。建立一个$IDs数组，$IDs[1]~$IDs[$max_pages]. 考虑到有时候用户会开几个窗口同时查询，要为$ids做一个唯一标志，避免查询结果相互覆盖。二维数组和$$var都是好办法。
3. 在每页页的请求中，直接找到对应的IDs，中间以","间隔：select * from $table where id in ($ids); 速度绝对快
4. 收尾要考虑查询结果的自动清除，可以设置定时或者按比例随机清楚。如果用mysql临时表要加上一个时间标志字段，session中要加入$IDs["time"]=time(); 在一定时间以后不操作视为过期数据。
5. 如果要优化，可以考虑用把1和2.a中的语句合并成select ...... into ....
Note:1.以上只是针对mysql的修补方案，希望mysql哪天能把这些功能加进去2.其它数据库也可以套用。3.如果其它数据库还有更先进的分页方式，请告诉我或mailto:steeven@kali.com.cn4.如果真的有很多数据要查询，还是和mysql再见吧，sql,oracle都提供了更先进的关键词索引查询。
精益求精，以上只是抛砖引玉，欢迎共同探讨分页问题。(也可关于其它数据库)希望有一天能把各种分页方式整理出来供新手参考。
0
投稿猜你喜欢
背景临时表空间用来管理数据库排序操作以及用于存储临时表、中间排序结果等临时对象，相信大家在开发中经常会遇到相关的需求，下面本文将给大家详细J- 前言圣诞节快到了，是不是想用python画一个可爱的圣诞树，我在各大网站都查了一下，都不太美观，然后我就学习了一下别人的代码改写了一下，自己
- eval 跟json.loads 是不一样的函数，是有实现不一样功能的地方，但是在某些地方它们两个函数的功能是一样的，在这个时候如果对执行效
- 目的：python能使用xlrd模块实现对Excel数据的读取，且按照想要的输出形式。总体思路：（1）要想实现对Excel数据的读取，需要用
- 本文实例讲述了python写日志文件操作类与应用。分享给大家供大家参考，具体如下：项目的开发过程中，日志文件是少不了的，通过写日志文件，可以
- 1.Mysql中的数据类型varchar 动态字符串类型（最长255位），可以根据实际长度来动态分配空间，例如：varchar(100)ch
- 绘制动图FuncAnimation，它的使用要求简洁且定制化程度较高。如果想将很多图片合并为一个动图，那么ArtistAnimation是最
- 目的：本文实现QT登录界面，输入账号和密码后，系统连接Oracle数据进行判断账号和密码(MD5加密)是否和数据库一致，如果一致则提示登录成
- 在python中读取一个文本文件相信大家都比较熟悉了，但如果我们遇到一个二进制文件要读取怎么办呢？我们尝试使用 Python 中的内置 op
- 如果不用“with”，那么Python会在何时关闭文件呢？答案是：视情况而定。Python程序员最初学到的东西里有一点就是可以通过迭代法很容
- php写入mysql出现中文乱码的解决办法是：在建立数据库连接之后，将该连接的编码方式改为中文。代码如下：$linkID=@mysql_co
- 大纲本文主要介绍一下numpy中的几个常用函数，包括hstack()、vstack()、stack()、concatenate()。1、co
- 前言前言：想写这个代码的原因是因为实习的时候需要根据表格名创建对应的文件夹，如果只是很少个数文件夹的话，ctrl+shift+n还可以接受吧
- 1.func Fields(s string) []string，这个函数的作用是按照1：n个空格来分割字符串最后返回的是[]string的
- 介绍舍友从网上下载的word题库文档很乱，手动改了大半天才改了一点，想起python是大名鼎鼎的自动化脚本，于是乎开始了python对wor
- 本文实例讲述了go语言使用第三方包 json化结构体操作。分享给大家供大家参考，具体如下：前提条件：安装好操作系统对应的gitgo get
- 给定list,如何以空格/逗号等符号以分隔符输出呢？一般的，简单的for循环可以打印出list的内容：l=[1,2,3,4]for i in
- 读《论语》，子张十九，子夏曰：博学而笃志，切问而近思，仁在其中矣。 博学：架构需要广度，要尽量多学习各方面的知识。笃志：除了广度，架构师还需
- 最近在阅读Python微型Web框架Bottle的源码，发现了Bottle中有一个既是装饰器类又是描述符的有趣实现。刚好这两个点是Pytho
- 简述GoogleNet 和 VGG 等网络证明了，更深度的网络可以抽象出表达能力更强的特征，进而获得更强的分类能力。在深度网络中，随之网络深
