📄 ：（一）深入浅出理解索引结构.htm
字号:
次。<BR><BR>从以上我们可以看出，不排序的速度以及逻辑读次数都是和“order by 聚集索引列” 的速度是相当的，但这些都比“order
by
非聚集索引列”的查询速度是快得多的。<BR><BR>同时，按照某个字段进行排序的时候，无论是正序还是倒序，速度是基本相当的。<BR><BR>12、高效的TOP<BR><BR>事实上，在查询和提取超大容量的数据集时，影响数据库响应时间的最大因素不是数据查找，而是物理的I/0操作。如：<BR><BR>select
top 10 * from (<BR><BR>select top 10000 gid,fariqi,title from
tgongwen<BR><BR>where neibuyonghu='办公室'<BR><BR>order by gid desc) as
a<BR><BR>order by gid
asc<BR><BR>这条语句，从理论上讲，整条语句的执行时间应该比子句的执行时间长，但事实相反。因为，子句执行后返回的是10000条记录，而整条语句仅返回10条语句，所以影响数据库响应时间最大的因素是物理I/O操作。而限制物理I/O操作此处的最有效方法之一就是使用TOP关键词了。TOP关键词是SQL
SERVER中经过系统优化过的一个用来提取前几条或前几个百分比数据的词。经笔者在实践中的应用，发现TOP确实很好用，效率也很高。但这个词在另外一个大型数据库ORACLE中却没有，这不能说不是一个遗憾，虽然在ORACLE中可以用其他方法（如：rownumber）来解决。在以后的关于“实现千万级数据的分页显示存储过程”的讨论中，我们就将用到TOP这个关键词。<BR><BR><BR><BR>到此为止，我们上面讨论了如何实现从大容量的数据库中快速地查询出您所需要的数据方法。当然，我们介绍的这些方法都是“软”方法，在实践中，我们还要考虑各种“硬”因素，如：网络性能、服务器的性能、操作系统的性能，甚至网卡、交换机等。<BR><BR><BR><BR>三、实现小数据量和海量数据的通用分页显示存储过程<BR><BR>建立一个web
应用，分页浏览功能必不可少。这个问题是数据库处理中十分常见的问题。经典的数据分页方法是:ADO
纪录集分页法，也就是利用ADO自带的分页功能（利用游标）来实现分页。但这种分页方法仅适用于较小数据量的情形，因为游标本身有缺点：游标是存放在内存中，很费内存。游标一建立，就将相关的记录锁住，直到取消游标。游标提供了对特定集合中逐行扫描的手段，一般使用游标来逐行遍历数据，根据取出数据条件的不同进行不同的操作。而对于多表和大表中定义的游标（大的数据集合）循环很容易使程序进入一个漫长的等待甚至死机。<BR><BR>更重要的是，对于非常大的数据模型而言，分页检索时，如果按照传统的每次都加载整个数据源的方法是非常浪费资源的。现在流行的分页方法一般是检索页面大小的块区的数据，而非检索所有的数据，然后单步执行当前行。<BR><BR> 最早较好地实现这种根据页面大小和页码来提取数据的方法大概就是“俄罗斯存储过程”。这个存储过程用了游标，由于游标的局限性，所以这个方法并没有得到大家的普遍认可。<BR><BR>后来，网上有人改造了此存储过程，下面的存储过程就是结合我们的办公自动化实例写的分页存储过程：<BR><BR>CREATE
procedure pagination1<BR><BR>(@pagesize
int, --页面大小，如每页存储20条记录<BR><BR>@pageindex int
--当前页码<BR><BR>)<BR><BR>as<BR><BR>set nocount
on<BR><BR>begin<BR><BR>declare @indextable table(id int identity(1,1),nid
int) --定义表变量<BR><BR>declare @PageLowerBound
int --定义此页的底码<BR><BR>declare @PageUpperBound
int --定义此页的顶码<BR><BR>set
@PageLowerBound=(@pageindex-1)*@pagesize<BR><BR>set
@PageUpperBound=@PageLowerBound+@pagesize<BR><BR>set rowcount
@PageUpperBound<BR><BR>insert into @indextable(nid) select gid from
TGongwen where fariqi >dateadd(day,-365,getdate()) order by fariqi
desc<BR><BR>select O.gid,O.mid,O.title,O.fadanwei,O.fariqi from TGongwen
O,@indextable t where O.gid=t.nid<BR><BR>and t.id>@PageLowerBound and
t.id<=@PageUpperBound order by t.id<BR><BR>end<BR><BR>set nocount
off<BR><BR>以上存储过程运用了SQL
SERVER的最新技术――表变量。应该说这个存储过程也是一个非常优秀的分页存储过程。当然，在这个过程中，您也可以把其中的表变量写成临时表：CREATE
TABLE #Temp。但很明显，在SQL
SERVER中，用临时表是没有用表变量快的。所以笔者刚开始使用这个存储过程时，感觉非常的不错，速度也比原来的ADO的好。但后来，我又发现了比此方法更好的方法。<BR><BR>笔者曾在网上看到了一篇小短文《从数据表中取出第n条到第m条的记录的方法》，全文如下：<BR><BR>从publish
表中取出第 n 条到第 m 条的记录： <BR>SELECT TOP m-n+1 * <BR>FROM publish <BR>WHERE (id
NOT IN <BR> (SELECT TOP n-1 id <BR> FROM publish)) <BR><BR>id
为publish 表的关键字
<BR><BR>我当时看到这篇文章的时候，真的是精神为之一振，觉得思路非常得好。等到后来，我在作办公自动化系统（ASP.NET+ C#＋SQL
SERVER）的时候，忽然想起了这篇文章，我想如果把这个语句改造一下，这就可能是一个非常好的分页存储过程。于是我就满网上找这篇文章，没想到，文章还没找到，却找到了一篇根据此语句写的一个分页存储过程，这个存储过程也是目前较为流行的一种分页存储过程，我很后悔没有争先把这段文字改造成存储过程：<BR><BR>CREATE
PROCEDURE pagination2<BR>(<BR>@SQL
nVARCHAR(4000), --不带排序语句的SQL语句<BR>@Page
int, --页码<BR>@RecsPerPage
int, --每页容纳的记录数<BR>@ID
VARCHAR(255), --需要排序的不重复的ID号<BR>@Sort
VARCHAR(255) --排序字段及规则<BR>)<BR>AS<BR><BR>DECLARE
@Str nVARCHAR(4000)<BR><BR>SET @Str='SELECT TOP
'+CAST(@RecsPerPage AS VARCHAR(20))+' * FROM ('+@SQL+') T WHERE
T.'+@ID+'NOT IN <BR>(SELECT TOP
'+CAST((@RecsPerPage*(@Page-1)) AS VARCHAR(20))+' '+@ID+' FROM ('+@SQL+')
T9 ORDER BY '+@Sort+') ORDER BY '+@Sort<BR><BR>PRINT @Str<BR><BR>EXEC
sp_ExecuteSql @Str<BR>GO<BR><BR>其实，以上语句可以简化为：<BR><BR>SELECT TOP 页大小
*<BR><BR>FROM Table1<BR><BR>WHERE (ID NOT
IN<BR><BR> (SELECT
TOP 页大小*页数 id<BR><BR> FROM
表<BR><BR> ORDER BY
id))<BR><BR>ORDER BY ID<BR><BR>但这个存储过程有一个致命的缺点，就是它含有NOT
IN字样。虽然我可以把它改造为：<BR><BR>SELECT TOP 页大小 *<BR><BR>FROM Table1<BR><BR>WHERE
not exists<BR><BR>(select * from (select top (页大小*页数) * from table1 order
by id) b where b.id=a.id )<BR><BR>order by id<BR><BR>即，用not exists来代替not
in，但我们前面已经谈过了，二者的执行效率实际上是没有区别的。<BR><BR>既便如此，用TOP 结合NOT
IN的这个方法还是比用游标要来得快一些。<BR><BR>虽然用not exists并不能挽救上个存储过程的效率，但使用SQL
SERVER中的TOP关键字却是一个非常明智的选择。因为分页优化的最终目的就是避免产生过大的记录集，而我们在前面也已经提到了TOP的优势，通过TOP
即可实现对数据量的控制。<BR><BR>在分页算法中，影响我们查询速度的关键因素有两点：TOP和NOT IN。TOP可以提高我们的查询速度，而NOT
IN会减慢我们的查询速度，所以要提高我们整个分页算法的速度，就要彻底改造NOT
IN，同其他方法来替代它。<BR><BR>我们知道，几乎任何字段，我们都可以通过max(字段)或min(字段)来提取某个字段中的最大或最小值，所以如果这个字段不重复，那么就可以利用这些不重复的字段的max或min作为分水岭，使其成为分页算法中分开每页的参照物。在这里，我们可以用操作符“>”或“<”号来完成这个使命，使查询语句符合SARG形式。如：<BR><BR>Select
top 10 * from table1 where id>200<BR><BR>于是就有了如下分页方案：<BR><BR>select top
页大小 *<BR><BR>from table1 <BR><BR>where
id><BR><BR> (select max (id) from
<BR><BR> (select top ((页码-1)*页大小) id
from table1 order by id) as T<BR><BR>
) <BR><BR> order by
id<BR><BR>在选择即不重复值，又容易分辨大小的列时，我们通常会选择主键。下表列出了笔者用有着1000万数据的办公自动化系统中的表，在以GID（GID是主键，但并不是聚集索引。）为排序列、提取gid,fariqi,title字段，分别以第1、10、100、500、1000、1万、10万、25万、50万页为例，测试以上三种分页方案的执行速度：（单位：毫秒）<BR><BR>页 码<BR>方案1<BR>方案2<BR>方案3<BR><BR>1<BR>60<BR>30<BR>76<BR><BR>10<BR>46<BR>16<BR>63<BR><BR>100<BR>1076<BR>720<BR>130<BR><BR>500<BR>540<BR>12943<BR>83<BR><BR>1000<BR>17110<BR>470<BR>250<BR><BR>1万<BR>24796<BR>4500<BR>140<BR><BR>10万<BR>38326<BR>42283<BR>1553<BR><BR>25万<BR>28140<BR>128720<BR>2330<BR><BR>50万<BR>121686<BR>127846<BR>7168<BR><BR><BR>从上表中，我们可以看出，三种存储过程在执行100页以下的分页命令时，都是可以信任的，速度都很好。但第一种方案在执行分页1000页以上后，速度就降了下来。第二种方案大约是在执行分页1万页以上后速度开始降了下来。而第三种方案却始终没有大的降势，后劲仍然很足。<BR><BR>在确定了第三种分页方案后，我们可以据此写一个存储过程。大家知道SQL
SERVER的存储过程是事先编译好的SQL语句，它的执行效率要比通过WEB页面传来的SQL语句的执行效率要高。下面的存储过程不仅含有分页方案，还会根据页面传来的参数来确定是否进行数据总数统计。<BR><BR>--
获取指定页的数据<BR><BR>CREATE PROCEDURE pagination3<BR><BR>@tblName
varchar(255), --
表名<BR><BR>@strGetFields varchar(1000) = '*', -- 需要返回的列
<BR><BR>@fldName varchar(255)='', --
排序的字段名<BR><BR>@PageSize int =
10, --
页尺寸<BR><BR>@PageIndex int =
1, --
页码<BR><BR>@doCount bit = 0, -- 返回记录总数, 非 0
值则返回<BR><BR>@OrderType bit = 0, -- 设置排序类型, 非 0
值则降序<BR><BR>@strWhere varchar(1500) = '' -- 查询条件
(注意: 不要加 where)<BR><BR>AS<BR><BR>declare @strSQL
varchar(5000) -- 主语句<BR><BR>declare
@strTmp
varchar(110) --
临时变量<BR><BR>declare @strOrder
varchar(400) --
排序类型<BR><BR><BR><BR>if @doCount !=
0<BR><BR> begin<BR><BR> if @strWhere
!=''<BR><BR> set @strSQL = "select count(*) as
Total from [" + @tblName + "] where
"+@strWhere<BR><BR> else<BR><BR> set
@strSQL = "select count(*) as Total from [" + @tblName +
"]"<BR><BR>end <BR><BR>--以上代码的意思是如果@doCount传递过来的不是0，就执行总数统计。以下的所有代码都是@doCount为0的情况<BR><BR>else<BR><BR>begin<BR><BR><BR><BR>if
@OrderType != 0<BR><BR>begin<BR><BR> set @strTmp =
"<(select min"<BR><BR>set @strOrder = " order by [" + @fldName +"]
⌨️ 快捷键说明
复制代码
Ctrl + C
搜索代码
Ctrl + F
全屏模式
F11
切换主题
Ctrl + Shift + D
显示快捷键
?
增大字号
Ctrl + =
减小字号
Ctrl + -