sql百万级数据通用分页类asp.net版

本文介绍了一种基于SQL的高效分页查询方法,通过构造特定的SQL语句实现快速分页,适用于大型数据库。文中提供了详细的代码实现及ASP.NET Web窗体应用示例。

using System;
using System.Data;
using System.Data.SqlClient;

namespace Pagination.Class
{
 /// <summary>
 /// Pager 的摘要说明。
 /// </summary>
 public class Pager
 {
  public Pager()
  {
   //
   // TODO: 在此处添加构造函数逻辑
   //
  }
  /// <param name="fieldlist"></param>字段列表,如id,title,content
  /// <param name="condition"></param>条件,如id<100
  /// <param name="pkey"></param>主键,自增
  /// <param name="tablename"></param>表的名字,如News
  /// <param name="sort"></param>排序,0表示降序,1表示升序
  /// <param name="pagesize"></param>每页大小
  /// <param name="cpage"></param>当前页码
  public DataSet GetCurrentDataSet(string fieldlist,string condition,string pkey,string tablename,int sort,int pagesize,int cpage)//得到当前页记录
  {
   SqlConnection conn=new SqlConnection(System.Configuration.ConfigurationSettings.AppSettings["cs"]);
   SqlDataAdapter cmd=new SqlDataAdapter(GetSql(fieldlist,condition,pkey,tablename,sort,pagesize,cpage),conn);
   DataSet ds=new DataSet();
   cmd.Fill(ds);
   return ds;
  }
  static string GetSql(string fieldlist,string condition,string pkey,string tablename,int sort,int pagesize,int cpage)
  {
   string sql="";
   if(sort==0)
   {
    if(condition!="")
    {
     sql="select top "+pagesize.ToString()+" "+fieldlist+" from "+tablename+" where "+condition+" and "+pkey+" not in(select top "+pagesize*(cpage-1)+" "+pkey+" from "+tablename+" where "+condition+" and order by "+pkey+" desc) order by "+pkey+" desc";
    }
    else
    {
     sql="select top "+pagesize.ToString()+" "+fieldlist+" from "+tablename+" where "+pkey+" not in(select top "+pagesize*(cpage-1)+" "+pkey+" from "+tablename+" order by "+pkey+" desc) order by "+pkey+" desc";
    }
   }
   else
   {
    if(condition!="")
    {
     sql="select top "+pagesize.ToString()+" "+fieldlist+" from "+tablename+" where "+condition+" and "+pkey+" not in(select top "+pagesize*(cpage-1)+" "+pkey+" from "+tablename+" where "+condition+" and order by "+pkey+" asc) order by "+pkey+" asc";
    }
    else
    {
     sql="select top "+pagesize.ToString()+" "+fieldlist+" from "+tablename+" where "+pkey+" not in(select top "+pagesize*(cpage-1)+" "+pkey+" from "+tablename+" order by "+pkey+" asc) order by "+pkey+" asc";
    }
   }
   return sql;
  }
  public int GetCounts(string pkey,string tablename,string condition)//得到总记录数
  {
   string sql;
    if(condition!="")
    {
        sql="select count("+pkey+") from "+tablename where "+condition;
    }
    else
    {
        sql="select count("+pkey+") from "+tablename;
    }
   SqlConnection conn=new SqlConnection(System.Configuration.ConfigurationSettings.AppSettings["cs"]);
   SqlCommand cmd=new SqlCommand(sql,conn);
   conn.Open();
   SqlDataReader dr=cmd.ExecuteReader(CommandBehavior.CloseConnection);
   dr.Read();
   string str=dr[0].ToString();
   dr.Close();
   return Convert.ToInt32(str);
  }
 }
}
这里可以输出总记录数和当前页面的dataset。

针对此通用分页类的调用实例
1  建表News
CREATE TABLE [News] (
 [id] [int] IDENTITY (1, 1) NOT NULL ,
 [title] [nvarchar] (100) COLLATE Chinese_PRC_CI_AS NULL ,
 [content] [text] COLLATE Chinese_PRC_CI_AS NULL ,
 CONSTRAINT [PK_News] PRIMARY KEY  CLUSTERED
 (
  [id]
 )  ON [PRIMARY]
) ON [PRIMARY] TEXTIMAGE_ON [PRIMARY]
GO
2  建立生成数据的存储过程
create proc addnews
@count int
as
declare @i int
set @i=0
set nocount on
while @i<@count
begin
set @i=@i+1
insert into news (title,content) values ('百万级数据分页测试','Test by 逐日★风')
end
set nocount off
GO
3  生成数据
addnews 2000000

4  建立Aspx文件
<asp:Repeater id="Repeater1" runat="server">
 <HeaderTemplate>
  <table width="800" border="1" cellpadding="3">
 </HeaderTemplate>
 <ItemTemplate>
  <tr>
   <td><%#DataBinder.Eval(Container.DataItem,"id")%></td>
   <td><%#DataBinder.Eval(Container.DataItem,"title")%></td>
   <td><%#DataBinder.Eval(Container.DataItem,"content")%></td>
  </tr>
 </ItemTemplate>
 <FooterTemplate>
  </table>
 </FooterTemplate>
</asp:Repeater>
<div align="center"><FONT face="宋体">共</FONT>
 <asp:Label id="lblcount" runat="server"></asp:Label><FONT face="宋体">条记录,当前
  <asp:Label id="lblcurrent" runat="server"></asp:Label>页&nbsp;&nbsp;
  <asp:LinkButton id="hlprev" runat="server">上页</asp:LinkButton>&nbsp;
  <asp:LinkButton id="hlnext" runat="server">下页</asp:LinkButton>&nbsp;&nbsp;
  <asp:DropDownList id="DropDownList1" runat="server" AutoPostBack="True"></asp:DropDownList></FONT></div>
5  Cs文件
protected System.Web.UI.WebControls.Label lblcount;
  protected System.Web.UI.WebControls.Label lblcurrent;
  protected System.Web.UI.WebControls.DropDownList DropDownList1;
  protected System.Web.UI.WebControls.LinkButton hlprev;
  protected System.Web.UI.WebControls.LinkButton hlnext;
  protected System.Web.UI.WebControls.Repeater Repeater1;
  private int pagesize=20;
  static int cpage;
  static int TotalPages;

  private void Page_Load(object sender, System.EventArgs e)
  {
   // 在此处放置用户代码以初始化页面
   if(!this.IsPostBack)
   {
    cpage=1;
    Class.Pager pg=new Class.Pager();
    int Counts=pg.GetCounts("id","News","");
    lblcount.Text=Counts.ToString();//得到总记录数

    TotalPages=Counts/pagesize;
    if(Counts<pagesize)
     TotalPages=1;
    else
    {
     if(Counts%pagesize!=0)TotalPages++;
    }//计算总页数

    lblcurrent.Text=cpage.ToString()+"/"+TotalPages;
    
    DataSet ds=new DataSet();
    ds=pg.GetCurrentDataSet("id,title,content","","id","News",1,10,cpage);

    bind(ds);
    Gethl();
    Getddlist();
   }
  }
  private void Getddlist()
  {
   if(TotalPages!=1)
   {
    for(int i=1;i<=TotalPages;i++)
    {
     DropDownList1.Items.Add(new ListItem(i.ToString(),i.ToString()));
    }
   }
   else
   {
    DropDownList1.Items.Add(new ListItem("1","1"));
   }
  }
  private void Gethl()//得到上页,下页状态
  {
   if(lblcurrent.Text=="1")
   {
    hlprev.Enabled=false;
    hlnext.Enabled=false;
   }
   else
   {
    if(cpage==1)
     hlprev.Enabled=false;
    else
     hlprev.Enabled=true;
    if(cpage==Convert.ToInt32(TotalPages))
     hlnext.Enabled=false;
    else
     hlnext.Enabled=true;
   }
   lblcurrent.Text=cpage.ToString()+"/"+TotalPages;
  }
  private void bind(DataSet ds)
  {
   Repeater1.DataSource=ds;
   Repeater1.DataBind();
  }
  #region Web 窗体设计器生成的代码
  override protected void OnInit(EventArgs e)
  {
   //
   // CODEGEN: 该调用是 ASP.NET Web 窗体设计器所必需的。
   //
   InitializeComponent();
   base.OnInit(e);
  }
  
  /// <summary>
  ///  设计器支持所需的方法 - 不要使用代码编辑器
  ///  修改此方法的内容。
  /// </summary>
  private void InitializeComponent()
  {
   this.hlprev.Click += new System.EventHandler(this.hlprev_Click);
   this.hlnext.Click += new System.EventHandler(this.hlnext_Click);
   this.DropDownList1.SelectedIndexChanged += new System.EventHandler(this.DropDownList1_SelectedIndexChanged);
   this.Load += new System.EventHandler(this.Page_Load);

  }
  #endregion

  private void hlprev_Click(object sender, System.EventArgs e)
  {
   cpage=cpage-1;
   Class.Pager pg=new Class.Pager();
   DataSet ds=new DataSet();
   ds=pg.GetCurrentDataSet("id,title,content","","id","News",cpage,10,cpage);
   bind(ds);
   Gethl();
   DropDownList1.ClearSelection();
   DropDownList1.Items.FindByValue(cpage.ToString()).Selected=true;
  }

  private void hlnext_Click(object sender, System.EventArgs e)
  {
   cpage=cpage+1;
   Class.Pager pg=new Class.Pager();
   DataSet ds=new DataSet();
   ds=pg.GetCurrentDataSet("id,title,content","","id","News",cpage,10,cpage);
   bind(ds);
   Gethl();
   DropDownList1.ClearSelection();
   DropDownList1.Items.FindByValue(cpage.ToString()).Selected=true;
  }
  private void DropDownList1_SelectedIndexChanged(object sender, System.EventArgs e)
  {
   cpage=Convert.ToInt32(DropDownList1.SelectedValue);
   Class.Pager pg=new Class.Pager();
   DataSet ds=new DataSet();
   ds=pg.GetCurrentDataSet("id,title,content","","id","News",cpage,10,cpage);
   bind(ds);
   Gethl();
  }

本人机器Pentium M1.7G 480MDDRM ,可用物理内存70MB左右。200W数据平均分页时间0.5秒左右。

在网上找了一个 Asp数据操作组件(百万级分页) ,实用环境:Asp+DLL+MsSQL(这个网上很多地方都可以下载),并且其中结合SQL存储过程,说实话以前SQL存储过程接触的比较少,所以在调试该组件的时候遇到了一些问题,并试着改了一下(作者别生气(^..^)),高手们别笑话我。 原代码如下: 有分页列表数据: cls.tblName="Tablename" '表名 cls.fldName="Id" '排序关键字段 cls.PageIndex=Request("P")*1 '当前页码 cls.PageSize=20 '每页列数 cls.OrderType=1 '排序方式,0 、1 cls.strWhere=StrW '查询条件,不带Where cls.ListUrl="?Y="&Y&"&M="&M&"&D="&D&"&Sn="&Sn&"&P=" 分页URL Set Rs=cls.Result do while not rs.eof rs.movenext loop 分页数据 cls.page 在原文的使用说明中,在翻页代码中对表查询默认是全部字段也就是*,这样是不是会浪费资源,而无法查询需要的字段,于是我在DLL代码中新加入一个变量名为zdName,作为传递可控制查询条件的变量,同时在SQL存储过程中也加入相应的接受变量@zdName 字符型。 在这个小问题解决后,又在使用上发现cls.strWhere付给它的变量StrW 如果条件变量其中带有似 例如 a='b'则执行SQL存储过程时候会提示错误,后来发现是DLL代码中: sql = "exec GetList " & tblName & "," & fldName & "," & PageSize & "," & PageIndex & "," & OrderType & ",'" & strWhere & "' " 这个地方是否写的不够严谨,在StrW中如果含有单引,那么将无法执行,所以我在DLL的VB代码改成 If InStr(strWhere, "'") 0 Then sql = "exec GetList " & tblName & "," & fldName & "," & PageSize & "," & PageIndex & "," & OrderType & ",""" & strWhere & """ " Else sql = "exec GetList " & tblName & "," & fldName & "," & PageSize & "," & PageIndex & "," & OrderType & ",'" & strWhere & "' " End If 试了试目前的问题确实解决了,这个组件我也是刚刚使用,希望对大家能有点帮助!
让管理软件开发人员早点儿回家休息,做个跟老外有的一PK的软件组件,铜墙铁壁的权限组件。 年轻时、精力旺盛,有用不完的劲儿,但是工作经验不多,对各种行业实际应用没有深入的了解,大多停留在表面问题上,做不出过硬的有质量的软件组件来,刚精通C#程序时,发现又需要精通C/S、B/S才可以,这时又发现自己的数据库技术不过关,等刚掌握了SQLServer,又发现自己不懂Oralce,也不懂MySql,自己写出来的程序又不兼容这些数据库,等数据库也都精通了一些,发现自己的写文档能力不行,做个像样的东西非常不容易。 这时又发现自己的设计能力不行,等把设计能力也提高了,发现写文档的表达能力还是不行,等自己的表达能力也变得很强了,对各种行业应用也开始有了深入的了解,技术又变了很多,以前积累的技术又淘汰了。 当这些能力都接近已具备时,发现自己从早上忙到晚上,根本没有精力去写一个理想中的软件来,工作上的、家庭上的杂事也变得多如毛,当能力提高到了一定的境界后,普通人做出来的东西也都看不上了,也都不能放心了,因为知道得太多了,就能找出太多的问题了,但是自己又往往没那么多精力、空去做这个心目中的东东。 当真的全身心去投入了,去精心制作了这个东西后又发现这个东西,市场定位错了,只有很少数的人才肯花钱购买这个东东,所以成功很难,不仅需要有能力、而且需要更准确的市场定位能力,你做出来的软件?谁为此买单? 把设计文档写好、把程序写好、把操作手册写好,又要有一定的深度广度,的确也不是很容易;虽然我没有惊人的技术能力,但是我用了接近前后10年,不断完善改进这么一个很简单的功能,把这个简单的功能,做个彻彻底底,能达到真正的产品化的重复利用的要求,花费了2个月的业余时间,精心把使用手册编写完毕了,虽然软件没有开源,但是大部分的功能都写出来了,有做权限方面的开发人员,可以有一定的参考作用。 权限管理涉及的东西太多了,他需要涉及到数据库、要涉及到用户、组织机构、角色、日志、序列生成器、开发框架、甚至代码生成器,页面操作、底层存储结构设计等等方方面面,说是开发通用权限组件还不如是说:“轻量级的快速管理软件开发平台”也不过分的。 既然爱好这个,又投入了这么多年的心血,也就不差再投入几年,再深入研究、再不断推广了,把一个简单的东西做个彻彻底底,做个真正对开发人员有帮助,能解放开发人员的部分工作,能把劳动成果重复利用10次、100次、1000次、10000次,那就足够有把这个功能模块做个彻底质量过关,让大家彻底能认可的意义了,一个人只能做好那么几件事情,若是人人都有那么几件事情彻底做好了,舍得全身心去研究完善,那我们软件开发人员也没必要那么累了,都可以早点儿回家休息了,因为我们有很多可重复利用的组建、可提高我们工作效率的懒人工具。 小时候亲眼见过也亲身体验过人耕牛拉式的辛勤种地;社会总是需要有人冒险,去发明、研究、制造、改进拖拉机,虽然为此付出的代价会很高很高,但是用拖拉机种地效率就高很多产值也会高很多,大家也可以从繁重的体力劳动解放出来,虽然购买拖拉机要花钱、平时还需要烧油。 但是大家都不舍得购买拖拉机、平时也不舍得烧油,那只能继续“人耕牛拉”了,牛总比拖拉机便宜很多,平时吃草就可以了有点也很多,还环保底炭。通用权限管理组件、轻量级的快速管理软件开发平台能成为大家学习开发软件的拖拉机、开发软件的拖拉机。 以下部分是花费了接近2个月时间,精心编写的部分使用说明,虽然有些广告夹杂,但是认真对待了每篇文章的说明、希望有兴趣的朋友,可以补充完善、让有需要的人能直接重复利用、逐渐完善成大家都能认可的精品软件组件,大家都可以参考对比的标准权限功能。 人有追求有目标也是个闹心的事情、达不到目的,睡不好,吃不好,总想达到自己的目的,白天想、晚上想,几天、几周、几个月、几年都过的很快,人有追求了,也就不迷茫了,也就不腐败了,也不会堕落了,也挺有意思的。就把一个简单的东西做个精品出来,能彻底重复利用、没多大必要再重新开发,也别浪费人力物力了,该休息就休息、该早点儿回家就回家,该干啥就干啥吧。
评论 2
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值