资源描述:
《SQL如何快速处理海量数据.doc》由会员上传分享,免费在线阅读,更多相关内容在教育资源-天天文库。
1、个人收集整理勿做商业用途在以下的文章中,我将以“办公自动化”系统为例,探讨如何在有着1000万条数据的MS SQL SERVER数据库中实现快速的数据提取和数据分页。以下代码说明了我们实例中数据库的“红头文件”一表的部分数据结构:CREATETABLE[dbo].[TGongwen](--TGongwen是红头文件表名ﻫ[Gid][int]IDENTITY(1,1) NOTNULL ,ﻫ--本表的id号,也是主键[title][varchar](80)COLLATEChinese_PRC_CI_ASNULL,ﻫ--红头文件的标题[fariqi][dat
2、etime]NULL,--发布日期[neibuYonghu] [varchar](70)COLLATEChinese_PRC_CI_ASNULL ,ﻫ--发布用户ﻫ[reader][varchar](900)COLLATEChinese_PRC_CI_ASNULL, --需要浏览的用户。每个用户中间用分隔符“,”分开ﻫ)ON[PRIMARY]TEXTIMAGE_ON [PRIMARY]ﻫGO下面,我们来往数据库中添加1000万条数据: ﻫdeclare @iintset@i=1while @i<=250000ﻫbeginﻫinsertintoTgong
3、wen(fariqi,neibuyonghu,reader,title)values('2004-2-5','通信科','通信科,办公室,王局长,刘局长,张局长,admin,刑侦支队,特勤支队,交巡警支队,经侦支队,户政科,治安支队,外事科','这是最先的25万条记录') set@i=@i+1ﻫendﻫGOﻫdeclare@iint ﻫset@i=1while@i<=250000beginﻫinsertinto Tgongwen(fariqi,neibuyonghu,reader,title)values('2004-9-16','办公室','办公室,
4、通信科,王局长,刘局长,张局长,admin,刑侦支队,特勤支队,交巡警支队,经侦支队,户政科,外事科','这是中间的25万条记录') set@i=@i+1ﻫend ﻫGOﻫﻫﻫdeclare @h int ﻫset @h=1while@h<=100begindeclare@iintﻫset@i=2002ﻫwhile@i<=2003ﻫbeginﻫﻫdeclare@j int ﻫset@j=0ﻫwhile@j<50begindeclare @kintﻫset @k=0个人收集整理勿做商业用途ﻫﻫwhile@k<50ﻫbegin ﻫﻫinsertinto T
5、gongwen(fariqi,neibuyonghu,reader,title)values(cast(@i as varchar(4))+'-8-153:'+cast(@jas varchar(2))+':'+cast(@jasvarchar(2)),'通信科','办公室,通信科,王局长,刘局长,张局长,admin,刑侦支队,特勤支队,交巡警支队,经侦支队,户政科,外事科','这是最后的50万条记录') ﻫﻫﻫset@k=@k+1ﻫﻫendﻫset@j=@j+1ﻫﻫﻫendﻫﻫﻫset@i=@i+1ﻫﻫendﻫset@h=@h+1 ﻫﻫﻫﻫendﻫﻫ
6、ﻫGO ﻫﻫﻫdeclare@iintﻫﻫset@i=1ﻫﻫﻫﻫwhile@i<=9000000 ﻫﻫbeginﻫﻫinsertinto Tgongwen(fariqi,neibuyonghu,reader,title)values('2004-5-5','通信科','通信科,办公室,王局长,刘局长,张局长,admin,刑侦支队,特勤支队,交巡警支队,经侦支队,户政科,治安支队,外事科','这是最后添加的900万条记录') ﻫﻫﻫset@i=@i+1000000ﻫﻫﻫend ﻫGO ﻫﻫﻫ通过以上语句,我们创建了25万条由通信科于2004年2月5日发布
7、的记录,25万条由办公室于2004年9月6日发布的记录,2002年和2003年各100个2500条相同日期、不同分秒的由通信科发布的记录(共50万条),还有由通信科于2004年5月5日个人收集整理勿做商业用途发布的900万条记录,合计1000万条。 ﻫﻫﻫﻫﻫ一、因情制宜,建立“适当”的索引ﻫﻫﻫ建立“适当”的索引是实现查询优化的首要前提。 ﻫﻫﻫ索引(index)是除表之外另一重要的、用户定义的存储在物理介质上的数据结构。当根据索引码的值搜索数据时,索引提供了对数据的快速访问。事实上,没有索引,数据库也能根据SELECT语句成功地检索到结果,但随着表
8、变得越来越大,使用“适当”的索引的效果就越来越明显。注意,在这句话中,我们用了“适当”这个词,