浅谈实时数据仓库环境中分区技术的研究与应用

《浅谈实时数据仓库环境中分区技术的研究与应用》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、分类号UDC———密级3．932303学位论文实时数据仓库环境中分区技术的研究与应用作者姓名：赵宏博指导教师：王大玲教授东北大学计算机软件与理论研究所申请学位级别：硕士学科类别：工学学科专业名称：计算机软件与理论论文提交日期：2008年6月15论文答辩日期：2008年7月1日学位授予日期：答懒△捕：＼申镛袭评阅人：纪垂矧．抖燎怒东北大学2008年6月㈣嬲必AThesisfortheDegreeofMasterin．ComputerSoftwareandTheory,ResearchandApplicationofthePartitionTechnologyinReal—Ti

2、meData彤叠rehousebyZhaoHongboSupervisor：ProfessorWangDalingNortheasternUniversityJune2008独创性声明本人声明，所呈交的学位论文是在导师的指导下完成的。论文中取得的研究成果除加以标注和致谢的地方外，不包含其他人已经发表或撰写过的研究成果，也不包括本人为获得其他学位而使用过的材料。与我一同工作的同志对本研究所做的任何贡献均已在论文中作了明确的说明并表示诚挚的谢意。学位论文作者签名：司丛亥馋签字日期：删．石．为学位论文版权使用授权书本学位论文作者和指导教师完全了解东北大学有关保留、使用学位论文的规

3、定：即学校有权保留并向国家有关部门或机构送交论文的复印件和磁盘，允许论文被查阅和借阅。本人同意东北大学可以将学位论文的全部或部分内容编入有关数据库进行检索、交流。作者和导师同意网上交流的时间为作者获得学位后：半年口一年口一年半口学位论文作者签名：赵未铹签字日期：厶力P．多．加两年Es／导师签名：旁童影金签字日期：∥分．否，印．．妇产、一东北大学硕士学位论文摘要实时数据仓库环境中分区技术的研究与应用摘要随着企业对数据的实时性的要求的提高，传统的数据仓库技术已无法满足实时性需求。实时数据仓库技术的出现，为企业或组织提供了实时或近实时的数据信息。由于数据实时性的提高，每天都有海量

4、的数据被保存到计算机中，如何在实时数据仓库环境中高效地管理数据的问题也暴露出来。基于数据库的管理技术实现高效的数据管理是解决这一问题的途径之一。●‘，本文针对实时数据仓库的特点，以提高实时数据仓库的存储和查询效率为目标，研究了分区技术对实时数据仓库中查询效率的贡献，以及对增量数据的分区存储的问题。从传统的数据库模式特点出发，提出了基于分区表的分区模型和系统化建模流程，包括模型建立、模式抽取和数据迁移等，并从理论依据、实验依据、通用性和扩展性等几个角度详细的论证了此分区表的优越性。针对实时数据仓库的特点，提出了改进的水平分区算法和基于服务器端改进算法，并详细论证了此方法对查询

5、效率的提升。在此基础上，设计了以上述分区技术为核心的分区引擎，并且将其应于到国家海洋环境数据仓库的开发过程。实验表明，本文所提出的基于分区表的分区策略以及动态分区算法在数据存储和查询领域具有优越的性能，达到了预期的目标。气关键词：实时数据仓库；数据管理；分区策略；动态分区；数据存储；数据查询一II—V一■●～、东北大学硕士学位论文AbstractResearchandApplicationofPartitionTechniqueinReal—TimeDataWarehouseAbstractWitlltheincreasingofreal—timeprocessingdat

6、arequirementsinenterprises，thetraditionaldatawarehousetechniquehasbeenunabletomeettherequirements．Theappearanceofreal．timedatawarehousetechniqueprovidesreal—timeornearreal-timedatainformationforenterprisesandorganizations．Astheimprovementofreal—timedata,thedailymassofdataisstoredinthecompu

7、ter,SOtheproblemhowtoefficientlymanagethedataindatawarehouseisemerged．Itisoneoftheapproachessolvingtheproblemtoimplementtheefficientdatamanagementbasedondatabasemanagementtechniques．Inthisthesis，forthecharacteristicsofreal-timedatawarehouseandthepurposeimprovi