基于多策略的流数据查询优化方法研究

《基于多策略的流数据查询优化方法研究》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、万方数据论文题目：基于多策略的流数据查询优化方法研究作者姓名：箧苤至专业名称：盐篡狃廛厦堇苤指导教师：莹夔这论文提交日期：论文答辩日期：授予学位日期：入学时间：垄Q曼至生窆且研究方向：坌查耋丝堡量羞复盐簋职称：塾拯万方数据ARESEARCHOFSTREAMINGDATAQUERYOPTIMIZATIONMETHODBASEDON．．．．．MULTI—STRAT唧㈣鞘DissertationsubmittedinfulfillmentoftherequirementsofthedegreeofMLASTERoFPⅢLoSoPHYfromShandong

2、UniversityofScienceandTechnologybyHouRongjanSupervisor：ProfessorHanYanboCollegeofInformationScienceandEngineeringMay2014万方数据声明本人呈交给山东科技大学的这篇硕士学位论文，除了所列参考文献和世所公认的文献外，全部是本人在导师指导下的研究成果。该论文资料尚没有呈交于其它任何学术机关作鉴定。硕士生签名：日AFFIRMLATIoN俣搡翠沙7倬钾fo曰Ideclarethatthisdissertation，submittedinfulf

3、illmentoftherequirementsfortheawardofMasterofPhilosophyinShandongUniversityofScienceandTechnology,iswhoHymyownworkunlessreferencedofacknowledge．Thedocumenthasnotbeensubmittedforquafificationatanyotheracademicinstitute．Signature：Date：p惮6、p，。●，’y‘万方数据山东科技大学硕士学位论文摘要随着信息技术的发展，物联网越来

4、越多的应用到像智能交通、智能家居、智能医疗等的智能应用行业中，以传感设备为基础的各类流式数据的实时接收和处理成为物联网智能应用的关键。在智能交通应用中，实时采集的交通信息要进行有效的存储，为交通信息服务、交通计算、交通管理等提供数据支持。面对大规模的、快速、实时、连续不问断到达的流数据，如何实现大规模流式数据的存储以及提供高效的数据查询方法成为智能交通应用中不可避免的问题。针对这一问题，提出一种适用于物联网数据管理的结构化数据查询优化方法，在保障流数据存储的同时提供高效的数据查询能力。该方法采用数据库集群技术搭建主从数据库环境；采用数据分区技术创建分

5、区表用于数据存储，实时接收的流数据连续不断的写入主数据库；采用主从延迟复制策略通过定时增量复制技术将数据异步复制到从数据库集群，为大规模历史数据的查询提供数据支持；采用数据缓存技术应对重复查询时的性能需求。该方法采用的数据库集群技术在应对数据并发访问的同时减少数据查询对数据写入的性能影响，采用数据分区和数据缓存技术提升单数据节点的查询性能。实验结果表明，该方法能～定程度上减少数据查询对数据写入的影响，提高海量数据的查询效率。关键字：流数据；实时写入；数据查询；数据库集群；主从延迟复制；数据分区；数据缓存；万方数据山东科垫奎堂堡主兰垡笙奎垫薹-____

6、______●-____-I●_______-_________l__●___-I_______________-_I__________________________-----_。I-__-_。II-’’’———————————一一ABSTRACTWiththedevelopmentofinformationtechnology，thingsmoreandmoreappliestointelligentapplicationindustrieslikeintelligenttransportation，smarthome，intelligentm

7、edical，real．timereceivingandprocessingvarioustypesofstreamingdatabasedonsensingdevicesbecomesthecriticalofintelligentapplications．Intheintelligenttransportationapplications，thetrafficinformationwhichcollectedreal．timeshouldbestoredeffectiveandprovidesdatasupportforthetrafficinf

8、ormationservice，trafficcalculationsandtrafficmanagemen