云计算环境下基于用户体验的成本最优存储策略研究.pdf

《云计算环境下基于用户体验的成本最优存储策略研究.pdf》由会员上传分享，免费在线阅读，更多相关内容在应用文档-天天文库。

1、第1期电子学报vo1．42No．12014年1月ACTAELECTR0NICASINICAJan．2014云计算环境下基于用户体验的成本最优存储策略研究王宁，一，杨扬，孟坤。，陈宇，王磊，季青(1．北京科技大学计算机与通信工程学院，北京100083；2．烟台工程职业技术学院机电工程系，山东烟台264006；3．清华大学计算机科学与技术系，北京100084)摘要：为了提高大数据文件的存取效率，满足各类用户的需求，通常采用对该文件进行分块、冗余副本等机制进行存储，关于设置块大小、副本个数和块部署等存储机制的研究一直是该领域研究重点．根据用户对内容块兴趣需求，我们定义了数据块的热

2、度并提出了一种满足用户需求的存储数据块的最小服务成本策略(MCSB)．在成本矩阵的基础上，通过引入与数据块热度相关的成本矩阵调整因子，使得热度较低的数据块被优先部署，实现了在不改变存储数据块的最小服务总成本的情况下，内容存取服务性能的提高．基于该策略，以Hadoop中的缺省数据块存储策略为控制组，通过在HDFS系统中实现MCSB，并对MCSB进行了较为详细的分析．实验结果显示MCSB策略能够在满足最小服务成本的情况下，具有更短的系统平均响应时间．进一步考虑到数据存储节点由服务器集群承担的事实，对基于不同负载下的数据存储策略进行了深入探讨，在分析现有机制对性能影响的基础上，给

3、出了一种自适应的数据节点内的存储数据块的最小服务成本策略AMCSB，实验表明，本文所提出的AMCSB策略能够在降低服务成本的同时，有利于系统的负载均衡，并提高该系统的服务性能．关键词：云存储；数据块；MCSB；AMCSB；大数据中图分类号：TP393文献标识码：A文章编号：0372—2112(2014)01．0020．08电子学报URL：http：／／www．ejourna1．org．caDOI：10．3969／j．issn．0372—2112．2014．01．004ACustomerExperience—BasedCostMinimizationStrategyofSto

4、ringDatainCloudComputingWANGNing1YANGYang1MENGKun3，，，CHENYu，WANGLei，JIQing(1．SchoolofComputerandCommunicationEngineering，UniversityofScienceandTechnologyBeijing，~ijing100083，Ch／na；2．DepartmentofMechanicalandElectricalEngineering，Yantaigngineeri~&TechnologyCollege，Yantai，Shandong264006，Chin

5、a；3．DepartmentofComputerScienceandTechnology，TsinghuaUniversity，Beijing100084，China)Abstract：SplittingawholelargefileintosomesmallblocksanddistributedlydeployingtheseblockreplicationsonseversCanimprovetheirapplicalioneficiencyandmeetusersdemands．Howtosplitafile，howmanyre#cationsofablocksho

6、uldbecreated，andhowtodeploythesereplicationsbecomethemostcriticalissuresinthisfield．Inthispaper，consideringcfiemSdemandsforeachblock，weintroduceblock-popularityandpresentablockdeploymentstrategyaccordingtoit，calledminimunlcostofstor—ingblocks(MCSB)，whichCan~afisfyusersrequirementandminilnu

7、nlstoragecost．Inourstrategy，throughintroducingcostad—justmentfactorsofblocks，notonlythatlowerhotblocksareassuredtodeployearlier，butalsothepracticaltotalstoragecostarenotexceedthantheoriginalcase．Tomaintaintheperformanceofservicesystem，westudyresourcemanagement