云环境下io密集型应用存储效率研究

《云环境下io密集型应用存储效率研究》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、■ｉ气■－学校代巧：１０２５９学号：１３６０９１２巧巧巧：公开上海应用技术大学硕±学位论文题目；云环境下Ｉ／Ｏ密集巧欣用巧储斌蜜研裔英文题目：民ｅｓｅａｒｒａ油ｏｎＳｔｏｇｅＥ節ｃｉｅｎｃｖｏｆＩ／０－ＩｎｔｅｎｓｉｖｅＡｐｐｌｉｃａｔｉｏｎＢａｓｅｄｏｎＣｌｏｕｄＣｏｍｐｕｔｉｎｇＥｎｖｉｒｏｎｍｅｎｔ专业：机械由子下精学院；计算机科学与信烏下浩挙院研巧方向：云计算环境下存储效率研巧姓名：孟驰Ｉ指导教师；周兰凤副教榜．２０１

2、６年４月１０日：１０２５９学号：１３６０９１２２７密＆：公开上海应用技术大学硕±学位论文题目／Ｏ密集型应用存储效率研究：云环境下Ｉ－英文题目ＩＯＩｎｔｅｎｓｖｅ：ＲｅｓｅａｒｃｈｏｎＳｔｏｒａｇｅＥｆｉｃｉｅｎｃｙｏｆ／ｉＡｐｐｌｉｃａｔｉｏｎＢａｓｅｄｏｎＣｌｏｕｄＣｏｍｐｕｔｉｎｇＥｎｖｉｒｏｎｍｅｎｔ专业：机械由子工提学院：计算机科挙与信息工砖学院研究方向：云计算环境下存储效率研究姓名；孟驰指导教师：周兰凤副教授２０１６年４月１０日学

3、位论文版权使用授权书本学位论文作者完全了解学校有关保留、使用学位论文的规定，同意学位论文保留并向国家有关部口或机构送交论文的复印件和电子版。允许论文被查阅和借阅。本人授权上海应用技术学院可将本学位论文的全部内容或部分内容编入有关数据库进行检索，可Ｗ采用影印、缩印或扫描等复制手段保存和汇编本学位论文。保密年□本学位论＾文属于不保密因（必须在相应处打Ｖ，否则按不保密处理）学位论文作者签名指导教师签名：年＾月１弓曰１（〇年Ｉ巧毛日学位论文作者声明：本人郑重声明所呈交的学位论文，是本人在导师的指

4、导下独，立进行研究工作所取得的成果。除文中己注明引用的内容外，本论文不包含任何其他个人或集体已经公开发表或撰写过的作品成果。对本文的研究做出重要贡献的个人和集体，均已在文中明确方式标明。本声明的法律责任由本人承担。学位论文作者签名：年月度曰兴／（＾上海应用技术大学硕±学位论文第Ｉ页是环境下Ｉ／Ｏ密集型应用存储效率研究摘要云计算技术的发展为大数据的处理和分析提供了计算资源和存储空间的解决方案，Ｗ互联网思维进行商业活动为主要方式的电子商务的蓬勃发展，车联网技术的出现，社交网络和自媒体用户迅速增化使得诸如用

5、户浏览记录文件、商品属性文件、音视频文件和图像等数据的Ｗ居高不下的势头增长，为了提高对存储规模的适应性，云计算存储设备规模随之不断扩张。对于规模庞大的海量数据文件的传输、处理Ｗ及结果文件的处理成为云计算一和大数据研发人员日益关注的问题。方面云计算处理的对象是颇具规模的海量数据集，一数据传输至云服务器的速率对Ｉ／Ｏ密集型应用云计算任务的速度有影响，；另方面处理结果文件的存储和提取访问间接地对Ｉ／Ｏ密集型应用的响应速度产生了影响，。因此本文对如何在云计算环境下设计海量文件的传输优化方式和文件优化存储策略进行研究工作，对于提高／

6、ＯＩ密集型云计算任务的响应速度和存取效率，有利于数据存储的低消耗。本文Ｗ海量数据文件存储管理理论为基础，Ｗ现有的开源云计算平台为研究平台，研究云计算环境下Ｉ／Ｏ密集型应用的存储效率，借助ＣｌｏｕｄＳｔａ浊开源云平台进行策略的测试和调整。本文具体做了＞＾１下的研巧工作。１）将Ｉ／Ｏ密集型云计算应用任务提交至云服务器传输海量数据文件的过程中，根据传输文件特点在发送文件前对文件进行打包操作降低，Ｉ／Ｏ操作密集度释放发送端和接收端占用过多的Ｉ／Ｏ资源：提出基于客户端物理机的参数配置和云平台网络带宽优化打包阔值模型，Ｗ此提窩传输速

7、率。将待传输的文件无损打包成该闽值误差范围大小后姐斤传输。相比较其他参数大小，优化了上传数据的效率。巧将并行处理方法引入传输处理过程即并行传输，借助并行处理时间的重叠特性，在一发送端对待传输的海量数据文件进行分批次按照阔值打包和传输，同时刻在接收端对接收到的前向批次文件通过传输日志进行验证和相应的解包操作，并行传输处理方法较串行传输处理方法而言节省了额外的节省操作消耗的时间，对于海量数据集这种时间节省是相合可观的。３）进行大量实验，将本文提出的策略与传统的方案进行对比，实验结果证明，本文提出的策略具有效率上的提升，，降

8、低文件传输过程中消耗的时间提高数据的存取性能进而对１／０密集型应用的响应速度有所提升。关键词：云计算