云存储中开放网络资源稳定存储机制的-研究与实现

《云存储中开放网络资源稳定存储机制的-研究与实现》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、华中科技大学硕士学位论文1绪论本章首先简述课题研究的意义和国内外研究现状，然后说明本课题的来源背景和研究内容，最后介绍文章的框架结构。1.1课题的研究意义随着因特网的迅速发展，网上各种资源的数据量也在急剧膨胀，多媒体数据的增多更使网上资源的数据量成指数级别增长，这些都导致了更大的网络存储服务的需求。网络存储是IT发展中重要而且宝贵的资源，企业和网络运营商们也拿越来越多的资金和精力投入到网络存储的开发中，因此可以说因特网的发展带动了网络存储的发展。据预测，随着多媒体应用的快速发展，网络上数据的存储量会越来越多

2、。多媒体数据被誉为硬盘杀手，这将最终会导致网络存储量的进一步快速增长。网络[1]存储技术在网络建设中所占的地位越来越重要了。只有解决好网络存储中存在的问题，才能为网络中数量巨大的数据资源提供良好的技术支持。存储是任何一个企业所需求的，现在中小企业和大企业一样，面临着企业持续发展带来的企业容量方面的压力，都希望能在减少成本的情况下，解决这不断增长的压力。随着网络带宽的增加和计算机能力的增强，在传统的客户机服务器模式中被忽视的客户机成为一种宝贵的资源。被誉为软件帝国的微软公司对4800多台个人计算机，约1056

3、8个文件系统，共计接近10.5TB的数据进行了跟踪试验，分析并总结了这些机器的使用情况。根据实验结果分析表明，个人计算机平均只有50%的存储资[1]源得到了利用，大量的存储空间处于空闲状态。现有的分布式存储系统大部分都自己提供存储设备，需要自己购买和维护存储设备，运营维护成本高。其原因在于没有合理的整合利用网络上闲散的资源来提供存储服务。网络上的可用存储资源越来越多，很多都没有得到充分合理的利用，如何聚集闲散的资源，为用户提供持久可靠的存储服务，将具有非常重要的意义。譬如，随着因特网的普及应用，电子邮件已经

4、成为一种非常重要的通讯交流工具，每时每刻在互联网上流动的电子邮件也是数以亿计。目前，越来越多的人已经拥有了自己的电子邮箱且相当一部分人拥有多个邮箱，而且电子邮箱容量也越来越大。但是，人们除了能够使用邮箱进行简单的收发邮件外，并没有充分利用邮箱的存储空间，很少利用其存储空间提供存储服务，也没有充分地发掘和利用邮箱的其它功能。据统计，每个邮箱账号大概有80%的空1华中科技大学硕士学位论文间没有得到合理的利用，假设每个邮箱账号拥有5GB的存储空间，调研机构comScore日前公布的调查结果显示，全球网民数量已突破

5、二十亿，如果把这些邮箱整合在一起，将得到高达5000PB的存储空间，这将是一个非常可观的存储空间，所以如何利[2]用邮箱的空闲存储空间提供网络存储服务，具有非常重要的意义。这仅仅是冰山一角，网络上的可用存储资源除了邮件存储服务器外，还有很多，譬如文件传输协议服务器、网盘、个人计算机等，如何整合这些开放的存储服务，为用户提供统一的视图，建立统一的接口，从而提供可靠稳定的存储服务，同样具有重要而深远的意义。网络存储技术是因特网发展的新趋势，对当今网络有强大的影响力，可大幅度降低成本、提高效率，同时又可提供高可靠

6、性的数据管理或备份。网络存储应用可以说从网络信息技术诞生的那天就已经开始，应用领域也随着信息技术的发展而不断增加。1.2国内外研究现状清华大学高性能计算技术研究所网络存储实验室是目前国内较早开展海量信息管理及存储技术研究的课题组。该实验室的研究内容主要包括：海量信息的多层存储体系结构、存储智能管理技术、存储容灾技术、存储高可用技术、海量信息的快速I/O技术、分布式信息服务技术、面向互联网服务、存储安全技术的海量信息存储技术等。目前，该所研制出具有兼容多种磁盘、高可扩展性的“高可扩展的海量存储网络系统”，实现

7、分布式多路远程镜像、虚拟化存储系统、备份和快照等系统以及[3]具有智能的统一存储管理软件，并在自主智能网络存储方面进行了深入的研究。北京大学相关研究机构目前正在研究网络存储以及P2P的相关内容，对基于异步消息中间件和结构化的对等结构进行了深入研究，目前已在全国各地部署了十几台服务器，面向全国提供课程点播以及文件存储服务，这个平台具备服务器的一定[3]性能监测等能力。随着近几年网络技术的发展，围绕数字化、网络化开展的各种处理业务的不断增加，如电子商务，微博等互联网应用无时无刻不在产生大量数据。互联网上每年产生

8、的数据在不断增加，网络信息量不断爆炸增长，截止目前为止，世界上还没有发明任何一种存储服务器或者存储服务器集群能够存储高达PB级的数据或者对其[4]上存储的数据进行处理。虽然新的中央处理器和存储器的出现不断提高处理速度和2华中科技大学硕士学位论文增大存储容量，但处理和存储增长如此之快的海量数据还是有些力不从心。况且海量数据集中存储在少数的计算中心，使得网络服务器的处理器和存储器在超负荷的工作，大量终端设备的存储和处