云存储日志结构文件系统中段回收机制的研究-论文.pdf

《云存储日志结构文件系统中段回收机制的研究-论文.pdf》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、Vo1．42No7计算机与数字工程总第297期1210Computer&DigitalEngineering2014年第7期云存储日志结构文件系统中段回收机制的研究侯浩讽刘钊远(西安邮电大学计算机学院西安710061)摘要针对云存储文件系统中，复杂的检索和回收过程导致系统处理用户数据的能力下降问题，基于日志结构分布式文件系统(HDFS-basedLog-structuredFileSystem，HLFS)，提出一种针对系统资源进行有效回收管理来提高云存储空间有效利用率的方法，通过位图标记的方式找到HLFS中段资源的使用情况，实现对HLFS中段资源的管理回收

2、。实验结果表明，位图标记应用于云存储系统中资源管理之后，能够改善垃圾回收的效率。关键词垃圾回收；基于日志结构分布式文件系统；位图描述；云存储中图分类号TP311．5DoI：10．3969／j．issn1672—9722．2014．07．024GarbageCollectionMechanismintheFieldofLogStructure’SCloudStorageHOUHaofengLIUZhaoyuan(SchoolofComputerSystemandStructure，Xi’anUniversityofPosts&Telecommunicatio

3、ns。Xi’an710061)AbstractInordertoimprovetheefficiencyofthesystemtodealwiththedataofcustomsduringthecomplicatedindexandcollectionprocess，onemethodisproposedtoenhancethestoragemanagementofcloudstorageforrecyclingthesystemresource．Agarbagecollectionmethodbasedonthebitmapdescribesthese

4、gmentresourceconditioninHLFS，andrealizesthecollectionofsegmentinHLFS．Theexperimentofbitmapusedinthecloudstoragesystemwillhelpimproetheefficiencyofcollectingthegarbage．KeyWordsgarbagecollection，HLFS，bitmap，cloudstorageCI擞NlmerTP311．5致存储资源快速耗尽。为了避免用户追加冗余数1引言据导致存储空间资源消耗过快的问题，通过对存储随着全

5、球信息数据的日益膨胀，传统的存储系空间中不使用的多余数据尽快删除，以期达到对已统在容量和性能上已经不能满足人们对PB级数用存储空间的高效利用。Hadoop是一个分布式系据的存储需求。云存储就是通过集群应用、网络技统基础架构，是能够对大量数据进行分布式处理的术或者分布式文件系统等功能，将网络中众多的存软件框架。在Hadoop分布式文件系统(Hadoop储设备通过应用软件集合起来协同工作，共同对外DistributedFileSystem，HDFS)之上搭建的日志提供数据存储和业务访问功能的一个系统。为了结构云存储平台(HDFS-basedLog-struct

6、uredFile满足各种存储设备的协同工作，需要建立一个特定System，HLFS)就是利用了日志式文件系统的特的文件系统。搭建在云存储之上的文件系统的性性，采用段结构对数据进行管理。能对于存储效率起着至关重要的作用。为了云存储日志结构文件系统能够高效地对对面向云存储的文件系统来说，数据的添加、空间资源进行管理，需要考虑资源的回收方式。在删除和管理至关重要。在日志结构的文件系统中，资源回收的时候，将以后不用的资源当垃圾一样进数据的存储以追加的形式存放在存储空间中，会导行回收释放所采用的方式叫做垃圾回收。为此对收稿日期：2014年1月5日，修回日期：2014

7、年2月23日作者简介：侯浩’讽，男，硕士研究生，研究方向：计算机系统结构。刘钊远，男，教授，硕士生导师，研究方向：嵌入式。2014年第7期计算机与数字工程垃圾回收机制进行相应的研究和讨论。论文旨在复、数据快照、回滚等特性，所以将其作为云存储测设计一种适合云存储日志结构分布式文件系统的试平台，提供虚拟磁盘后台存储服务。HLFS的系回收机制。统架构如图1所示，给出了日志结构与HDFS的关系。HLFS通过段管理多个HDFS，使得用户的读2云存储日志结构文件系统写操作能够更加的快速，并且由于段所特有的日志2．1云存储分布式文件系统结构能够使得数据恢复到任意时刻L3

8、]。云存储是一个基于网络模型的商业级存储系统，它所存储的数据是存放