基于fastdfs云存储系统的研究与设计

《基于fastdfs云存储系统的研究与设计》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、朵击种泼Ａ葦ＵＮＲＳＩＴＹＯＦＥＬＥＣＴＲＯＮＩＣＳＣＩｉＮＣＥＡＮＤＴＥＣＨＮＯＬＯＧＹＯＦＣＨＩＮＡＩＶ巨专业学位硕±学位论文ＭＡＳＴＥＲＴＨＥＳＩＳＦＯＲＰＲＯＦＥＳＳＩＯＮＡＬＤＥＧＲＥＥ论支题目基于Ｆａ．ｓｔＤＦＳ云存储系统的妍究与设计，？专业学位类别工程硕±学号２０１３２２０６０５２７作者姓名刘俊强指导教师符红光教授？■。＇■？－？．－＇独剑性声明本人声明所呈义的学位论义是本人化导师指巧下进行的研究Ｘ作及取得的研究

2、成果。据我所知，除了文中特别加臥标注和致谢的地方夕ｈ，也不包含为，论文中不包含其他人Ｂ经发表或撰巧过的研究成果获得电子科技大学或其它教育机构的学位或证书而使用过的材料。与一｜，我同工作的同志对本研究所做的任何贡献均在论文１作了明确的说明并表巧谢意。２。＾年２作者签名：別你蘇日期：ｔ月了日论文使用授权本学位论文作者完全了解电子科技大学有关保留、使用学位论文的规定，，巧权保留并向図家有关部ｎ或机构送交论文的复印件和磁盘允许论文被查阅和借阅。本人授权电子科技大学可将学位论文的全部或部分内容编入有关数据库进行检索，可Ｗ采用

3、影印、缩印或扫描段保存。、汇学位论文等复制手编）定（保密后应遵守此规的学位论文在解密：估作者签：导师签名尤名幸＃、絲句。：主ｔ７／年月日日期＾分类号密级注1UDC学位论文基于FastDFS云存储系统的研究与设计（题名和副题名）刘俊强（作者姓名）指导教师符红光教授电子科技大学成都（姓名、职称、单位名称）申请学位级别硕士专业学位类别工程硕士工程领域名称计算机技术提交论文日期2016.3.28论文答辩日期2016.5.16学位授予单位和日期电子科技大学2016年6月答辩委员会主席评阅人注1：注明《国际十进分类法UDC》的类号。Researc

4、handDesignofTheCloudStorageSystemThatBasedonFastdfsAMasterThesisSubmittedtoUniversityofElectronicScienceandTechnologyofChinaMajor:MasterofEngineeringAuthor:JunqiangLiuSupervisor:Prof.HongguangFuSchool:SchoolofComputerScience&Engineering摘要摘要随着信息技术的飞速发展，大量的数据需要进行存储，为了解决这种问题，企业往往需要购买

5、大量的存储设备，这不但需要很高的成本，而且大量的数据管理困难，不易维护，这种方式暴露出种种的弊端。云存储作为一种随着云计算而发展出来的一种技术，其关注的重心恰恰是海量数据的存储和管理，同时因为具备弹性扩展、方便海量数据管理以及低成本等特点，被认为是未来数据存储的较好选择。它使用了分布式文件系统和集群等多种技术，将分散在网络中的类型各异的存储设备整合在一起，作为一个整体提供数据的存储和接入访问。而对于用户来说，使用云存储随时随地都可以通过网络访问云上的资源。FastDFS是一款由国人研发并且开放源码的分布式文件系统，在类UNIX系统上能很好的工作。对比其他的

6、分布式文件系统，它的优势是量级较轻，满足高并发访问的需求，容易扩展，具备负载均衡功能，并且能自动进行文件同步。另外对小文件的存储性能较好。本文在教研室现有的云平台基础之上，探索一种以FastDFS为基础的云存储方式。本文首先对FastDFS的系统架构、运行以及同步机制进行了研究。其次从功能和性能两个方面对系统展开需求分析。在借鉴云存储的典型架构模型的基础之上，设计了基于FastDFS的云存储系统的总体架构。自顶向下分别是用户访问层、应用接口层、管理层以及数据存储层。然后依据需求分析以及总体架构对系统的各个层次进行了详细的设计与实现，在用户访问层，采用B/S

7、模式，结合Bootstrap开源框架设计了用户界面。在应用接口层，对用户访问时的负载均衡进行了研究，并设计了RESTAPI接口。在管理层实现需求分析中提出的功能需求，如普通用户对文件上传、下载、删除以及文件夹的各种操作，系统管理员对于用户的管理和集群的监控等。同时，研究了FastDFS原有的集群监控原理，增加了对CPU、内存使用、磁盘读写以及网络I/O的监控；研究了FastDFS调度算法，分析其存在的缺陷和不足，并提出了动态负载均衡算法。在管理层和存储集群之间，使用epoll和线程池的方式设计了接口服务器，能够及时响应大量的并发请求，满足系统对性能的要求，

8、并且重新定义了FastDFSAPI接口，将其封装到线程池的任务处理