blueocean海量存储系统高并发客户端的设计与实现

blueocean海量存储系统高并发客户端的设计与实现

ID:32229226

大小:1.52 MB

页数:84页

时间:2019-02-01

blueocean海量存储系统高并发客户端的设计与实现_第1页
blueocean海量存储系统高并发客户端的设计与实现_第2页
blueocean海量存储系统高并发客户端的设计与实现_第3页
blueocean海量存储系统高并发客户端的设计与实现_第4页
blueocean海量存储系统高并发客户端的设计与实现_第5页
资源描述:

《blueocean海量存储系统高并发客户端的设计与实现》由会员上传分享,免费在线阅读,更多相关内容在学术论文-天天文库

1、申请上海交通大学硕士学位论文BlueOcean海量存储系统高并发客户端的设计与实现学校:上海交通大学院系:信息安全工程学院班级:B1003691学号:1100369022硕士生:程煜专业:计算机科学与技术导师:李小勇上海交通大学信息安全工程学院2012年12月万方数据ADissertationSubmittedtoShanghaiJiaoTongUniversityfortheMasterDegreeofEngineeringDESIGNANDIMPLEMENTATIONOFAHIGHLYCONCURRENTCLIENTFORBLUEOCEANMAS

2、SSTORAGESYSTEMAuthor:ChengYuSpecialty:ComputerScienceandTechnologySupervisor:LiXiaoyongSchoolofInformationSecurityEngineeringShanghaiJiaoTongUniversityShanghai,P.R.ChinaDecember2012万方数据万方数据万方数据上海交通大学硕士学位论文摘要BlueOcean海量存储系统高并发客户端的设计与实现摘要随着信息量的飞速增长,如何高效地存储和处理海量数据成为了当今计算机科学面临的挑战。传

3、统的文件系统在存储容量和性能的提升上已遇到瓶颈,分布式海量存储系统是未来存储发展的必然趋势,在此类系统中,良好的客户端设计对于存储系统的总体性能有着重要影响。BlueOcean是基于对象存储技术实现的大规模分布式存储系统,具有性能高,容量大,可靠性强,管理简易等特性。该系统由单一元数据服务器和大量数据存储服务器构成,并通过客户端软件对应用软件提供POSIX访问接口,支持现有的绝大部分应用软件在其上透明运行。本文对海量存储系统的关键技术与实现方案进行了深入的研究,并在此基础上针对BlueOcean存储系统设计并实现了高并发的客户端FuseAgent。本

4、文的主要工作如下:(1)阐述了存储系统的架构演进,通过对典型海量存储系统的研究,分析了此类架构的关键技术。(2)分析了目前客户端实现方案的缺陷,采用事件驱动模型设计了一个通用的高并发客户端。(3)详细描述了高并发客户端中功能模块的具体实现。(4)针对高并发客户端的实现特性,从FUSE框架优化、数据零拷贝、写并行化三个方面对其写操作进行优化。(5)对BlueOcean的高并发客户端进行性能测试。测试表明,对该客户端写性能的优化效果明显;并且随着并发访问文件数的增多,系统总体的数据读写性能,元数据操作性能以及事务操第I页万方数据上海交通大学硕士学位论文摘

5、要作性能均有很显著的提升。本论文的研究成果对于其它的海量存储系统高并发客户端的设计也具有较好的借鉴价值。关键词:海量存储系统,FUSE,事件驱动模型,高并发,性能优化第II页万方数据上海交通大学硕士学位论文ABSTRACTDESIGNANDIMPLEMENTATIONOFAHIGHLYCONCURRENTCLIENTFORBLUEOCEANMASSSTORAGESYSTEMABSTRACTWiththerapidgrowthofinformation,howtoefficientlystoreandprocesslargeamountsofdatah

6、asbecomeahugechallengefacedbytoday'scomputerscience.Thetraditionalfilesystemhasreacheditsbottleneckintheimprovementsofcapacityandperformance.Distributedmassstoragesystemisbecominganinevitabletrendofthefuturestorage.Insuchasystem,agooddesignandimplementationofclienthasanimportan

7、timpactontheoverallperformanceofthestoragesystem.BlueOceanisalarge-scaledistributedstoragesystembasedonobject-orientedstoragetechnology,withtheadvantagesofhighperformance,largecapacity,highreliabilityandeasymanagement.Thesystemconsistsofasinglemetadataserverandseveraldatastorag

8、eservers.ItprovidesPOSIXinterfacesfortheapplicationsof

当前文档最多预览五页,下载文档查看全文

此文档下载收益归作者所有

当前文档最多预览五页,下载文档查看全文
温馨提示:
1. 部分包含数学公式或PPT动画的文件,查看预览时可能会显示错乱或异常,文件下载后无此问题,请放心下载。
2. 本文档由用户上传,版权归属用户,天天文库负责整理代发布。如果您对本文档版权有争议请及时联系客服。
3. 下载前请仔细阅读文档内容,确认文档内容符合您的需求后进行下载,若出现内容与标题不符可向本站投诉处理。
4. 下载文档时可能由于网络波动等原因无法下载或下载错误,付费完成后未能成功下载的用户请联系客服处理。