分布式数据存储关键技术研究

《分布式数据存储关键技术研究》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、＇Ｖ苗＞，＇式．－．护．其＞．．．甸；＇＇．．舊．－篆女＂．，写：、ｒ、ｉ扛．ｖ／－．Ｔ；Ｐ难．‘．／＝ｖ梦－．．．．．，ｖ－＇ｆ，密、斋Ｊ；圓．聲＼．？一‘寒＇－ｖ，；－＾；！ｎ．．．．達两＾；＾片，－＾．Ｖ弁Ｍ著＇，卿．安；，／．．．．考班營．您＾女：气．－「Ｖ．雨；．、．．．．．‘ｉ．禹義片，１＞禱＞．＊為壤装．ｎ７＇．一－省八．．－ｆ，ｗ纏：；；一矜＇拴＞一／ｔ题论与；飾＾剛獻夢诗—Ｖ；心＇－；学号１Ｗ在．’．績姓名张一ｖ；ｒ．．．ｆ＇导师周／

2、＜．１義１：，．专雖别巧謝＇解為許．Ｊ手装；职‘类型在－．Ａ．營．．专业鄉１巧Ｉ施呈．．‘’，：．’ｉ尸论施較期南＇：：＞．’．Ｎ＇葵：／‘．Ｕ’ｋ；＾：＼，，‘１，－ｖ－義－‘＇津｛ｒ．＂Ｊ．；浦．ｒ；：片＇．；．‘。—－＂立／基義ｉ／：房Ｍ蘇．ｒ：轉＇－ｉ讀．專｜。龜龜—南京邮电大学学位论文原创性声明本人声明所呈交的学位论文是我个人在导师指导下进行的研巧工作及取经得的研巧成果＝尽我所知，除了文中特别加臥标注和致谢的

3、地方外，论文中不包含其他人已发表或撰写过的研究成果，也不包含为获得南京邮电大学或其它教育机构的学位或证书而使用过的材料。一与我同工作的同志对本研究所做的任何贡献均己在论文中作了明确的说明并表示了谢意．－－本人学位论文及涉及相关资料若有不实，愿意承担切相关的法律责任。句病研究生签名：球日期：別心４南京邮电大学学位论文使用授权声明本人授权南京邮电大学可保留并向国家有关部口或机构送交论文的复印件和电子文可档；允许论文被查阅和借阅；可ＬＪＪＩ将学位论文的全部或部分内容编入有关数据库进行检索；Ｗ采用影印

4、、缩印或扫描等复制手段保存、汇编本学位论文。本文电子文档的内容和纸质一论文的内容相致。论文的公布（包括刊登）授权南京邮电大学研究生院办理。涉密学位论文在解密后适用本授权书。．端导山研巧生签名；禾师答名日期；TheStudyontheKeyTechnologyofdistributedDataStorageThesisSubmittedtoNanjingUniversityofPostsandTelecommunicationsfortheDegreeofMasterofEngineeringManagemen

5、tByYongfuZhangSupervisor:Prof.LiangZhou南京邮电大学工程硕士研究生学位论文摘要摘要近些年来，随着Internet的高速发展，互联网产生的数据以指数方式增长，高速的数据增长速度和海量的数据对存储系统提出了非常苛刻的要求。例如，存储能力的增长速度远远赶不上数据的增长速度，而存储设备的性能往往与其存储容量的大小成反比。就目前现存的分布式存储系统来看，或多或少都存在一些缺点与不足，不能有效满足大数据时代数据的存储需求。一些分布式存储系统性能较高，但造价昂贵，现阶段不可能大规模使用（如存储域网络S

6、AN），一些分布式存储系统性能优良且价格低廉，但只适合搭建在局域网中（如集群文件系统），一些分布式存储系统可以在广域网环境中搭建，但没有认真考虑系统中数据的存储位置、副本个数、资源查找算法等，造成系统的性能低下（如分布式文件系统Coda）。就目前来看，随着社交网络、传感器等各种新技术的涌现和大规模应用，各种类型的数据迅速增长。如何对这些增长的数据进行存储、如何对数据资源进行迅速定位、如何在可接受的时间范围内对数据进行分析，发掘数据中含有的重大价值，是数据存储系统必须要考虑解决的问题。在这种情况下，设计合理的分布式存储系统来解

7、决海量数据对当前存储方式所带来的挑战成为大数据时代存储系统的关键。本论文的主要研究工作包括以下三个方面：1、查阅相关资料，对当前环境下数据的存储方式做了解比较，掌握其不足之处。2针对目前分布式存储系统的不足，以发展相对比较成熟的P2P技术作为存储结构体系，对数据冗余容错技术、副本管理机制、资源的搜索算法做了详细的探索与研究。3、搭建分布式存储系统，对所提出的技术和机制进行验证，通过分析实验数据，指出相关技术机制的优点和不足。论文的主要贡献是，对分布式存储的关键技术进行了深度的探索与研究，并基于分布式存储的关键技术的支持，搭建

8、实验环境，有效验证了相关技术的正确性及分布式存储系统应对海量数据所带来的挑战的可行性。关键词：大数据；P2P；分布式存储；数据冗余；副本管理；资源搜索算法Ⅰ南京邮电大学工程硕士研究生学位论文AbstractAbstractInrecentyears,withthehigh-speeddev