基于hadoop的数字图书馆构建研究

《基于hadoop的数字图书馆构建研究》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、代号10701学号0925421963分类号TP393密级公开题（中、英文）目基于Hadoop的数字图书馆构建研究ResearchofDigitalLibraryArchitectureBasedonHadoop作者姓名刘学胜指导教师姓名、职称学科门类管理学学科、专业王亚民教授情报学提交论文日期二〇一二年一月基于Hadoop的数字图书馆构建研究西安电子科技大学学位论文独创性（或创新性）声明秉承学校严谨的学风和优良的科学道德，本人声明所呈交的论文是我个人在导师指导下进行的研究工作及取得的研究成果。尽我所知，除了文中特别加以标注和致谢中

2、所罗列的内容以外，论文中不包含其他人已经发表或撰写过的研究成果；也不包含为获得西安电子科技大学或其它教育机构的学位或证书而使用过的材料。与我一同工作的同志对本研究所做的任何贡献均已在论文中做了明确的说明并表示了谢意。申请学位论文与资料若有不实之处，本人承担一切的法律责任。本人签名：日期西安电子科技大学关于论文使用授权的说明本人完全了解西安电子科技大学有关保留和使用学位论文的规定，即：研究生在校攻读学位期间论文工作的知识产权单位属西安电子科技大学。学校有权保留送交论文的复印件，允许查阅和借阅论文；学校可以公布论文的全部或部分内容，可以允许采用影印、缩印或其

3、它复制手段保存论文。同时本人保证，毕业后结合学位论文研究课题再攥写的文章一律署名单位为西安电子科技大学。(保密的论文在解密后遵守此规定)本人签名：导师签名：日期日期摘要摘要数字图书馆的出现给人们生活带来了极大的改善，它将图书信息进行数字化存储于计算机中，通过计算机网络进行传播，使得图书信息资源共享，这在人们的各个生活领域都起到了非常重要的作用。经过十年左右，数字图书馆的建设工作取得了一定的成就，在一定程度上满足了人们个性化、知识化的文献信息需求，它使得信息存储空间大大缩小、信息检索更加方便，达到了信息远程传播、信息共享的目的。随着计算机网络、互联网、信息

4、数字化、信息存储技术的快速发展，信息资源与日俱增，越来越多的信息被存储下来，然而随着数字图书信息的剧增，数字图书馆在存储、检索、安全、系统维护等方面出现了一系列问题，这导致了数字图书馆的发展出现了瓶颈。本文分析了数字图书馆出现的一些问题，对云计算体系架构进行了深入的研究，提出了一种基于Hadoop的数字图书馆的构建思想。Hadoop是云计算的开源实现框架，Google公司提出了GFS和Mapreduce编程思想，这极大的改善了Google公司处理海量数据信息。针对Google公司的GFS和Mapreduce，Apache开源组织开发了一个分布式计算开源框架

5、——Hadoop，本质上是Google公司Mapreduce的Java实现，它让程序自动分布到一个由普通机器组成的超大集群上并发执行。本文对Hadoop体系结构进行了深入的研究，分析了Hadoop的实现机制。在此基础上，设计了基于Hadoop的数字图书馆系统，并对其中的一些主要功能模块进行了实现，在本文的最后详细介绍了Hadoop的实验环境构建，并对Hadoop处理大规模数据进行了分析。关键字:云计算数字图书馆Hadoop分布式文件系统分布式计算AbstratctAbstractTheappearanceofdigitallibrarybrings

6、peoplewithgreatimprovement,anditstoresbooksinformationinthecomputerdigitallyandcommunicatesthroughthecomputernetwork,makingbooksinformationresourcesharing,whichhasplayedaveryimportantroleineachfieldofpeople’slife.Inthepastdecade,theconstructionworkofthedigitallibraryhasgottensomea

7、chievements,andtoacertainextentithasmeetpeople’sneedsforpersonalizedandmoreknowledgeableliteratureinformation,anditmakesinformationstoragespaceconsiderablyreduced,informationretrievalmoreconvenient,theremotetransmissionofinformationreachedandthepurposeofinformationsharingachieved.

8、Withtherapiddevelopmentofthecompu