基于hadoop架构的分布式图像检索技术研究

《基于hadoop架构的分布式图像检索技术研究》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、分类号学号M201172514学校代码10487密级硕士学位论文基于Hadoop架构的分布式图像检索技术研究学位申请人：张玉清学科专业：计算机应用技术指导教师：邹复好副教授答辩日期：2014年1月16日万方数据AThesisSubmittedinPartialFulfillmentoftheRequirementsfortheDegreeoftheMasterofEngineeringDistributedImageRetrievalTechnologyBasedOnHadoopCandidate:Zh

2、angYuqingMajor:ComputerApplicationTechnologySupervisor:AssociateProf.ZouFuhaoHuazhongUniversityofScience&TechnologyWuhan430074,P.R.ChinaJanuary,2014万方数据独创性声明本人声明所呈交的学位论文是我个人在导师指导下进行的研究工作及取得的研究成果。尽我所知，除文中已经标明引用的内容外，本论文不包含任何其他个人或集体已经发表或撰写过的研究成果。对本文的研究做出贡献的

3、个人和集体，均已在文中以明确方式标明。本人完全意识到本声明的法律结果由本人承担。学位论文作者签名：日期：年月日学位论文版权使用授权书本学位论文作者完全了解学校有关保留、使用学位论文的规定，即：学校有权保留并向国家有关部门或机构送交论文的复印件和电子版，允许论文被查阅和借阅。本人授权华中科技大学可以将本学位论文的全部或部分内容编入有关数据库进行检索，可以采用影印、缩印或扫描等复制手段保存和汇编本学位论文。保密□，在年解密后适用本授权书。本论文属于不保密□。（请在以上方框内打“√”）学位论文作者签名：指导教

4、师签名：日期：年月日日期：年月万方数据华中科技大学硕士学位论文摘要网络世界的迅猛发展大家已经有目共睹了，网络的普及度也越来越大，访问网络搜索信息的人群与日俱增，网络上的各类媒体作品数量更是快速递增。诞生的海量媒体数据给我们带来了资源的丰富性，但同时也给我们带来了许多新的亟待解决的问题，例如数据检索、资源获取等。其中，进行数据检索是信息化社会中进行信息共享的一个难点，尤其是在图像媒体的检索领域中，面对数量大，内容杂，更新快的图像数据，如何获取想要的图像资源成为了一个焦点问题。通过对图像检索的方法进行了研究

5、和分析，结合Lucene索引在检索方面以及Hadoop框架在分布式处理方面存在的巨大优势，多结点并行工作的架构需求的满足主要依靠Hadoop框架来支撑，设计了基于Hadoop和Lucene的海量图像数据分布式检索方法。分布式框架的实现采用了MapReduce计算模型，在多结点中实现了图像数据集的分配、Lucene索引的建立、图像索引匹配等计算任务，利用图像的SIFT特征集成BagOfFeature特征，完成了图像特征和现有技术的有效融合，完整的结合了Lucene和分布式系统的速度优势，通过将内容特征转换

6、为关键字的方式为图像检索的效率提升做出贡献。最后，通过配置有多个结点实现基于倒排索引的图像特征索引技术完成分布式图像检索，在Hadoop平台上利用HDFS完成分布式索引存储，验证了基于倒排索引的图像检索技术方案，通过实验数据对图像搜索结果进行了准确率和效率的对比分析，并指出了系统现在的不足之处和下一步工作的着手点。关键词：Hadoop框架，Lucene检索，MapReduce计算模型，分布式文件系统I万方数据华中科技大学硕士学位论文ABSTRACTWiththerapiddevelopmentofthe

7、internetatcurrentage,moreandmorepeopleuseInternettosearchinformationlikemessagesandpictures.Thenumberofdigitalimagesaregrowingquickly.Infaceofsuchamassivedigitalmediasonnetwork,howtofindtheinformationthatpeoplewanthasbecomeanurgentproblem.Especiallyinthe

8、areaoffindingthesimilarimageinalargenumberofimages.Becauseofitsadvantagesinmassdataprocessing,thecloudcomputingdevelopsrapidlyrecently.Inordertosearchtheimagefaster,thispaperusestheframeworkofHadooptodesignadistributedmass