基于mongodb与hadoop的地学遥感大数据管理系统的设计

《基于mongodb与hadoop的地学遥感大数据管理系统的设计》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、分类号：TP393.09;TP751.1;X14密级：专业学位研究生学位论文论文题目（中文）基于MongoDB与Hadoop的地学遥感大数据管理系统的设计ThedesigningofadatamanagementsystemofBig论文题目（外文）Remote-sensingGeodatabasedonMongoDBandHadoop研究生姓名闫玮学位类别工程硕士专业学位领域计算机技术学位级别硕士校内导师姓名、职称蒙应杰副教授校外导师单位、姓名中国科学院寒区旱区环境与工程研究所张耀南论文工作起止

2、年月2014年9月至2016年3月论文提交日期2016年4月论文答辩日期2016年5月学位授予日期2016年6月校址：甘肃省兰州市学院：信息科学与工程学院学号：220130903431学生姓名：闫玮导师姓名：蒙应杰学科名称：*工程·计算机技术基于MongoDB与Hadoop的地学遥感大数据论文题目：管理系统的设计原创性声明本人郑重声明：本人所呈交的学位论文，是在导师的指导下独立进行研究所取得的成果。学位论文中凡引用他人已经发表或未发表的成果、数据、观点等，均已明确注明出处。除文中已经注明引用的内容

3、外，不包含任何其他个人或集体已经发表或撰写过的科研成果。对本文的研究成果做出重要贡献的个人和集体，均已在文中以明确方式标明。本声明的法律责任由本人承担。论文作者签名：日期：关于学位论文使用授权的声明本人在导师指导下所完成的论文及相关的职务作品，知识产权归属兰州大学。本人完全了解兰州大学有关保存、使用学位论文的规定，同意学校保存或向国家有关部门或机构送交论文的纸质版和电子版，允许论文被查阅和借阅；本人授权兰州大学可以将本学位论文的全部或部分内容编入有关数据库进行检索，可以采用任何复制手段保存和汇编本

4、学位论文。本人离校后发表、使用学位论文或与该论文直接相关的学术论文或成果时，第一署名单位仍然为兰州大学。本学位论文研究内容：□可以公开□不宜公开，已在学位办公室办理保密申请，解密后适用本授权书。（请在以上选项内选择其中一项打“√”）论文作者签名：导师签名：日期：日期：基于MongoDB与Hadoop的地学遥感大数据管理系统的设计摘要随着遥感技术的发展，卫星分辨率与覆盖率的日益提高，遥感数据的数据量呈爆炸式增长，目前每天以TB级别增长，存储级别已经为PB级别。同时由于采集遥感数据的卫星存在差异，导致

5、数据产品在格式，大小等方面存在不同。因此对海量遥感数据的高效存储与管理已经成为业界关注的重点问题。针对该问题，本文讨论了一个基于MongoDB与Hadoop的地学遥感大数据管理系统的设计情况，主要研究工作有以下几个方面：（1）分析并总结了遥感数据管理信息系统发展的现状，给出了系统的总体需求及其设计原则，阐述了系统的业务逻辑、体系结构，规划了系统的功能，设计了系统的数据结构，给出了系统的安全应对策略；（2）对系统的数据采集、数据查询、数据导出、数据计算服务、用户管理、节点维护、日志管理等子系统进行了

6、设计，并对系统中的关键功能模块进行了算法的详细设计与部分实现，给出了系统的分布式架构的部署方案，对系统部分关键功能模块进行了性能的测试；（3）对系统的建设进行了总结，并提出下一步的主要工作任务。关键词：遥感数据；管理信息系统；系统设计；MongoDB；Hadoop；分布式IThedesigningofadatamanagementsystemofBigRemote-sensingGeodatabasedonMongoDBandHadoopAbstractWiththedevelopmentofre

7、motesensingtechnology,theresolutionandcoverageofsatelliteareever-increasing.TheamountofremotesensingdataisinanexplosivegrowthwithadailyincreaseinthelevelofTB,whichresultsinastoragelevelofPB.Atthesametime,duetodifferencesinthesatellitesacquiringremotes

8、ensingdata,theacquireddataproductsmayhavedifferentformatsandsizes.Thereforehowtostoreandmanagethemassiveremotesensingdataefficientlyhasbecomeacommon-concernedproblemofcomputerscienceandgeoscienceresearchers.Thispaperdiscussedthedesigningofabig