资源描述:
《基于hadoop的遥感影像业务管理系统设计①》由会员上传分享,免费在线阅读,更多相关内容在工程资料-天天文库。
1、计算机系统应用 ISSN 1003-3254, CODEN CSAOBNE-mail: csa@iscas.ac.cnComputer Systems & Applications,2018,27(11):64−70 [doi: 10.15888/j.cnki.csa.006663]http://www.c-s-a.org.cn©中国科学院软件研究所版权所有.Tel: +86-10-62661041基于Hadoop的遥感影像业务管理系统设计①张 扬, 谢 彬, 王敬平, 唐 鹏(华东计算技术研究所
2、, 上海 201808)通讯作者: 张 扬, E-mail: cruise0716@163.com摘 要: 随着信息技术、航天技术的不断发展,遥感影像数据量呈现爆发性增长. 针对陕西某测绘所管理影像数据时出现的存储需求量大、读取过程缓慢、图像处理耗时长等问题. 本文基于LFU (Least Frequently Used)缓存算法, 设计了三级缓存模块, 用来高速缓存影像数据. 同时结合Hadoop开源技术, 设计了遥感影像业务管理系统. 该系统具有高内聚, 低耦合, 扩展性强的特点. 经过系统性能测试
3、, 该系统能有效解决影像存储瓶颈, 同时能提升影像读取速度, 缩短影像处理时间.关键词: 遥感影像; 存储瓶颈; LFU算法; 三级缓存模块; Hadoop引用格式: 张扬,谢彬,王敬平,唐鹏.基于Hadoop的遥感影像业务管理系统设计.计算机系统应用,2018,27(11):64–70. http://www.c-s-a.org.cn/1003-3254/6663.htmlDesignofRemoteSensingImageManagementSystemBasedonHadoopZHANG Yan
4、g, XIE Bin, WANG Jing-Ping, TANG Peng(East China Institute of Computing Technology, Shanghai 201808, China)Abstract: With the continuous development of information technology and aerospace technology, the amount of remotesensing image data has shown an e
5、xplosive growth. The problem of large storage requirements, slow reading process, andlong image processing time has been faced with the management of image data by a surveying and mapping facility inShaanxi. Cache algorithm is designed with a three-level
6、 cache module used for cache image data. At the same time,combined with Hadoop open source technology, a remote sensing image business management system is designed. Thesystem has high cohesion, low coupling, and strong scalability features. Testing show
7、s that the system can effectivelysolve the image storage bottleneck, while improving the image reading speed and shorten the image processing time.Keywords: remote sensing image; storage bottleneck; LFU algorithm; three-level cache module; Hadoop1 问题分析
8、量存储需求, 同时扩展性很差, 不支持多用户数据共享.遥感影像作为一种特殊的数字图像, 具有高分辨与此同时, 科研人员在进行业务处理时, 发现影像读取率, 高覆盖范围, 信息量大等特点. 在环境监测, 资源探速度缓慢, 进行影像聚类处理时, 等待周期较长.测, 灾害防护, 城市规划, 军事行动等方面具有极高的针对以上问题, 本文基于Hadoop和三级缓存技应用价值[1].术, 设计了一套遥感影像业务管理系统, 提供影像存储,陕西某测绘所近些