基于海量数据的靶场数据应用技术-论文.pdf

《基于海量数据的靶场数据应用技术-论文.pdf》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、第6卷第2期指挥信息系统与技术Vo1．6No．22015年4月CommandInformationSystemandTechnologyApr．2015·大数据·基于海量数据的靶场数据应用技术陈光(中国船舶重工集团公司第716研究所江苏连云港222006)摘要：利用海量数据可对靶场数据进行技术研究。从基于数据仓库的海量数据存储、基于元数据的异构数据集成以及高可用数据远程容灾保护技术3个方面，分析了靶场数据综合服务关键技术，同时讨论了关键技术的系统架构和特点，从而实现了靶场数据的统一保存、及时发布、灵活查询和按需安全下载等功能，为靶场试验提供不间断的数据服务。关键词：元数据；数据仓库

2、；远程容灾；数据挖掘中图分类号：TP311文献标识码：A文章编号：1674—909X(2015)02—0044—05RangeDataApplicationTechnologyBasedonMassDataChenGuang(The716thResearchInstituteofChinaShipbuildingIndustryCorporation，Lianyungang222006，Jiangsu，China)Abstract：Therangedataareresearchedbyusingmassivedata．Fromaspectsofmassivedatastor—age

3、basedonthedatawarehouse，heterogeneousdataintegrationofmetadataandhigh—availabilitydataprotection，andremotedisasterrecovery，keytechnologiesfortherangedataintegratedservicesareanalyzed．Thesystemframeworkandcharacteristicsofkeytechnologiesaredis—cussed，thusachievingunifiedrangedatastorage，thetime

4、lyrelease，flexiblequery，andon—de—mandsecuritydownload．Uninterrupteddataservicesfortherangeexperimentareprovided．Keywords：metadata；datawarehouse；remotedisasterrecovery；datamining载等功能，为靶场综合试验提供不间断的数据综合0引言服务。靶场试验时利用历史数据进行试验筹划，试验1技术架构过程中需要实时记录数据，试验结束后也需要利用数据分析与评估试验。可见，靶场数据应用贯穿于1．1架构组成整个试验过程，是靶场完成各

5、项任务的关键。随着靶场数据综合服务建设需充分考虑靶场数据的军事信息化建设推进，其中关键模型验证对靶场数应用特点，结合靶场数据服务需求，构建靶场数据据需求迫切，对靶场数据的服务能力提出了更高1个中心和3个分系统架构，以满足靶场综合且高要求。效的数据服务需求，并具备试验历史积累数据整编、在信息化建设过程中，由于缺乏统一的数据管现有数据整合且全部数据统一存储、数据归档、远程理机制，无法满足下一代信息化建设数据服务要保护以及故障接替能力，从而为靶场各信息系统提求[】]。因此，靶场构建数据综合服务系统时，应以供统一、安全、可靠且持续的数据服务。“采集+处理+管理+服务+保护+安全”实现靶场靶

6、场数据综合服务由1个中心和3个分系统组数据的统一保存、及时发布、灵活查询和按需安全下成，其架构如图1所示。收稿日期：2014-09-2546指挥信息系统与技术2015年4月系统管理分系统由管理工作台以及相关配套设1．2服务功能备组成，嵌入系统管理类软件，提供整个系统的设1)数据汇集备、软件和数据库的管理，以及数据采集、整编、浏数据汇集服务具有以下功能：(1)历史纸质靶览、发布与分发等功能。其中数据搜索和采集功能场数据录入；(2)电子化靶场数据及数据格式规范实现关键在于利用爬虫技术，设计合适的相关算法，整编和导入；(3)支持在线自动收集及离线数据文可在短时问内准确检索需要的数据，并能

7、够支持不件导人。同类型数据中文分词和信息分类等。该分系统应具2)数据整合备对搜索结果按照作战和情报等类别分类显示能数据整合服务具有以下功能：(1)各型靶场数力，同时支持搜索结果的信息关联展示，具备对搜索据统一表述；(2)各数据库中异构数据抽取与转换；结果按要求排序功能，支持与搜索信息相关度计算(3)多渠道汇集的各型数据编目和整理；(4)支持和排序。系统管理分系统功能结构如图3所示。转换后的异构数据同步更新。3)数据存储，——————————、，————————。‘、，