资源描述：
《基于大数据的数据服务应用研究》由会员上传分享，免费在线阅读，更多相关内容在工程资料-天天文库。
1、第28卷第8期计算机技术与发展Vol.28No.82018年8月COMPUTERTECHNOLOGYANDDEVELOPMENTAug.2018基于大数据的数据服务应用研究陈光(江苏自动化研究所,江苏连云港222006)摘要:目前各行业信息系统中数据积累规模迅速增长,传统的数据存储、处理以及应用服务难以适应持续增长的数据应用需求,各级部门无法有效跨单位获取重要数据信息,进而不能帮助上级机关做出重要辅助决策。对此,提出一种适用于行业数据应用的大数据架构设计,具有并行、分布、稳定、高效等技术特点。研究大数据存储与处理技术、大数据查
2、询与分析技术以及大数据可视化技术,建立数据分类目录体系标准与信息交换共享机制,确保多数据采集渠道的大规模数据能够有效整合、有序组织,综合运用数据统计、数据分析、数据挖掘等方法,提炼能够保障服务于指挥决策支持信息知识并形成可视化平台,满足不同指挥层级应用人员便捷、及时地掌握应用信息的保障需求,提升应用行动的快速反应能力。关键词:大数据;云计算;数据采集;数据分析;数据挖掘;辅助决策中图分类号:TP311文献标识码:A文章编号:1673-629X(2018)08-0129-06doi:10.3969/j.issn.1673-629
3、X.2018.08.027ResearchonDataServiceBasedonBigDataCHENGuang(JiangsuAutomationResearchInstitute,Lianyungang222006,China)Abstract:Withtherapidgrowthofthedataaccumulationintheinformationsystemoftheindustry,thetraditionaldatastorage,processingandapplicationservicesarediff
4、iculttoadapttothedataapplicationdemandofcontinuousgrowth,andthedepartmentscannoteffectivelyobtainimportantdatainformationacrosstheunits,whichcannothelpthehigherauthoritiestomakeimportantauxiliarydecision.Forthis,wepresentalargedataarchitecturedesignforindustrialdata
5、application,whichisparallel,distributed,stableandefficient.Westudylargedatastorageandprocessingtechnology,largedataqueryandanalysistechnologyandlargedatavisualizationtechnology,andestablishsystemstandardsandinformationexchangesharingmechanismtoensurethatlargedatacol
6、lectionchannelsoflarge-scaledatacanbeef-fectivelyintegrated,orderlyorganization,Thedatastatistics,dataanalysis,dataminingandothermethodsareusedtoextractknowledgetosupportcommandanddecisioninformationandformvisualizationplatform,whichmeetstheneedsofgraspingtheapplica
7、tioninformationconvenientlyandtimelyindifferentcommandlevelapplicationpersonnelandenhancesrapidresponsecapabilityofapplicationaction.Keywords:bigdata;cloudcomputing;datacollection;dataanalysis;datamining;auxiliarydecision0引言定、手段单一,缺少灵活、精确的数据组织与服务保障,智能电网是大数据最重要的应用领域之
8、一,支撑对机动环境下应用人员信息支持不足,难以适应灵活智能电网绿色安全、坚强及可靠运行的基础是电网全多变的应用需求。景实时数据采集、传输和存储,以及累积的海量多源数(2)决策支持信息获取能力不足。据快速分析,证实了大数据在大规模数据集处理、应用现有的数据应用手段尚停留在数据查
