基于 ElasticSearch 的元数据搜索与共享平台-论文.pdf

《基于 ElasticSearch 的元数据搜索与共享平台-论文.pdf》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、计算机与现代化2015年第2期JISUANjIYUXIANDAIHUA第234期文章编号：1006—2475(2015)02-0117-05基于ElasticSearch的元数据搜索与共享平台姜康，冯钧，唐志贤，王超(河海大学计算机与信息学院，江苏南京211lOO)摘要：随着水利行业信息化的发展，针对海量、多源、异构数据的共享与发现成为行业研究的热点。本文设计与实现一种基于ElasticSearch的水利元数据搜索与共享平台，提出针对水利异构数据的解决方案并对海量数据建立索引，利用多租户访问控制

2、策略，保证用户索引数据的一致性与安全性。通过Rest服务对索引资源进行封装，提供搜索与多粒度的共享方式。应用表明，平台能够保证用户准确高效地获得水利行业数据，节约了水利单位构建搜索系统的成本。关键词：元数据检索；多租户访问控制；分布式；RESTful服务；异构数据中图分类号：TP311文献标识码：Adoi：10．3969／j．issn．1006-2475．2015．02．026AWaterConservancyMetadataSearchingandSharingPlatformBasedonE

3、lasticSearchJIANGKang，FENGJun，TANGZhi—xian，WANGChao(CollegeofComputerandInformation，HohaiUniversity，Nanjing211100，China)Abstract：Withthedevelopmentofwaterconservancyindustryinformatization，themassive，multi—sourceandheterogeneousdatasharinganddiscover

4、ybecomeahotresearcharea．Thispaperpresentsthedesignandimplementationofametadatasearchplat—fo1"111basedonElasticSearch．putsforwardasolutionofwaterconservancyheterogeneousdataandbuildstheindexonmassiveda．ta．Themulti—tenantaccesscontrolpolicyisusedtoensu

5、retheconsistencyandsecurityofuserdata．TheRestserviceencapsu—lateindextoprovidesearchingandmuhi—granularitysharing．Applicationshowsthattheplatformcanensureusersaccuratelyandefficientlytoobtainthewaterconservancyindustrydata，savethewaterconservancycons

6、tructioncostofunitsearchsystem．Keywords：metadatasearch；multi—tenantaccesscontrolmodel；distributed；RESTfulservice；heterogeneousdata目录服务系统已经无法满足海量、高并发的访问请0引言求。因此，建立水利数据的搜索与共享的云平台，对随着物联网、云计算、移动互联网和RS技术在海量、分散、异构的水利数据进行整合，提供高效的查询水利行业中的广泛应用，中央、流域以及各地水利单与共享

7、方式，成为水利领域内迫切需要解决的问题。位积累了大量分布异构独立的水利业务数据，如ElasticSearch是一个支持分布式、多租户j、何实现这些数据的互联互通、信息共享、业务协同，成Restful设计的开源搜索工具。业界针对ElasticSearch为水利信息化深入发展的迫切要求。建立水利领域处理海量业务数据搜索与数据集成进行了广泛的研的数据资源搜索与共享平台是整合信息资源，深度利究与实践。王占宏等人"利用ElasticSearch对公安用分散存储数据的有效途径。目前～些水利单位采系统内部的多

8、套系统资源进行整合，通过提供统一的用构建水利资源目录服务系统的方式来支持数据共查询人口，提高了系统数据检索的处理能力与查询效享与发现4。，然而各单位的目录服务系统仍然存在率。JaraA．J．等人使用ElasticSearch构建了一个相互独立、重复建设等问题，无法形成有效的数据共弹性扩展、易于部署、接口简单的移动发现平台，用户享。与此同时，随着水利数据的迅速增加，集中式的可以利用该平台注册与存储物联网设备生产的数据，收稿日期：2014—10-09基金项目：国家自然科学基金资助项目(6137009