资源描述：
《基于oracle组件的数据采集与全文检索系统设计与优化》由会员上传分享，免费在线阅读，更多相关内容在工程资料-天天文库。
1、基于Oracle组件的数据采集与全文检索系统设计与优化摘要：从应用系统数据采集与全文检索的需求出发，结合权限控制，提出基于0racleTransparentGateway,OracleText的数据采集与全文检索的设计和实现方案。基于此方案，着重进行系统框架设计、采集存储及数据库设计,实现创建索引及检索流程,最后给岀系统性能优化方法，并对检索速度和查准率进行测试分析。目前系统已上线运行，取得高效简捷、运行稳定的使用效果。关键词：数据采集；OracleTransparentGateway；全文检索；OracleText；性能优化中图分类号：TN911734；TP392文献标识码:A
2、文章编号:1004?373X(2016)08?0037?04DesignandoptimizationofdataacquisitionandfuIRtextretrievalsystembasedonOraclecomponentYUANQinqinl,LIZhixun2,L?Lintaol(1.DepartmentofElectronicandInformationEngineeringsXijingUniversity,Xi'an710123,China；2.Xi'anAerospacePropulsionTestTechniqueInstitute,Xi"an710100
3、,China)Abstract:Proceedingfromtherequirementsofdataacquisitionandfull?textretrievalfortheapplicationsystem,andincombinationwiththeaccesscontrol,thedesignandimplementationschemeofdataacquisitionandfull?textretrievalbasedonOracleTransparentGatewayandOracleTextisproposed.Basedonthisscheme,thesys
4、temstructuredesign,collectionstorageanddatabasedesignareconductedemphatically.Theindexcreationandsearchprocedurewererealized・Attheendofthispaper,theoptimizationmethodofsystemperformanceisgiven,andtheretrievalspeedandprecisionratioofthesystemareanalyzed・Nowthesystemhasbeenrunonline,andachieved
5、theusingeffectwithhighefficiencyandstablerunning・Keywords：dataacquisition；OracleTransparentGateway；full?textretrieval；OracleText；performanceoptimizationo引言随着信息化建设的不断推进以及信息技术的快速发展，为适应多元化业务发展需要，多个业务系统随之建设，产生了大量的以不同方式存储、依赖于不同数据库管理系统的数据。例如业务数据分别存储在SQLServer,Oracle数据库中［1］,在这些异构数据库［2］平台上运行着业务相关的多种应
6、用系统。如何在不影响现有系统运行的前提下，最大限度地利用信息资源，避免重复开发，必须解决异构数据库的统一操作问题。如何快速有效地采集异构数据库中的信息，建立综合信息资源库，实现数据共享，是本文需要解决的问题之一。另外，面对综合信息资源库中的大量数据，怎样在业务应用中实现快速、有效、全面的检索效果，提高数据的利用性，也是本文需要解决的另一问题。本文围绕基于J2EE技术架构的多个业务应用系统开展研究,其信息来源十分广泛，包括现有的业务管理系统、文件系统、文档资料等。而各个系统的数据存储方式、存储结构、数据库类型均不相同，如何在异构的存储环境下实现稳定可靠的数据共享和数据采集是本文设计
7、的要点之一。同时，业务数据涵盖日常应用中的所有资料、文档等信息，信息类型复杂多样，包括结构化信息、非结构化信息、文件(DOC,PDF,txt,Excel,HTML)等多种格式。系统数据量随着日积月累会越来越大，要在这样大量复杂的数据中实现对多种类型信息的高效准确检索也是本文设计的另一要点。基于上述分析，本文采用了Oracle数据库的OracleTransparentGateway[3?4],OracleText[5?6]等技术。在设计采集检索功能时，不仅要满足异构数据库环境下数据
