基于mda多维数据抽取过程的研究和实现

《基于mda多维数据抽取过程的研究和实现》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、山东大学硕士学位论文摘要随着计算机技术的高速发展，管理信息系统(ⅦS)逐渐普及，各行各业都开始采用管理信息系统实现日常办公、人员信息管理等。传统的业务系统不具备数据分析的能力。它们常年运行产生的海量数据大多被转移到历史数据库中、或被直接废弃，导致隐藏在数据背后的规律无法得知。因此近年来，针对海量数据进行分析处理的需求不断增多，在这种形势下，多维数据抽取技术应运而生。目前对多维数据抽取过程的研究有很多，但是研究的目标主要集中在商业领域、金融领域等，对教育行业的研究较少。教育行业与商业领域之间存在很大的行业差异，教育行业是一个非盈利性行业，面临经费不足、技术人员匮乏等困难。因此成本

2、较高，使用难度较大的传统多维数据抽取技术与工具不能完全适用于该行业，传统的多维数据抽取技术面临新的问题和挑战，需要挖掘新的方法。针对教育行业的特有需求，本文进行了探索性研究，提出了一种基于MDA的多维数据抽取过程。首先建立多维数据模型，并详细介绍模型的描述方法与模型约束。其次，建立过程模型，将多维数据抽取过程的抽取、转换、装载阶段的业务操作抽象为平台无关模型，并采用基于过滤器．管道模式的体系结构组织模型。模型的具体内容和细节采用XML描述，克服了硬编码的局限性。使用模型驱动架构(MDA)，提高了系统的重用性，同时降低了使用的难度。本文还探讨了基于MDA的多维数据抽取过程的实现，

3、首先给出了系统的整体架构设计，接下来分别描述了数据转换机制，任务调度问题，过滤器机制，管道解析机制以及异常监控等问题。最后介绍了原型系统的设计与实现，并列举实例进行分析。本文的课题研究既有探索性的理论研究价值，也具有较大的应用价值和现实意义。希望能为教育行业的多维数据抽取提供一种有效、通用的解决方案。关键词：模型驱动架构(MDA)；多维数据抽取过程；’多维数据模型；管道一过滤器模式；任务调度山东大学硕士学位论文ABSTRACTWiththedevelopmentofcomputertechnology，managementinformationsystembecomesmore

4、popularanduniversal，andmostcompaniesandschoolsusecomputerplatformtosupportdailyworkandpeoplemanagement．Traditionalonlinetransactionprocessingsystemsdon’thavethecapabilitiestosupportdataanalysis．Alargenumberofhistoricaldataistransferredtothehistoricaldatabase，ordirectdiscarded，SOpeopleCan’tkn

5、owthehiddenrulesandinformation．Inrecentyears，、Ⅳimthegrowingrequirementofdatacollectionandanalysis，thetechnologycomesintobeing．Thereismuchresearchaboutmultidimensionaldatacollectionprocess，butthestudyismostfocusoncommerce，financeandSOon．Asanon-profitindustry,educationisalwaysconfrontingsomedi

6、fficulties，suchaslackoffunds，technicalpersonnelandthedistinctionbetweeneducationandbusiness．Therefore，highcostandcomplicatedmeasureisnotsuitableforeducmion．Itisobviousthatrecentdataanalysismeasuresandprocessingdetailscannotmeettheneedanddataanalysistechnologyisfacingsomenewchallenges．Inthisp

7、aper,wedosomeresearchabouthowtoconductmultidimensionaldatacollectionprocessbasedonModelDrivenArchitectureineducmionindustry．ThispaperpresentsanewmultidimensionaldatacollectionprocessbasedonMDA．Firstofall，establishthemultidimensionaldatamodel，andthe