欢迎来到天天文库
浏览记录
ID:32959861
大小:56.56 KB
页数:5页
时间:2019-02-18
《数据物流论文范文-浅析基于cwm的广域物流系统平台建模word版下载》由会员上传分享,免费在线阅读,更多相关内容在工程资料-天天文库。
1、数据物流论文范文:浅析基于CWM的广域物流系统平台建模word版下载导读:本论文是一篇关于基于CWM的广域物流系统平台建模的优秀论文范文,对正在写有关于数据论文的写作者有一定的参考和指导作用,论文片段:M中,包含了ETL过程需要的方方面面的元数据模型,虽然这些元模型在细节上不足以描述具体的ETL过程,但是己经把ETL过程的大概框架描述出来,我们只需要在这些元模型的基础上,补充一些和ETL过程相关的细节方面的内容,就可以完成对ETL过程的建模。结束语本系统这种设计思想可以带来两个方面的效果:其一,使得系统建模部摘要:在开
2、发广域物流系统平台ETL的过程中,一个突出的理由就是元数据管理混乱,往往是开发前没有一个统一的标准、开发中不断变更,最后导致开发出的产品难以维护。针对这个理由,本文提出了基于CWM这个元数据标准来开发ETL的思想,在开发过程中,一切都以CWM元模型为依据进行设计和开发,彻底解决了元数据混乱的状况。关键词:广域物流系统平台数据仓库元数据CWM(公共仓库元模型)引言数据仓库系统的架构大体可以分为三部分:后台是数据存储和计算引擎,前端是数据展现的用户界面,还有一部分就是数据转换抽取加载(ETL)oETL包括三个方面的内容:E
3、xtraction(抽取)、Transformation(转换)和Loading(加载),它在数据仓库和业务系统之间搭建了一座桥梁,确保新的业务数据能源源不断地进入数据仓库,同时用户的分析和应用也能反应出最新的业务动态。虽然ETL相关在数据仓库架构的三部分中技术含量并不算最高,但其涉及到大量的业务逻辑和异构环境,因此在一般的数据仓库项中ETL部分往往是牵扯精力最多的。CWM的结构分析及包的选择作为一种公共仓库元模型,CWM必须能够描述各种数据源和数据仓库目标的元数据,CWM本身就是一个非常复杂的系统。要想将CWM运用到
4、实际的数据仓库系统中,必须提供易于实现的、小的、便于理解的包。为了达到上述目的,我们将CWM组织成了21个单独的包。每个包都含有与在数据仓库和业务智能领域中的特定部分相关的类、关联和约束。在21个包中,有20个包要求在实现中依赖于其它一个或多个包存在,唯一一个不需要其它包支持的包是CWM中最基本的部分:核心包。其它所有的包最终都依赖于这个包。基于CWM开发广域物流系统平台ETL过程中,我们本着通用性的需求,在CWM中选择相应的元模型(包),建立满足需求的系统模型。实现和使用整个CW元模型的一部分。这样的使用方式是CWM
5、的…个设计原则所决定的。CWM的这个基本的设计原则就是:位于某一层中的元模型只依赖于其下层中的元模型。这种结构使得各个实现可以只使用与其理由空间紧密相关的那部分CWM元模型,从而使得同层元模型或底层与高层元模型之间很少存在或者根本不存在包之间的藕合理由。这也就意味着一个特定的CWM元模型只依赖于块状图中位于它下方的包(不一定是下方所有的包),同时,这些包不依赖于同一层中的任何其他的包。广域物流系统平台ETL的根本目的就是从分散的应用系统数据库中抽取数据加载到相应的主题数据库中,也就是说,数据目的格式都是二维关系表,数据
6、源格式大多也是二维关系表。所以,在数据格式部分,只需要支持关系型数据库即可。这样,在资源层中,只需要包括关系包就可以了,关于其他格式的数据源我们将在后续工作中完成。另外,我们需要建立和关系型数据库管理系统的连接,所以,在基础层中,我们还要考虑软件部署包。广域物流系统平台ETL元数据特点构建广域物流系统平台ETL元数据管理架构之前另一个需要进行重点考虑的便是广域物流系统平台ETL元数据的特点,这会影响架构师的决定。广域物流系统平台ETL元数据来源并非单一,而存在多样性。设计广域物流系统平台ETL元数据管理架构时需要慎重考
7、虑元数据的特点。至少现在看来,广域物流系统平台ETL元数据所具有的这些特点依然存在,对元数据管理架构的设计影响非常大。构建广域物流系统平台ETL元数据管理架构广域物流系统平台ETL元数据管理架构目标不是为了元数据的交换与共享,而是要针对上述的ETL元数据特点,并结合典型的元数据管理架构模式实现以下功能:(1)元数据捕获,具体为元数据的收集、分类和整理。(2)元数据存储,具有易于扩展的元模型存储元数据。⑶用户访问接口,提供元数据的创建、修改、删除和查询功能。(4)支持元数据基本查询、数据谱系、数据质量保证和影响分析高级应
8、用。(5)安全管理。广域物流系统平台ETL元数据管理架构是一种集中式元数据架构,其结构元素包括元数据源、集成处理、灵活的元模型、元数据库、前端应用与用户接口和系统管理。我们可以发现在CWM中,包含了ETL过程需要的方方面面的元数据模型,虽然这些元模型在细节上不足以描述具体的ETL过程,但是已经把ETL过程的大概框架描述出来,我们只
此文档下载收益归作者所有