银行ods整体架构及实施案例_mdcl

《银行ods整体架构及实施案例_mdcl》由会员上传分享，免费在线阅读，更多相关内容在应用文档-天天文库。

1、Consult•Build•Deploy•Manage银行ODS系统整体架构及实施案例RachelJiang现代设备（中国）有限公司12/8/2010北京环亚时代信息技术有限公司大纲¾总体介绍¾ODS系统整体架构¾ODS系统技术实现¾实施案例ODS定义什么是ODS？VODS是一个面向主题的、集成的、可变的、当前的细节数据集合，用于支持企业对于即时性的、操作性的、集成的全体信息的需求。常常被作为数据仓库的过渡，也是数据仓库项目的可选项之一。VKimball关于ODS的定义（<<数据仓库生命周期工具集>>）：–是操作型系统中的集成

2、，用于当前、历史以及其它细节查询(业务系统的一部分)–为决策支持提供当前细节数据(数据仓库的一部分)ODS特性ODS的特性V面向业务主题搭建，是集成的数据集合，包含多个源操作型业务系统数据。V是以当前数据为主、含较短历史（相对于数据仓库）的数据集合。V是可变的数据集合。V基础数据存储结构上一般不做转换，尽量与业务数据库保持一致。V可用于当前的、较短历史的以及其它细节数据的查询。V支持根据应用主题需要做进一步的加工汇总。ODS作用为什么要ODS？V建立全行一体化的数据服务机制，实现数据服务的提供、管理、发布和使用功能，支持技术扩

3、展和业务应用的快速开发。V对业务数据进行标准化、规范化，缩短应用系统的实施路径，减少重复开发，降低整体开发成本，提高业务管理部门数据需求的响应速度和准确性，并通过模型和知识库积累业务经验，为更深层次的决策分析和数据挖掘奠定基础。ODS业务目标统一准实时共享数据接口数据质量的校验及管控按照企业数据模型收敛并统一客户视图的提供及展示整合数据，提供运营数据共享，支撑跨系统数据的应用，提升数据质量生产经营报表统一的提供和展示生产经营关键绩效指标与经营风险的监控生产经营过程所需跨系统数据的批量计算ODS系统逻辑架构ODS系统未建前：OD

4、S系统逻辑架构ODS系统搭建：ODS逻辑架构说明ODS定位：定位于企业的基础数据平台，提供数据集成加工服务以及查询服务。ODS数据采集：ODS不产生、不修改源数据；ODS的数据主要来源于生产系统，通过数据抽取、加载过程完成本系统内数据更新。数据组织：VODS主要提供细粒度运营数据，也存在部分粗粒度汇总数据，但维度相对DW简单。VODS按关注生产运营过程的统计与监控为主的生产视角主题域方式来组织数据，一般基础数据与源业务系统接近。VODS提供当前数据的统计与监控。数据共享：ODS采集整合各源生产系统数据，为数据实时性要求相对较低

5、的系统或某些系统功能提供近实时的跨系统数据共享服务。数据质量：ODS提供提升数据质量管理手段和技术手段，发现数据质量问题。系统功能：V查询：交易型查询由业务系统完成，ODS提供集成数据的查询分析服务，分担业务系统压力。V报表：基于跨系统数据的固定或动态报表；基于单系统数据的、实时性要求不高的固定或动态报表。V计算：提供基于跨应用的、当前数据的计算加工功能，为各类集市提供汇总指标数据。V近实时应用：ODS可以按需提供联机近实时应用，例如基于事件、基于业务规则的数据检查和预警。ODS与DW的关系及区别概要比较：分类ODS系统DW系

6、统目的接近实时监控决策支持共同点整合数据整合数据面向主题面向主题不同点动态数据（延迟>1秒）静态数据（延迟>24小时）当前数据历史数据细节化数据概括性数据实施方案比较：实施方案实施结果优势劣势DW企业能够分析DW中的历史数据，可以解决企业的决策需求不能满足企业的实时监控和实时进行中远期的规划业务需求ODS企业能够把握ODS中的当前综合可以满足企业的实时监控不能满足企业的中远期决策需求数据，对企业的及时运行情况随时和实时业务需求掌控ODS与DW的关系及区别分类比较：分类ODS系统DW系统使用对象一线的生产和管理人员。专业分析人员

7、和企业中高层管理人员。数据来源ODS的运营数据来源是生产系统。DW运营数据主要从源系统或ODS获取；ODS没有提供的运营数据直接从源系统中提取。数据获取性能与及ODS主要以小批量近实时方式支持OLTP类型DW主要以批量方式加载数据，数据实时更时性的数据更新，数据更新时间短，性能与及时新要求不高。性都高于DW。数据架构ODS主要提供细粒度运营数据，也存在部分DW主要提供多层粗粒度汇总数据，且分析粗粒度汇总数据，但维度相对DW简单；维度和时间周期相对ODS更多；ODS按关注生产运营过程的统计与监控为主DW按关注对历史数据的深层次分

8、析与挖掘的生产视角主题域方式来组织数据；为主的分析视角主题域方式来组织数据；ODS提供当前数据的统计与监控。DW提供历史数据的展示和分析。数据共享ODS直接为生产系统提供运营数据的准实时DW不为生产系统提供数据共享服务。共享服务系统功能数据服务，为生产系统提供数据共享；深层次