面向数据仓库和数据整合的etl系统的设计和实现

《面向数据仓库和数据整合的etl系统的设计和实现》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、山东大学硕士学位论文面向数据仓库和数据整合的ETL系统的设计和实现姓名：杨凌霄申请学位级别：硕士专业：计算机技术指导教师：万建成;姜岩20080405山东大学硕士学位论文摘要随着信息技术的高速发展，信息资产逐渐成为现代企业核心竞争力的重要组成部分，如何有效的管理企业在运营过程中产生的数据，为企业决策提供依据已经成为信息管理人员所面临的最重要课题。自1970年E．F．Codd博士提出关系型数据库模式以来，历经近40年的发展，关系型数据库系统已经成为数据管理领域的主流，然而这种以快速响应为目标的事务系统模式在面向主题的数据分析应用中存在着先天性不足。因此，在现有关系型数据库之上构建

2、操作数据存储系统(ODS)成为优化企业信息管理，进一步提供有效决策支持的重要技术手段之一．本文以本人近期参与的建行ODS项目为依托，首先从ODS技术的概念和实现技术入手，对ETL技术中各个关键步骤(抽取÷转换÷加载)的实现机理进行了深入探讨。本文详细介绍了中国建设银行ODS系统中ETL总体架构和应用部署方案，作为本人工作的重点，本文提出了将原有的业务平台数据移植到ODS系统的方法，利用ETL技术将原来部署在山东省分行的中间业务平台数据、IC卡系统数据、医保卡系统数据和公积金系统数据移植到新上线的中国建设银行ODS系统之中。本文对利用现有业务系统构建ODS系统进行了有益的尝试，有

3、效的解决了管理数据库与业务数据库之间的数据整合问题，实现了跨域的数据集成，保证了数据的时效性和准确性，为上下级的统一调度和企业决策提供了平台。关键词：I：Tk、操作型数据存储、数据仓库山东大学硕士学位论文ABSTRACTAsinformationtechnologydeveloped,theinformationassetcontributedmoreandmorepowertothecorecompetitionabilityofthemodementerprises．Accordin哲y,itbecamemoreandmoreimportantfortheCIOstoeff

4、icientlydealwithdatawhichWasgeneratedfromthedailyoperating····inordertosupporttheiremployersinthedecision．makingprocess．SinceDoctorE．F．Coddputforward“relationaldatabase’’modelintheyear1970，RDhasbecomeamainstreaminthedatamanagementarea．However,thisquick．respondingbusinessmanagementsystemhasal

5、linherentflowwhentheyfacingthethematic．drivendataanalysisapplication．Therefore，itwouldbenefittheenterprise’Sinformationmanagementbyconstructinganoperationaldatastore(ODS)upontheexistingrelationaldatabase，whichcouldalsobecomeasignificanttechnologyinstrumentinthedecision。making-supportingproce

6、ss．ThisthesisbasesontheCCBODSprojectwhichItookpartinrecently．StartedwiththeinstructiontoODSconceptandactualizingtechnology，anddeeplydiscussedtherealizingmechanismofthekeystepsofETLtechnology(extracting。transforming．10ading)．ThearticleinparticularintroducedtheETLconstructionandapplicationdisp

7、osingschemeofCCBODSsystem．Furthermore，asallimportantpartofmyiob，IemphasizedhowtotransferdatafromtheexistingbusinessplatformtotheODSsystem．Thatis，usingETLtechnologytotransferthedatafromeachbranchbanksinShandongProvince，intothenewCCBODSsystem,suchast