基于元数据库的通用ETL系统设计与开发.pdf

《基于元数据库的通用ETL系统设计与开发.pdf》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、论文题目基于元数据库的通用ETL系统设计与开发工程领域软件工程指导教师侯晓荣教授作者姓名刘伟华学号201091070111万方数据分类号密级注1UDC学位论文基于元数据库的通用ETL系统设计与开发（题名和副题名）刘伟华（作者姓名）指导教师姓名候晓荣教授电子科技大学成都唐曙光高工四川融科数码科技有限公司绵阳（职务、职称、学位、单位名称及地址）申请专业学位级别硕士专业学位类别工程硕士工程领域名称软件工程提交论文日期2012-04-09论文答辩日期2012-05-28学位授予单位和日期电子科技大学答辩委员会主席詹惠琴教授评阅人郝家胜刘强陈云坪年月日

2、注1：注明《国际十进分类法UDC》的类号万方数据独创性声明本人声明所呈交的学位论文是本人在导师指导下进行的研究工作及取得的研究成果。据我所知，除了文中特别加以标注和致谢的地方外，论文中不包含其他人已经发表或撰写过的研究成果，也不包含为获得电子科技大学或其它教育机构的学位或证书而使用过的材料。与我一同工作的同志对本研究所做的任何贡献均已在论文中作了明确的说明并表示谢意。签名：日期：年月日关于论文使用授权的说明本学位论文作者完全了解电子科技大学有关保留、使用学位论文的规定，有权保留并向国家有关部门或机构送交论文的复印件和磁盘，允许论文被查阅和借阅

3、。本人授权电子科技大学可以将学位论文的全部或部分内容编入有关数据库进行检索，可以采用影印、缩印或扫描等复制手段保存、汇编学位论文。（保密的学位论文在解密后应遵守此规定）签名：导师签字日期：年月日万方数据摘要摘要BI是继ERP，CRM之后的新的信息系统,旨在解决企业管理信息化之后，需要面对企业决策过程的信息化的难题。企业的运营状况的好坏主要决定于决策，而决策的依据又是靠经验，经营数据，各种决策方式来保证的。BI系统应运而生，使用已有数据，挖掘潜在商业规律，抓住先机，帮助企业运筹帷幄之中，决策千里之外。ETL是Extraction-Transfo

4、rmation-Loading的缩写，中文名称为数据提取，转换和加载。ETL是BI的灵魂，是BI系统成功的基石，只有实施成功了ETL系统，BI系统才会变得更有价值。ETL的价值在于把数据统一化，标准化，可视化，集中化。数据仓库实现解决信息孤岛的问题，ETL则实现连通信息孤岛的桥梁。ETL负责将分布的、异构数据源中的数据如关系数据、平面数据文件等抽取到临时中间层后进行清洗、转换、集成，最后加载到数据仓库或数据集市中，成为联机分析处理、数据挖掘的基础。本文主要阐述，结合多年实施数据仓库，ETL，BI系统的经验，总结ETL工具主要包括的功能和实施难

5、度，通过编程工具实现一个通用化的ETL系统，主要依靠数据库和编程工具的特性来实现相应的功能需求。目的是简化ETL的开发环节，增强ETL工具的可用性，为ETL的项目开发解决时间与人力成本。关键词：BI，商务智能，ETL,信息系统，数据仓库，信息孤岛I万方数据AbstractAbstractAfterERPandCRM,BusinessIntelligencesystemisthenewinformationsystem.Corporationhastheinformationmanagersystem,italsoneedasystemwhat

6、tohelpthemtorealizethedecision-makingautomatic.TheoperatingconditionsofTheEnterprisesdependentonthedecision-makingTheBasisofdecision-makingrelayontheexperience,thedataoftheCorporation,theMethodesofmakingdecisions.BIcomestohelptheCorporationtomakethedecision.ETListheAbbrevia

7、tionofExtraction-Transformation-Loading,itChinesenameisdataExtraction,TransformationandLoading.ETListhesouloftheBI,isthebaseoftheBI.ThesucceedETLmaketheBImuchmoreuseful.ThevalueofETListhedataunification,datacentralization,datavisibility.Datawearhousingisthemethodoftheresolv

8、ingtheinformationacnode,ETListhebridgeoftheinformationacnode.ETLextractthedatafrom