etl系统在保险行业ods中的设计和实现

etl系统在保险行业ods中的设计和实现

ID:27507778

大小:2.34 MB

页数:80页

时间:2018-12-04

etl系统在保险行业ods中的设计和实现_第1页
etl系统在保险行业ods中的设计和实现_第2页
etl系统在保险行业ods中的设计和实现_第3页
etl系统在保险行业ods中的设计和实现_第4页
etl系统在保险行业ods中的设计和实现_第5页
资源描述:

《etl系统在保险行业ods中的设计和实现》由会员上传分享,免费在线阅读,更多相关内容在行业资料-天天文库

1、~上海交通大学工程硕士学位论文ABSTRACTDESIGNANDIMPLEMENTATIONOFETLSYSTEMONODSINTHEINSURANCEINDUSTRYABSTRACTThispaperhasanalysedETL-relatedresearchandtechniques,basedonapractical projectofacertaininsurancecompany,andhasdonealotofresearchondesignand implementationofETL.TheETLsystemhadbeenputintoproductionenvironm

2、ent. Onmodelingdesignarchitecture,firstlyaccordingtotheprojectthispaperputs forwarddesignmodelarchitecturebasedonthecommondatawarehousemodel.Thenon thebasisofitthispaperhassetupjobscheduleMetamodelbymeansofanalyzinglogic. Onextractingdata,thispaperbringsforwardanextraction-transfer-staging-merge

3、approachtosolvetheissueofextractingandmergingdatainthedistributedheterogeneous environment.OntheETLsystemperformance,thispaperhasimplementedboostingthe performancebyusingpipeliningandpartitioningthought.Ontheconformingduplicatecustomerdata,firstlythispaperputsforwardthesorting andequalmatchingalg

4、orithm.Then,inthesituationwhenthematchingkeysexist,this paperprovestheperformanceiseffective.Thispapermakesuseofbusinessrulestobring forwardthealgorithmofprocessingtheduplicatedata,whichhasn’tbeendemonstratedon thispointbefore.Ondetectingerrordata,thispaperputsforwardanapproachthatbusiness ruleob

5、jectsareusedfordetectingerrordataexpression.Thispaperprovesthatthe approachiseffectiveandefficient.Ondataquality,byfullyusingasetofquantitysystemthispaperconformstothedata qualitydimensionanditsimportanceweight,andbywhichtheapproachtoweighted averagedataqualityisusedtoevaluatedataqualityofsystema

6、sawhole.Thispaper makesdataqualityonepartofETLdesign,whichenhancesfeatureofETLdesignmodel andhigherusability.KEYWORDSETL,Metamodel,dataquality,erroneousdatadetection,duplicatedataconformingII~~~上海交通大学工程硕士学位论文符号说明符号说明Abbreviations缩略语Fullspelling英文全名Chineseexplanation中文解释BIBusinessIntelligence商业智能

7、CIFCommonInterfaceFile普通接口文件 CWMCommonWarehouseMetamodel公共数据仓库元模型 DSEEDataStage7.5.1AEnterpriseEditionDataStage企业版 DSSDecisionSupportSystem决策支持系统 ETLExtract,Transform,andLoad抽取、转换和加载 EXFExtractFile抽取文件 GQMgoal-question

当前文档最多预览五页,下载文档查看全文

此文档下载收益归作者所有

当前文档最多预览五页,下载文档查看全文
温馨提示:
1. 部分包含数学公式或PPT动画的文件,查看预览时可能会显示错乱或异常,文件下载后无此问题,请放心下载。
2. 本文档由用户上传,版权归属用户,天天文库负责整理代发布。如果您对本文档版权有争议请及时联系客服。
3. 下载前请仔细阅读文档内容,确认文档内容符合您的需求后进行下载,若出现内容与标题不符可向本站投诉处理。
4. 下载文档时可能由于网络波动等原因无法下载或下载错误,付费完成后未能成功下载的用户请联系客服处理。