基于数据仓库模型技术构建个人征信系统.pdf

《基于数据仓库模型技术构建个人征信系统.pdf》由会员上传分享，免费在线阅读，更多相关内容在应用文档-天天文库。

1、第31卷第4期北京工业大学学报Voi.31No.42005年7月JOURNALOFBEIJINGUNIVERSITYOFTECHNOLOGYJui.2005!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!基于数据仓库模型技术构建个人征信系统吕罗文，张书杰，余彦峰，翟东升（北京工业大学计算机学院，北京100022）摘要：针对个人征信系统海量数据的存储和应用需要高效能的数据组织结构问题，利用数据仓库的数据建模技术研究了个人征信系统的数据组织结构，设计了系统的数据仓库总体框架.研究认为，个人征信

2、系统组织为3种数据库：基础数据库、CRM数据库和分析集市数据库，采用HOLAP的数据建模技术满足明细数据的存储和多维分析查询的需要.关键词：数据仓库；数据模型；多维分析；个人征信系统中图分类号：TP392文献标识码：A文章编号：0254-0037（2005）04-0362-04数据仓库为企业决策者进行市场分析并做出决策提供了有效的途径［1］.常见的数据仓库模型有：3NF（第3范式）模型、纬模型（包括：星型模型、雪花模型、星系模型）［2］等.数据仓库的实现方式包括基于关系数据库ROLAP（reiationaioniineanaiysisprocessing）、多维数

3、据库MO-［3］LAP（muitidimensionaioniineanaiysisprocessing），和混合数据库HOLAP（hybridoniineanaiysisprocessing）.ROLAP是以二维关系表为核心表达多维的概念，把多维结构划分为维表和事实表.MOLAP是以多维数据模型来组织数据.HOLAP是将ROLAP和MOLAP相结合，HOLAP将多维型的能力和关系型的能力进行整合，能够提供更好的功能［4］.利用HOLAP技术将统计数据以多维数据库的形式存储，而细节数据以关系数据库的形式存储.!系统总体框架整个系统的数据模型总体框架如图1所示.图1

4、系统数据模型总体框架Fig.1Datamodeiarchitectureofsystem收稿日期：2004-10-30.作者简介：吕罗文（1974-），男，重庆人，博士生.第4期吕罗文等：基于数据仓库模型技术构建个人征信系统363系统的数据模型将采用HOLAP的实现方式，以3NF方式存储个人的信用数据，再面向分析主题进行不同程度的汇总聚合，形成2类数据模型：一类是以借款人为中心形成聚合的CRM（customreIationshipman-agement）性质的轻度汇总星型数据模型；另一类是以信贷发放情况、信贷未结清情况等分析主题形成的交易性质的中度汇总星型数据模型

5、，面向分析主题星型模型含有一个称为事实中央表与几个的称为维表的查询表相关联［5］，再利用OLAP工具形成多维立方体进行存储.2数据库模型研究2.1基础数据库模型从工商银行、农业银行、交通银行等金融机构上的个人信贷数据，进入Stagearea（停泊区）进行ETL处理，经过ETL清洗整理过的干净数据存入基础数据库.基础数据库的主要数据要求有：l）保存历史（5a以上）的明细数据；2）要求对历史数据实现异议纠错（意味着具备对历史数据的删除、修改的功能）；3）能够灵活地适应个人征信业务需求的变化.由于要求保存粒度化的明细数据，并且由于建设之初数据质量和业务需求还不稳定，会有

6、纠错和变化.所以基础数据库采用规范化的3NF数据模型，能较好地满足保存明细数据和数据模型随业务需求扩展的要图2基础数据库的数据模型求［6］，数据模型如图2所示.Fig.2DatamodeIofbasedatabase2.2CRM数据库模型系统面向金融机构提供信用报告、信用评分等服务产品.分布在各金融机构的信贷帐户（汽车贷款、房屋贷款、助学贷款、借记卡、准借记卡等）信息整合起来，形成单个借款人完整的信用报告，它是借款自然人为核心展开的，适合以星型模型构建.第l步是将同一身份证类型的不同信贷帐户信息进行整合，如把所有采用公安部个人身份证贷款的信贷帐户信息整合到以公安部

7、个人身份证号码为标识的主体上.数据模型设计采用星型模型（见图（3a））.第2步将不同身份证类型（如个人身份证、军官证、护照等）的信贷帐户信息整合到同一借款自然人身上，同时，需要将modeIfactory（模型工厂：存储分析模型和分析数据的专用数据库）中的分析数据（如对个人信用历史进行统计分析得出的信用评分）导入借款自然人信息事实表.数据模型设计采用星型模型的扩展模型：雪花模型，如图（3b）所示.图3CRM数据库的星型模型Fig.3StardatamodeIofCRMdatabase364北京工业大学学报2005年2.3分析集市的数据模型2.3.l中度汇总星型聚合表

8、对基础数据