数据管控总结

《数据管控总结》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、数据管控交流Agenda数据管控元数据管理数据质量管理数据标准我们通常提到数据管控—数据综合治理能够想到的数据质量问题源系统业务人员录入正确性问题。工行案例：企业财务报表录入日期源系统多系统之间数据不一致的问题。工行案例：对公企业行业分类问题光大案例：客户证件类别操作性业务系统规范对后台分析系统的影响。工行案例：增量完整性浦发案例：前台系统的数据质量建议方案业务统计口径不一致的问题。信用卡案例：睡眠卡的定义解决这些数据问题的手段我们需要有一个尺度作为判断的依据来衡量数据标准我们需要有一个侦测、报告、协助分析治理数据问题的平

2、台：数据质量管理我们需要对数据问题影响进行分析，我们需要对数据进行统一的版本管理和规范管理控制。元数据管理我们需要数据治理是一个工程。我们需要有侦测、分析、解决方案评估、执行的完整流程。我们需要有以下人员的参与：科技部门业务系统的开发人员数据治理的专职人员分析系统的开发人员业务部门解决这些数据问题的手段Governance=People,Processes,Technology针对数据管控我们还能想到什么？时效性问题？数据的安全？隐私问题？数据的生命周期管理问题？。。。。。数据管控机制的建立数据管控的定义管控结构组成部分1

3、.管控任务和指导原则2.管控的组织结构3.业务改善和结果追踪4.数据管理的落地功能5.用户的支持和参与6.SLA有效的管控6个组件每个阶段的执行情况覆盖了所有的开发周期PlanAnalyzeDesignBuildImplementManageGovernanceProgramStructureUserSupport&InvolvementDataCertification&ManagementServiceLevelAgreementsMission,Policies,GuidingPrinciplesIncrementa

4、lProjectPlanning&ImplementationOpportunityScoping&ResultsTracking建立数据管控的考核指标和落地功能数据质量管理元数据/数据标准数据模型数据分布/生命周期管理数据层次/数据流数据安全/数据隐私管理数据安全性数据冗余度数据质量数据规范性数据时效性数据整合度数据DG-KPIDG-KPI载体或工具三大功能和相互关系管控体系中的数据标准、数据质量和元数据之间有着紧密的关系，三者的关系如下：数据标准向元数据提供业务元数据的标准定义，并可以通过元数据平台进行维护；数据标准定

5、义了符合进仓数据的标准和依据，指导数据质量进行有效的质量监测和检查；另一方面，通过数据质量具体的操作来促进数据标准的执行情况；元数据作为数据质量的数据提供者，向数据质量提供包括表、字段、代码等元数据对象及其属性定义，能够帮助仓库的使用者更好的发现数据的质量问题；数据管控应用框架0数据治理组织架构与岗位职责数据治理模板(流程、定义、发布)数据治理认责与考核办法数据标准管理元数据管理数据质量管理数据安全管理数据标准需求管理流程数据标准制订流程数据标准执行流程数据标准维护流程数据质量问题处理流程数据质量需求管理流程元数据变更管控

6、流程元数据需求管理流程数据访问安全数据质量检核规则制订流程元数据调研分析流程元数据维护管理流程数据质量问题排查流程数据维护安全数据备份安全元数据分类模式及属性举例属性名称必填项注释说明标识号M业务属性的唯一标识名称M缩写M缩写或业务属性名称的简要写法同义词代表同一含义的不同术语名词别名其他部门的术语或通俗的讲法定义M该术语属性的详细定义标准标志元数据规范的范围，如全企业通用、部门级别、独立使用等。必填标志M必填、可选、有条件的填写缺省值限制规则取值范围的限制条件是否个人信息是否个人隐私信息，如客户名称、住址、国籍、生日、信

7、用卡信息等保密等级高中低等重要程度是否是对运营、决策等影响重大的关键信息，是否是数据质量检查点元数据创建人M元数据创建日期M最近修改人最近修改日期质量评分根据数据质量评估模型给出的评分最近评定日期元数据分类业务元数据结构化技术元数据关联类技术元数据操作型元数据业务模型主题域业务实体业务属性数据质量业务规则数据库/文件服务器表/视图/文件列/字段数据集成应用数据集成逻辑模型数据集成物理模型数据质量控制规则数据处理应用数据处理作业……分类属性元数据管理的架构元数据的基础功能元数据查询浏览：侧重于对元数据的内容展现和查询方式支持

8、元数据数据分析：侧重于基于元数据的分析功能，从数据中提取对技术、业务用户有用的信息元数据管理：元数据平台的管理功能BI元数据和企业级元数据的互动：企业级元数据经ETL平台加工整理进入仓库，形成BI元数据，可通过血缘分析和影响分析功能查看两者的互动关系；历史对象元数据浏览的灵活性元数据对象关系呈立体网状看