欢迎来到天天文库
浏览记录
ID:32349716
大小:6.12 MB
页数:80页
时间:2019-02-03
《【5A版】国网数据中心.pptx》由会员上传分享,免费在线阅读,更多相关内容在工程资料-天天文库。
1、国网数据中心概念数据建模设计梳理采集(ETL)数据存储数据服务总线数据中心建设任务数据整合——3统一(模型、数据源、口径)综合分析——横向分析专业应用——纵向关联分析数据共享——数据服务、企业总线3数据中心目标架构展示层数据分析应用层数据集市层企业数据仓库(EDW)数据存储层数据源层跨专业综合分析营销分析财务分析生产分析设备分析人力分析计划分析综合统计分析电力市场分析营销生产电力市场综合ERP紧耦合业务应用数据营销、生产、综合等业务应用和其它外部数据DSOPSAInfoCube物资分析项目分析跨
2、专业综合集市企业门户ODS数据抽取数据整理数据转换数据汇总集中存储数据分析应用方式展现方式源系统4数据中心执行架构批处理服务性能与可用性服务通用服务最终用户访问数据抽取数据源系统、非系统数据存储知识发现在线分析查询数据访问报表报表元数据管理服务技术元数据业务元数据元数据知识库数据仓库架构数据访问数据访问架构门户系统数据全域服务任务重启与恢复任务调度监控被拒绝数据管理错误处理异常日志与审核跟踪文件传输帮助数据归档线程管理参数化文档管理服务数据注解应用连接服务中间件连接器抽取转换数据集市数据仓库加载
3、数据缓存ODS排序过滤清洗抽取转换关联更新加载DSO套装软件业务5数据中心物理架构业务系统数据库服务器心跳线DSO/DM磁带库光纤交换机光纤交换机磁盘柜存储WEB备份服务器BI应用服务器群ETL/Monitor/AnalysisETLAnalysisHPODSDW/DMBI应用服务器可由多个服务器组成应用集群数据中心建设的终极目标统一且完善的企业信息模型统一数据源、统一数据口径一致的数据出入口(数据服务总线)管控中心(各种专业分析)企业统一数据模型数据边界——顶层信息模型实现最终目标的困难数据源
4、不健全、数据质量差模型统一设计工作量大底层建设成效缓慢10网省电力数据应用所面临的挑战业务挑战现有分析系统仅提供简单的报表能力,功能单薄领导层无法从企业全局角度出发对企业各个业务条线进行跨业务、多角度、多层次的综合分析业务分析系统多集中于各自专业领域,而跨业务专题的分析应用能力尚不具备存在相同数据多头上报并且上报数据不一致的问题缺乏对现有数据的高级分析应用,没有合理地发挥和利用网省电力业务数据资产的价值技术挑战各个业务系统相互独立,业务人员难以进行跨系统业务分析现有分析型系统与相应生产型系统耦合
5、性较强,受到生产型系统影响较大,缺乏对全业务分析的支持数据不一致问题较严重,对于相同业务数据存在多个不同版本各业务系统自行管理数据,业务数据的含义在企业的各个部门内存在不一致的解释各类业务系统内数据质量较低业务因素数据分析类型划分不够明确缺少统一的报表与指标体系规范缺乏明确的数据认责技术因素缺乏规范的数据架构缺乏明确的数据定义数据分布不合理数据模型不一致数据管理不规范缺乏企业级整合的数据缺乏有力的系统实施和使用管控机制数据中心的建设策略短期见效、应用驱动展现全局指标数据,早出成果,短期见效,以应
6、用促建设非源头数据直接导入,健全全局类指标数据转移部分业务系统查询功能切断统计途径推动数据中心应用数据中心建设最终是为解决业务部门专业分析能力而服务,在这个逐步推进、不断完善成熟的过程中,应着重解决影响应用实用性不强的如下几点:好的经验、方法和操作流程是关键,促进信任关系的建立,解决互不信任的局面。在一套有效的方法的指导下,同时遵照一个好的流程,就容易得到领导支持,得到业务人员的有效参与和技术人员的有力配合解决长周期项目中期没有任何产出的现状消除领导及业务人员对数据中心建设疑虑建设期间、获取业务
7、人员对实施过程中的认可和支持,从而不断增强他们对项目的信心及应用实用性的肯定解决企业数据“进口”与“出口”数据统一切断网省业务人员获取统计数据的其他来源,统一定义从数据中心获取切断业务应用向总部交换数据的其他途径123业务部门主导过程中不断出成果切断原有数据统计、汇报方式数据中心的建设方式1、自顶向下(追溯法分析应用法)既先分析报表中指标数据,再根据指标的构成进行追溯分析,直至建设粒度到最小的、不可再分的业务细节数据;这种方式有利于梳理统计类指标,分析企业中各统计指标的口径。侧重纵向数据关联。
8、2、自下而上(数据整合法)这种建设思路是先建立企业的概念模型,然后利用数据仓库和企业建模标准等思想进行全面的数据模型设计、物理模型设计。侧重横向分析和标准建设。3、折中建设建设方法对比方法1.先数据整合、再构建分析应用方法2.先构建分析应用、再进行数据整合(或者不进行全局整合)方法3.边构建分析应用、边进行数据整合优势挑战适用于业务较为简单或业务需求明确数据基础较好有成熟建模经验业务条线复杂、数据基础水平不一、应用需求层次不同要具备成熟的数据标准和数据模型数据整合投入较大,短期内与分析应用收益不
此文档下载收益归作者所有