基于归档日志的数据同步服务平台研究与应用.pdf

《基于归档日志的数据同步服务平台研究与应用.pdf》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、SANGFOR深信服科技#李功新’，刘升’，刘金长，杨成月，张翔(1．福建省电力有限公司，福建福州350003；2．福建亿力吉奥信息科技有限公司，福建厦门361009)摘要：福建电网构建数据服务平台的目标是通过对基层电网生产数据整合，来提供省公司一级对电网生产管理所需的数据源，构建稳定可靠的电力业务数据支撑平台。在整体架构设计上将其划分为3层，其中数据抽取层通过直接解析Oracle数据库归档目志，来高速有效的获取原始数据；数据转换层采用基于XML的数据抽取接口，来屏蔽各基层电网生产数据的差异性；数据集成屡通过

2、建立具有福建电网自身业务特色的数据集成模型，使数据目毙能保证现有业务需求叉能满足后期业务扩展需要。该平台的设计方嚣和技术路线对于电力行业中相关数据同步系统的建设具有一定的参考意义。关键词：数据同步；归档日志；GPMSCIM模型0概述层版的业务数据，同时根据业务需况下同步到省公司的数据库中。求作相应的转换、集成，主要具有2007年，福建电力在全省各地(2)业务与负载均衡。在数据如下3方面的功能。市级电网部署安装了电网生产管理同步过程中，需要确保在海量数据的系统基层版(GridProdLICtiOn(1)基层版与

3、省公司版数据的抽取、同步及复制时，现有系统业务ManagementSystem，GPMS)，同步。根据GPMs系统各版本面向的仍然可以顺利开展，不对现有的业务使福建电力输变电生产管理的规范对象不同，省公司版需要抽取、同处理造成任何性能上的影响。化、信息化水平上了一个新的台步、复制各基层GPMS系统的数据，(3)数据中心的建设。为在当阶。GPMS系统基于GIS理论并结合来为省公司版系统的各项业务提供电力生产业务加以实现，同时根据数据支持。因此，必须建立一套机今市场竞争中保持优势，越来越多业务需求分别在各地市部署

4、了基层制和体系，在确保数据库性能和安的电网公司在建设数据中心系统，版并在省公司部署了省公司版。省全的情况下，让基层公司业务数据以便为公司的决策支持系统提供稳公司GPMS系统业务数据来源是各基库中的数据有选择性地在受控的情定、可靠的数据源。如何为数据中201O年第8卷第2期ELECTRICPOWERIT日SANGFOR漯儋服科技⋯⋯⋯⋯⋯⋯⋯⋯心提供完整的数据抽取、转换和装时间是本项目最关键的环节之一。基于以上3个关键出发点，在平载的解决方案，一直是信息化建设台架构的设计上采用分层设计思(2)屏蔽数据差异性。G

5、PMS面临的挑战，同时也是平台建设所想，将其划分为3层，如图1所示。基层版设计目标针对的是各个地方需达到的目标。其中，数据抽取层负责从基层版中局的生产业务。由于地域性的差获取基础数据；数据转换层负责屏异，在描述相同业务上，也可能会l平台分析蔽各基层版数据间的差异性；在数存在数据格式、数据编码上的不一数据同步服务平台研发的关键致，因此在数据同步过程中需要对据集成层中增加省公司相关业务需求，并对各基层版数据进行集成转在于：数据差异性进行屏蔽，将其进行统换以满足业务需求。(1)与GPMS系统无缝集成。一的转换，保证

6、在省公司进行数据集成时具有统一的数据编码格式。电力系统本身特点决定了为保证供2平台设计电的可靠性，电力系统生产环境中(3)满足业务发展需求。福建所采用的软硬件系统必须能够保证省公司和基层局由于组织定位的不2．1数据抽取层7x24h无间断稳定运行，这就要求在同，即使对于相同的业务，所要求数据抽取层在业务数据获取上实现数据同步时所采用的技术实现的数据结构和编码也会不尽相同，采用了Oracle~据库归档日志解析方案，必须要能够同现有的GPMS系因此在数据集成时，要根据相关需方式来获取基础数据，主要通过以统实现无缝集

7、成。即要求数据同步要建立起相应的数据集成模型，来下步骤实现数据同步，如图2所示。服务平台在部署时不会中断现有系描述相关业务，以便满足省公司层统业务运行，因为即便是有计划的面对于业务数据的需求。同时，建(1)数据收集：数据抽取时，业务中断，也会对电力企业造成巨立的业务模型还需要满足后期业务通过源端进程结合数据抽取接口来大的损失，大大降低服务质量和客发展要求，并可方便灵活地进行修收集数据，此进程的独特之处在于户满意度。改和扩充。它几乎不对源端数据库产生任何开据业界估计，80％的停机时间都源于计划的下线，其中包括软

8、件系统部署、升级和硬件迁移等。因此尽量缩短软件系统部署i"一--22：2l12-；7i2j过程所需要的时间-是提高系统连续运行的关键，因此，如何保证数据同步服务平台同现有GPMS系统的无缝f基层局(直管直控)部署GPMS基层版数据库服务器蠡}油集成，并尽可能的一l，、南一营北?～=呼销一一：管叫～二中一理_二数心¨据数二二_l2据库i一-~：i库=一；·：；．1l∞1《l毪I§：a重藿：垂■I睡I

9、