分布式数据系统在煤矿瓦斯综合监管系统中的设计研究

《分布式数据系统在煤矿瓦斯综合监管系统中的设计研究》由会员上传分享，免费在线阅读，更多相关内容在工程资料-天天文库。

1、系统通过省级监控平台的配置管理中心，实吋对各个节点进行配置的冋步与应用。2.研究内容2.1.统一接口数据接U的统一，是分布式的基础，采用已奋的数据交换基础，并封装成新的对象类，用于系统传输，再在次基础上添加节点健康管理数据交互协议用于节点健康管理，在无法实现统•一接口的环境中，编写接口适配器即(DataAdapter)用于数据到统一接U的转换。2.2.数据量分析在煤矿瓦斯监管中和平台中，传感器的实吋数据作为整个系统的应用基础也是整个系统中数据体量最大的一部分，占奋整个系统90%的数据存储量。苏中包含传感器每30秒一次的实吋数据、传

2、感器的配置的变更信息以及节点的健康状态信息。其余10%包含了瓦斯报警记录、掉线报警记录、报警处置信息、短信发送记录、数据库管理日志以及系统节点运行的操作日志等信息。2.3.数据存储位置选取经过对比研究与实地测试，为实吋数据选择合适的存储位置是系统高效运行的保证，将数据放置在县一级平台是最合适的，平均20矿/县的数据容量在2000W/县/天，也就是1GB左谷，数据得到奋效的分布式存储，降低带宽的负载，既可以保证底层数据的冇效存储可以保证系统高层数据的高效的传输。2.4.数据同步方式实吋数据作为基础数据，由于体量较大，经过煤矿数据采集

3、点采集到县一级平台进行存储以后，便不再同步到其它平台，实吋数据在县级平台进行分析处理以后生产的报警信息则进行数据的逐级向上同步，冋吋对告警信息的处置信息也逐级向下同步。数据同步标志位，作为数据同步是否完成的依据，数据冋步的方式以即吋冋步为主要步骤，确保实时数据的快速性，以定吋同步为辅，解决及吋冋步出现的网络不畅，或者出错吋采用的额异步同步，解决数据的稳定性，确保所冇数据得到冇效的分发。也确保分布式系统中数据的唯一性和实吋性。2.1.数据传输机制经过对数据传输方式对比以及开发的难以程度，从Socket,数据库镜像服务,WCF中，选择

4、了.NET的WCF数据服务平台进行处理，Socket传输效率高，但是开发较难，不宜快速的扩展，镜像服务需要的网络带宽较大而且无法编写逻辑。WCF中和了前两者的优缺点，拥有快速的扩展性和较高的传输效率，并II可以自定义业务逻辑，WCF可借助IIS,WindowsServer等宿主进行发布，部署难度低，可维护性好，传输可配置，结合省级节点配置中心的管理，可快速修改配置内容。煤矿瓦斯分布式系统采用任务和服务两种方式来区分数据流向，服务用于向外部提供服务，如接收实吋报警数据，传感器实时信息，节点健康信息等，任务用于向另一个服务发送相应的数

5、据信息。2.2.容错处理数据在传输过程中，容易被黑客进行串改或者由于网络波动造成数据丢失甚至出错，为了确保数据的准确性，数据的每一次传输过程中都会附带数据校验码，数据校验码由待传输数据与系统节点Applicationld相结合后进行AES加密后进行传输，接收到数据后按照相应的方式进行AES解密，如果出现数据异常则解密失败或者Applicationld无法识别吋则放弃数据。并返冋给发送方接收未成功，发送端会再次将数据发送到发送队列中等待发送。2.3.配置统一管理分布式存储与分布式数据传输，需要一个统管中心来进行协同操作，应用节点每1

6、0分钟会从统管中心获得最新的配置数据，来适配当前的服务，确定当前的服务的起停状态，如瓦斯报警分析服务，瓦斯报警同步任务等等。也可以修改同步的地址等等信息，确保当节点出现问题时可由备用节点/或者其它节点快速的进行业务的承接。2.1.数据备份管理分布式存储系统也需要对数据进行存储，针对省市平台的数据备份由于数据量小几乎不会有太大问题，按照日常的数据管理规章执行即可，但是对于县级平台的实吋数据则会出现较大的困难，在系统中由于数据量大，数据存储应进行纵向分表，即按照时间日期进行分表分库进行存储，管理员可以方便的对数据进行分离，使用移动存储

7、介质快速的拷W进行离线存储，在需要对历史数据进行追溯的情况下可以快速的对数据进行附加操作，不需要进行数据库的备份命令等消耗大量10的操作。3.结论煤矿瓦斯综合监管平台在分布式数据存储，结合省级配置统一管理中心可以使得系统高效，稳定的运行。系统具冇容错容灾的功能，确保瓦斯监控系统的完整性，及吋性，稳定性。解决现有瓦斯监控系统带宽消耗量过大，数据传输量过大，数据响应缓慢，数据安全性等一系列问题。参考文献：[1J.AQ1029-2007,煤矿瓦斯监控系统及检测以及使用管理规范[S].[2].AQ6201-2006,煤矿安全监控系统通用技

8、术要求[S].[3】.国家安全生产监督管理局，煤矿安全规程[M】.北京煤炭工业出版社，2011.[4].CLRviaC#第三版，清华大学出版社.[5】.WCF全面解析，电子工业出版社..WindowsServer2008R2配置指南，清华人学出版社