分行29930机房断电事故调查报告

《分行29930机房断电事故调查报告》由会员上传分享，免费在线阅读，更多相关内容在工程资料-天天文库。

1、分行9.29/9.30中心机房断电事故调查报告省分行信息技术管理部:2011年9月29日12点50分及2011年9月30日8点10分，分行中心机房（以下简称机房）接连发生两次断电事故，造成郴州分行全辖所有业务分别中断45分钟、14分钟。经调查，确定如下调查结果：1、机房UPS系统为一主一备供电模式，其中UPS1（主机）异常，在主路输入停止，电池放电完毕后自动切换旁路失败，导致UPS2（备机）供电无法送至负载；2、UPS电池损坏，其中UPS1电池几乎完全失去功能，在输入熔断器烧坏后无法支持UPS继续供电；3、机房存在鼠患，在UPS输入配电柜开关上发现老鼠尸体；4、机房强电布线非常

2、不规范，从机房配电柜至供电开关间布线凌乱；5、9月29日断电发生时，给机房供电的两路市电其中一路变压器掉了一相电，同时UPS1烧坏一个输入熔断器；6、9月30日断电系东方万象工程师在未获得我行人员许可的情况下对UPS1进行放电操作，导致与9月29曰同样原因的掉电事故。现将具体调查情况报告如下：一、事故现场调查情况1、9月29日中午12:51分，技术员发现机房断电，网络通讯中断，同时发现UPS设备出现告警，UPS1整流器、逆变器指示灯为红色，旁路与输出指示灯均为绿色。UPS2整流器、逆变器、输出指示灯均亮绿灯。立即通过电话与UPS维保商东方万象技术员联系，在维保商技术员的指导下，

3、手动关停主机Q1（主路输入）、Q4（旁路输入）、Q5（输出），开启Q3（维修旁路），负载由UPS2提供电源，供电恢复。技术员后来发现由电业局提供的国家电网机房专线输入变压器跌落保险掉了一相。2、9月29日19:00，UPS维保商东方万象从武汉抵达现场检修UPS主机，断开UPS1电池开关，发现主输入熔断器损坏，其它元器件无异常，用导线临时替换熔断器（已损坏的），按顺序闭合Ql、Q4、电池开关、启动逆变，在Q5（此时为断开状态）输入端测得正常电压，设备运行正常。9月30日凌晨4时左右，UPS维保商东方万象工程师周劲松携带熔断器配件。3、9月30日8:10分，东方万象工程师姜国清、周

4、劲松关UPS1电池开关、关Ql、Q4，更换保险，合Ql、Q4，测得电池浮充电压404V，合电池开关，测得逆变后端电压正常。合Q5,看显示面板旁路电压正常，断Q3,启动逆变，负载切换到主机，全部恢复正常工作模式，4、随后，东方万象工程师姜国清、周劲松在未征求同意的情况下，擅自做UPS1放电测试，断开Q1，观察电池电压，发现电池电压瞬间由406V掉至362V，欲合上Q1时发现负载已经掉电，于是立即断开Q5，闭合Q3,发现负载仍然没电。郴州分行技术人员发现UPS输出配电柜三个施耐德20A单相空气开关跳闸（分别为网络机房、服务器机房、操作间供电开关），复位后机房负载恢复正常。此时机房状

5、态为：UPS1的Ql、Q4、Q5开关断开，Q3开关闭合，UPS2正常，机房负载由UPS2通过UPS1的维修旁路供给。二、事故原因调查情况2011年9月30日24点，管理部工程师梁承山与东方万象负责人曾志雄抵达，进行事故原因调查。10月1日凌晨1点至4点，在主持下，对29日、30日发生的UPS故障现象及处理过程进行了仔细的回顾与分析。根据掌握的情况，在向省分行信息技术管理部汇报后，确定于10月1日晚对故障UPS进行全面检修及故障排查。10月1日下午，经由省分行向总行申请了故障排查的窗口时间。10月1日22:00,梁开始对设备进行故障排查检修，过程如下：1、22:00,测量三个跳闸

6、的空气开关输出电流分别为：20A、13.5A、10：21A,开关下端接头较松。判断机房负载即将迗到空气开关容量上限，在电网出现波动时容易发生跳闸现象。2、在UPS输入配电柜备机输入开关处发现死亡老鼠一只（取出后发现老鼠全身完全干枯），UPS输出配电柜输出开关及电缆上发现有其他老鼠死后留下的油污。3、检查跳闸空开后端没有发现UPS电源插座接非计算机设备。4、闭合UPS1的Q4开关，测UPS1的Q5（输出）开关输入端电压为399V，401V，399V，50HZ（此时UPS1的Q1（主路输入）、Q5（输出）是断开的，Q4（旁路输入）、Q3（维修旁路）、电池开关是闭合的）。判断UPS1

7、的静态旁路是导通的。5、闭合UPS1的Q1开关，启动逆变后，逆变正常，测Q5输入端电压为382V，383V，382V，50HZ。判断UPS1的逆变正常。6、23:00点报告省分行运行中心，主动关停网络设备、前置机。7、断开UPS输入配电柜上的UPS1输入开关M1，观察电池在低负载（3A）情况下电压下降非常明显，之后断开UPS1的电池开关，UPS1显示面板显示UPS1已经自动切换旁路，旁路输出电压为399、399、399V,经实际测量Q5输入端电压为12.45V、12.53V、12.85V（感