佛山妇保院紧急应对停电10小时：一场无法预演的IT运维应急

来源：HIT专家网      记者：朱小兵     实习记者：邢妍

曾经，有医院信息科主任如此感叹：“停电，是医院信息化最无力的事情。”而这样的事情，在新年开年，就让佛山市妇幼保健院信息中心赶上了。只不过，这次停电不是意外突发掉电，而是计划内的主动停电。虽然主动停电带来的好处是，医院可以有时间做好应急预案，但是实际停电时间达到13小时，这对于任何一位医院信息科主任来说，都不啻为一场“大考”。好在，经过全院努力和供电部门的通力合作，佛山市妇幼保健院抗住了这次计划停电带来的各种压力，医院信息中心更是经历了一场无法预演的IT系统运维应急实战。

停电当天，电力部门现场应急保障，医院转运病人，前来就诊的门诊患者依然络绎不绝

制定超长停电的应急预案

2017年春节假期前，广东省佛山市妇幼保健院接到当地供电部门的通知，由于医院供电线路存在隐患，需要尽快停电对电路进行检修，预计需要停电10小时以上：这是医院建院以来首次遇到的超长时间全院性停电。收到通知后，虽然是春节假期前的最后一个工作日，医院仍然召集相关人员召开紧急会议，针对超长停电制定各部门的应急预案，并从供电部门调配应急供电车，预定在2月5日早8：00到晚18：00进行全院性停电。

通知就是命令，医院上下顿时忙碌起来。因为一旦停电，众多医疗设备以及非医疗设备特别是医院信息系统，都将受到影响。这影响的不仅是医院的正常运行，关乎的更是病人的生命安全。不仅是危急重症、手术患者紧急救治所需的无影灯、呼吸机、心电监测等各种医疗设备离不开电；转运病人的电梯以及患者所需的很多门诊、住院服务都会因停电而大受影响，例如门诊挂号、分诊、缴费以及各种检验、检查、治疗，还有门诊、住院医嘱处方的开具，无纸化程度越高、信息化与业务结合越深的医院，受电的影响就越大。医护人员长期依赖电脑开具医嘱，对于一些药物的完整名称、常用剂量、配伍禁忌等都逐渐变得模糊，一旦转成手工医嘱，就容易发生错误。在超过10小时的超长时间停电中，如何将停电对临床业务信息系统应用造成的影响降到最低成了这次应急实战的最大挑战，因为信息系统还要面对长时间没有制冷而致机器高温自动宕机的可能。

佛山市妇幼保健院信息中心主任 马丽明

据佛山市妇幼保健院信息中心主任马丽明介绍，接到通知后，信息中心立即针对本次超长时间大规模停电制定相应的应急预案，包括停电前、中、后各个环节的应急方案，明确详细的人员分工。特别是针对医院IT系统的核心——主机房、备机房服务器、存储等设备的运行维护，做了详细的应对停电预案，包括停机时间和顺序，机房照明、通风散热以及恢复重启方案等。

据了解，信息中心处理本次停电的难点之一在于：机房服务器、存储的停机策略。在停电前的预案中，医院提前将危重病人转入可以快速临时供电的区域，胚胎养殖、试剂、药物、预防针也提前转移到合适的安全区域。接下来就是各种设备关机、有序开机，这是不小的工作。特别是信息系统，关闭所有服务器、存储交换设备还可以比较稳妥地进行，关键是电来了，所有服务器、存储能否正常运转起来，也是一个问题。这种大规模长时间停电情况在全国各大医院也很少遭遇，而日常中也没有人敢做这样的应急演练，那么预案是否得当将成为考验。

为减少临床因停电带来的干扰，医院信息中心按照各相关部门的工作特点的差异，制定了不同的应急指引，提醒各部门做好移动查房车、笔记本电脑、PDA等移动设备的充电以备不时之需，并提醒住院各相关科室提前打印2月5日工作所需的各种病历、医嘱、各种治疗执行单、需要抽血化验的条码及住院药房提前做好次日的药品配送。同时，指导各临床业务科室在恢复供电后，应如何对停电时未能及时处理的信息进行补录和处理。通知宣传科通过网站、微信、APP、短信等手段通知病人，对于医院停电可能对医院的正常运行带来影响，做出提前知会。

顺利通过停电“大考”

预案出台后，2月4日早上，信息中心就行动起来。首先按分工各自核对任务分解表，下午，开始对交换机、数据库等备份和运行情况进行确认。当晚21时许，开始陆续关闭备机房的业务服务器——包括移动互联网应用、HIS、LIS、PACS等服务器，仅保留主机房的服务器（因备机房不在快速临时供电区域，而医院主备机房双活的设计，不会因备机房服务的关闭，而对业务系统有大的影响）。至21:50许，备机房完成全部虚拟服务器的关闭。

2月5日早上7:30之前，已关闭部分电梯、诊室和候诊屏幕。

2月5日早上7:30之前，医院逐渐关闭了部分电梯、诊室和候诊屏幕。8:00前关闭第三批的设备设施后，8:00进入全院性停电状态。此时，医院自身发电机及当地电力部门在2月4日前就已经部署到医院的两台应急供电车开始发电，8:30医院部分区域恢复供电。值得庆幸的是，医院主机房正好处在快速临时供电区域。虽然临时供电的电压时有不稳，好在有UPS作保障。在这样的供电保障下，主机房一直保持运行，同时信息中心密切关注机房的温度、发电机电力保障和UPS运行情况，不到万不得已不关闭主机房设备。

这时，一些没有经过事前演练的问题开始暴露出来。比如，机房应急灯没有按计划及时点亮，属于电路巡检遗漏问题；虽然配备了手电和头灯，但是很多工作人员没有带。

机房应急灯没有按计划及时点亮；虽然配备了手电和头灯，但大家没带。

不过，预案中为机房温度过高而准备的风机和风扇虽然在主机房没有派上用途，但在不在临时供电区域的备机房的温度控制中却发挥了至关重要的作用。

好在，整个停电过程中，主机房都保持了正常运行！

2月5日晚21:00许，医院全院区开始恢复正常供电。虽然后续的备机房重启、数据同步还有很多工作要做，但是全院IT系统基本上顺利通过这一次停电“大考”！

临床业务有条不紊的背后是信息人的紧张忙碌

经验小结

“我们预先设计和实际操作全套应急方案的根本目标，就是尽可能减少停电对临床业务的影响。”马丽明主任说，“同时要留出余量，虽然通知是停电10小时，但是要做好更长时间停电的准备。”事实证明，这两点全都做到了。

反观此次佛山妇保院停电事件，有以下3点值得反思：

1. 医院停电需有预案和演练。不论是对于突然掉电的被动应急讨论，还是此次佛山妇保院的主动停电（远远超出UPS供电时限）应急方案，两种情况都不常见，但是都需要有预备方案，并尽可能有演练。事实上，这次停电通知虽然来得很紧急，但是马丽明主任带领的信息中心应对得有条不紊，根本原因就在于平素的应急经验积累和训练有素。

2. 各部门要注重协同。面对主动停电，除了信息科能做的各种应急方案，各业务部门、后勤保障部门在制定各自的应急方案时，要相互协同配合，避免出现“盲区”。应急是各方面综合能力的体现，更是对患者生命重于泰山的承诺。马丽明主任说：“有些部门只考虑了自身工作的完成，没有考虑这些工作的先后次序对患者和其他部门工作的影响，例如电梯的关闭时间和次序，个人认为是有待改进的。”

3. 重视舆论的营造和患者沟通。医院可以借助各种信息沟通渠道，特别是互联网工具提前预警，通过网站、院内宣传窗口、短信、APP等提前告知病人，并尽可能将病人就诊预约延后或提前，错峰运行，以减轻停电期间的业务负担。

主动停电13小时，对于一所医院不常见，是一场不可思议的“大考”。佛山市妇幼保健院打赢了新春第一场硬仗，并给全行业脑洞大开的机会。医院信息科，时刻准备着！

【责任编辑：谭啸】