机房应急预案(通用15篇)

　　在学习、工作或是生活中，有时会有一些突发事件出现，为降低事故造成的损失，就有必要提前进行细致的应急预案准备工作。应急预案的格式和要求是什么样的呢？下面是小编精心整理的机房应急预案，欢迎阅读，希望大家能够喜欢。

机房应急预案(通用15篇)

机房应急预案1

　　为了应对各种突发和紧急事件，特制订以下方案。

　　一、突发和紧急事件指自然因素或其它原因引起（或可能引起）基站财产安全或较多基站中断的所有事件。

　　二、启动基站维护（紧急）组织实施方案的范围：梅雨季节地势低洼基站的防汛；雷电高峰期基站的动力抢修或抢险；大雪（暴雪）基站房屋及铁塔的维护及应急抢修工作；台风、地震前中后基站及铁塔的维护；传输或MSC（BSC）故障造成基站大面积故障，故障恢复后基站网络的测试。

　　三、启动基站维护（紧急）组织实施方案的条件：天气和各种地质灾害预报或由此可造成（或正在造成）基站的财产安全和网络稳定运行，网管统计发现大面积网络故障时必须立即启动基站维护（紧急）组织实施方案。

　　四、对于由自然因素可能引起的基站及分布系统站点的财产安全和网络稳定运行，得知地质或天气预报后，立即组织各代维项目部区和相关工程施工单位对所在地的站点进行预防性巡检，对于各种隐患要求各项目部现场及时上报给我公司灾害预防和处理应急领导小组和各地移动公司应急领导小组。

　　五、我公司应急领导小组成员和各代维项目部所有维护人员在重大灾害预防和抢险过程中的的移动电话必须24小时开机，必须无条件服从公司应急领导小组和代维项目经理统一安排，若某项目出现人员不足的情况下，公司临时从总部或异地抽调人员和车辆参加抢险；凡当地移动公司所辖站点不是我公司维的护站点出现重大险情后，我公司抗灾任务又不重时，各项目部要主动向移动请缨。

　　六、公司在每一次抗灾救险活动结束后

　　公司应急领导小组应对本次活动的成功经验和教训进行总结，对表现优秀的团队或个人进行表彰，表现较差的团队或个人进行处罚

　　七、重大灾害预防和抢险的人员组织机构：

　　领导小组由总经理，副总经理，各部门经理及地区经理组成，总经理为总指挥，各代维项目部也应成立相应成立相应的抗灾救险领导小组。

　　八、抗灾救险人员安排：

　　公司总部和各代维项目部应包括以下小组

　　1、通信保障组：在发生险情时提供移动通信应急保障，负责实施应急通信的详细方案、应急中所需的备品、备件、测试仪表、工具、技术资料的保管及预防性维护保障工作。

　　2、物资调拨组：负责所有应急物资日常保管、定期检查、更新以及应急时的调拨和运送。

　　3、抢险救灾组：负责应急时的抢修和救灾方案的实施

　　九、值班制度

　　1、各代维项目部在启动抗灾救险预案后应实行24小时值班制度，设立固定值班地点和24小时值班热线。

　　2、全体应急人员保持24小时开机。

　　3、在接到上级关于进入应急状态的'通知后，即由领导小组成员组成指挥中心。

　　十、体保障措施细则：

　　1、根据每年的雨情在进入梅雨季节后将基站及分布系统代维的工作重点转为重点机房、基站等重点防汛场所的巡视，故障处理。在遇到突发或紧急时间期间，加强对重点基站、低洼基站及传输机房的巡视，确保环境监控系统工作正常。重点基站及传输机房一周一次，低洼基站二周一次。台风期间每天对拉线塔进行巡检，并填写基站巡检表。

　　2、重点保障地点预置好防汛抢险物资。并给各维护小组配备部分随车抢险物资。如编织袋、铁锹、雨衣、雨靴、防火泥、防火包、手电等。对抽水泵，移动油机进行保养，确保其工作正常。对应急灯、应急手机定期充电。

　　3、出现连续暴雨或台风情况时，维护人员每天对重点站点及所有拉线塔进行巡视，填写基站巡检表。发现紧急情况立即通知我公司地区经理和移动代维管理人员，由代维管理人员上报移动部门领导，并赶赴现场确认，视情况确定是否安排专人（人员由综合部安排）进行24小时值守。

　　4、网管值班人员对环境监控设备出现的告警密切观察并记录，若确有异常情况发生，立即通知我代维人员赶赴现场检查。并追踪代维人员的处理情况和反馈结果，若发现代维人员未及时处理，我网管值班人员应立即向我公司和移动公司汇报。

　　5、进入汛期后由各项目部负责每天了解所在区域的水位情况，并通知网管值班人员，由网管值班人员通知我代维人员及移动代维管理人员，根据水位情况合理调度巡视队伍与车辆。

　　6、收到台风警报后，各项部项目经理立即组织代维人员对全区拉线塔进行巡检，发现异常发现紧急情况立即通知移动代维管理人员和我公司应急领导小组，视情况确定应急措施。

　　7、收到大雪或暴雪预报，组织维护人员对所辖基站中拉线塔基站、彩钢瓦基站进行重点巡检，当得到网管或其他人员通知所辖基站中有拉线塔基站、彩钢瓦基站出现故障或非正常情况，立即派抢修人员奔赴现场，并逐级上报。

机房应急预案2

　　计算机机房作为所有业务、应用系统的核心，一旦计算机机房发生突发事件，将对单位的数据等造成严重损失。为此，特制订机房突发事件应急预案。

　　一、机房突发事件定义

　　机房突发事件是指由特殊原因引发威胁机房安全并且不能通过日常维护手段解决的事件。比如，火灾、漏电、断电等非人为或者人为的事件，重大突发事件发生后，应立即组织现场救护或临时处置，控制事态发展，最大限度地减少损失和影响。

　　二、机构和职责

　　机房突发事件应急小组单位领导：

　　机房突发事件应急小组部门领导：

　　机房突发事件应急小组成员：

　　各责任人职责：

　　应急小组单位领导：负责单位层面及范围内的决策与领导。

　　应急小组部门领导：负责部门层面及范围内的`决策与领导并组织实施突发事件预案。

　　应急小组成员：按岗位职责分工，听从指挥，服从安排全力以赴解决突发事件。

　　三、突发事件报警

　　应区分原因在第一时间报警。

　　自然灾害（火灾），拨打火警电话：119人为事件（非法盗取、攻击等）拨打匪警电话：110人员伤亡，拨打急救电话：120其他时间（断电等），拨打值班电话：

　　四、突发事件处理

　　突发事件发生后，应立即启动应急预案。

　　1、失火、漏水：

　　视事件的紧急程度，应急小组成员要在领导的指挥下，有组织、有顺序的备份数据、关闭服务器的电源；组织人力转移设备。如果自动设备未能正常启动，应在组长安排下首先切断机房的水、电路，组织人力采用灭火器等灭火设备人工灭火，同时要在第一时间报警。

　　2、断电：

　　在城电断电的情况下，机房的备用电力将发挥作用，电力供应最长可持续4小时。由于机房空调没有备用电力，如确认是供电局断电，应立即联系发电机发电；如果不是供电局断电，而是由于办公楼电力线路故障引起的断电，应立即通知电工查找原因，尽快排出故障。如果无法尽快恢复供电，在电力延续期间，应尽快结束未执行完毕的任务，如无法完成需及时备份数据，同时应关闭所有非必须服务器，尽量不让机房温度过高，保证网络设备的正常运行，以便保障集中在单位的应用系统能正常使用。

　　五、恢复生产

　　突发事件结束后，有关人员应首先对现场进行清理，汇总损失情况并上报各级领导。紧急召开专项会议分析损失情况，制定数据恢复计划。设备损失的要及时更换设备，保证恢复计划的顺利进行。

　　恢复生产后，系统管理员应对各系统进行自查，上报书面报告，并由部门领导汇总后上报单位领导。

　　机房管理员在恢复生产后要及时检查各项维持系统，如UPS、灭火器、漏水、漏电探测器等是否正常运行，应及时更换受损的元器件，补充灭火器的填充物。

机房应急预案3

　　机房建设消防规范：

　　机房消防系统要求根据国内外实际经验要求使用七氟丙烷（FM200）气体灭火系统，安装时各种管道及阀门必须按照国际标准执行，投标时要求注明各种附件的规格，安装结束后，必需经相关消防部门验收合格。

　　（1）整体机房应设火灾自动报警系统，并应符合现行国家标准《火灾自动报警系统设计规范》的规定。

　　（2）整体机房必须设置火灾报警装置，报警装置安装在值班人员随时可以发现的位置。

　　（3）主机房的消防系统按要求分成三个消防区，即天棚吊顶上方为一区，机房空间为二区、活动地板下为三区，在每个消防区内应按相关要求设置烟、温感探测器和灭火气体。

　　1、机房建筑规定：

　　机房主体结构应具有耐久、抗震、防火、防止不均匀沉陷等性能，变形缝和伸缩缝不应穿过主机房，室内顶棚上安装的灯具、风口、火灾探测器及喷嘴等应协调布置，并应满足各专业的技术要求，机房围护结构的构造和材料应满足保温、隔热、防火等要求。

　　机房的耐火等级应符合现行国家标准《高层民用建筑设计防火规范》、《建筑设计防火规范》及《计算站场地安全要求》的规定，当机房与其它建筑物合建时，应单独设防火分区机房的安全出口，不应少于两个，并宜设于机房的两端，门应向疏散方向开启，走廊、楼梯间应畅通并有明显的疏散指示标志，主机房、基本工作间及第一类辅助房间的装饰材料应选用非燃烧材料或难燃烧材料，电子计算机机房内的给排水管道应采用难燃烧材料保温。

　　2、机房的消防与安全规定：

　　机主机房、基本工作间应设二氧化碳或卤代烷灭火系统，并应按现行有关规范的要求执行，机房应设火灾自动报警系统，并应符合现行国家标准《火灾自动报警系统设计规范》的规定，报警系统和自动灭火系统应与空调、通风系统联锁。空调系统所采用的电加热器，应设置无风断电保护，机房的安全设计，除执行本章的规定外，尚应符合现行国家标准《计算站场地安全要求》的规定，用于非常重要的场所或发生灾害后造成非常严重损失的机房，在工程设计中必须采取相应的技术措施。

　　3、消防设施与安全措施：

　　设置二氧化碳或卤代烷固定灭火系统及火灾探测器的机房，其吊顶的上、下及活动地板下，均应设置探测器和喷嘴，主机房宜采用感烟探测器，当设有固定灭火系统时，应采用感烟、感温两种探测器的组合，当主机房内设置空调设备时，应受主机房内电源切断开关的控制，机房内的电源切断开关应靠近工作人员的操作位置或主要出人口，主机房出口应设置向疏散方向开启且能自动关闭的门。

　　并应保证在任何情况下都能从机房内打开，凡设有卤代烷灭火装置的'电子计算机机房，应配置专用的空气呼吸器或氧气呼吸器，机房内存放废弃物应采用有防火盖的金属容器，机房内存放记录介质应采用金属柜或其它能防火的容器，根据机房的重要性，可设警卫室或保安设施，还有电子计算机机房应有防鼠、防虫措施。

　　4、机房管理人员必须做到以下规范：

　　加强消防管理，防止火灾危害，保护机房、人员的生命财产安全，机房管理人员要熟悉消防法规、消防工作管理制度及应急措施，熟悉消防重点部位的布局、建筑特点、防火区域及疏散通道走向、消防设备的配置情况，熟悉并掌握各类消防设施的使用性能和操作方法，还要对管理范围内的各种消防设施、器材进行检查，确保设施、器材的完好有效，发现设备故障时，应及时报告，定期对机房供电线路及照明器具进行检查，防止因线路老化短路造成火灾，严禁携带易燃、易爆、易碎、易污染、强磁、有毒物品等危险品进入机房，认真巡视检查，做到人走关窗、断电、锁门。

　　初期火灾扑救，必须掌握一定的灭火技能，遇火情时应积极扑救，及时向报告消防安全工作领导小组和消防中心报警，并保护好现场。

　　机房管理人员必须对消防设施、器材维护管理：

　　1、消火栓不应被遮挡、圈占、埋压。

　　2、机房管理人员对机房消防设施、器材要加强维护保养，确保其完好无损。

　　3、发现异常情况，遇到有人破坏，要马上采取措施并报告报告消防安全工作领导小组，不得延误。

　　4、灭火器应保持铭牌完整清晰，保险销和铅封完好，应避免日光曝晒、强辐射热等环境影响，灭火器应放置在不影响疏散、便于取用的指定部位，并摆放稳固，不应被挪作它用、埋压或将灭火器箱锁闭。

　　机房消防应急预案措施：

　　为确保机房安全与稳定，以保证正常运行为宗旨，按照“预防为主，积极处置”的原则，本预案适用于机房存在的重大火灾隐患和因各种原因发生的火灾事件等。

　　机房火灾预防措施：

　　1、走廊、楼梯等公共部位严禁堆放物品，保持通道畅通。

　　2、机房全体人员应有高度的防火意识，禁止在机房内存放易燃易爆物品，禁止在机房内吸烟或使用明火，禁止在机房内乱拉电线。

　　3、消防器材由专人负责保管，定期检查消防器材。未经许可，禁止擅自移动。

　　4、每月进行一次电源开关、电器和线路的检查，发现故障、老化、破损、绝缘不良等不安全因素，必须及时报修，并做好记录备案，消除安全隐患。

　　机房火灾处置：

　　1、确认机房设备区域火情后，根据现场情况实施机房区域气体灭火操作。

　　2、消防应急指挥小组进入现场，开展灭火救援行动。在消防人员未到达火灾现场时，应打开应急通道，组织现场无关人员有序疏散，并派人及时切断电源，隔离火灾危险源和重要设备，充分利用中心消防器材进行灭火。机房发生火灾，应遵照下列原则：首先保人员安全；其次保关键设备、关键数据安全；三是保一般设备安全。

　　3、协助消防员灭火。在自救的基础上，当专业消防队到达火灾现场后，火灾事故应急指挥小组要简要的向消防队负责人说明火灾情况，听从消防队的指挥，并全力支持消防队员灭火。

　　4、机房消防与大楼值班室相连接，值班人员发现报警器报警或发现火情时，应在迅速确认后电话通知大楼监控中心，并根据火情直接报119火警。

　　5、电话通知应急指挥小组，启动应急预案。报告后，应根据火势情况，向周围人员发出火警信号。

　　机房火灾后处理方案：

　　1、火灾消除后，应将抢运的设备物资放置在安全场所，并登记造册，计算火灾损失。

　　2、火灾消除后，对火灾现场进行清理，消除烧毁物资，杜绝火势复燃。

　　3、灾后值班人员和安全主管人员应配合消防部门和公安部门分析火灾原因，明确火灾责任人。

　　机房消防安全应急预案2

　　为认真贯彻落实《国务院关于特大安全事故行政责任追究的规定》，积极提高我公司重点要害部位特大安全事故应急处理能力，努力减少各类特大安全事故所造成的损失，消除火灾事故的隐患，保障公司财产和员工的生命安全，特制定本预案。

　　本预案针对我公司通信机房的火灾而制定。

　　移动通信机房灭火流程如下：

　　（一）值班人员发现机房火情（包括监控中心人员）要立即到现场查看。

　　（二）如果是个别电路盘着火，应拔出着火的电路盘，用1211或二氧化碳灭火器将火扑灭。

　　（三）某机柜几块电路盘及电缆着火，应立即拔出着火的电路盘，用1211或二氧化碳灭火器喷射灭火剂将火扑灭。

　　（四）如果机房的机架机柜着火，值班人员无力自灭自救时，监控中心应切断机架机柜电源或楼层电源，关闭空调，严禁开窗,及时向公司安全生产管理领导小组报告。

　　（五）公司安全生产管理领导小组指挥机关义务消防队队员进行灭火,组织值班人员立即撤离现场，封闭门窗，按下区域自动灭火按钮灭火，同时拨打119报警，大声呼救，报告公司主管领导或安保值班室，监控室广播火警。

　　（六）在消防队到达后，应积极配合，简明扼要说明着火位置，火势情况和已采取的补救措施。

　　（七）用1211或二氧化碳灭火器喷射灭火剂能把火扑灭的，应配合消防队保护现场和消除隐患，防止再次着火。

　　（八）用1211或二氧化碳灭火器不能把火扑灭时，为防止烟熏引起人员中毒，应组织人员有序疏散，使用相应的灭火器材灭火，尽快将火扑灭。

　　（九）应保护好现场，按照事故调查处理办法执行。

　　（十）火灾报警电话：119

　　本预案应注意的特别事项

　　1、当发生火灾情况，进行处理并保证人身安全的同时，

　　根据设备的重要性进行相应的抢救措施，保证重要设备，特别是直通电话，以及与冀北、华北相应数据的上传，保证通道畅通。

　　2、抢救完主要设备，在进行次要的设备抢修，待事故处理完毕后，进行相应的实验，保证设备的运行性，并进行设备的可行性分析。

机房应急预案4

　　一制定目的

　　为应对医院突发性大面积停电事故，迅速有序地组织和恢复供电，确保病人生命安全和减少财产损失，保证医院用电畅通，促进事故应急工作的制度化和规范化，依据国家相关法律法规，结合我院实际情况，制定本预案。

　　二适用范围

　　本预案所称“突发性大面积通电事故”（下称“大面积停电事故”）是指因严重自然灾害重要设施损坏或遭受破坏等原因造成突发性的全院大面积电力系统安全防线失效，电网发生大面积瓦解或崩溃的事故。

　　三应急原则

　　大面积停电事故处理工作贯彻“预防为主，常备不懈”的方针，遵循“统一领导，完善机制，明确责任，加强合作，快速发应，措施果断”的原则。

　　四组织机构

　　医院成立大面积停电事故应急领导小组，下设应急抢修队。

　　1、医院大面积停电事故应急领导小组组长：

　　总经理副组长：

　　院长成员：

　　人事行政部经理后勤主管电维修工职责：

　　（1）做好日常安全供电工作，落实安全生产责任制，防范大面积停电事故发生。

　　（2）发生大面积停电事故时，及时做好停电事故应急工作，尽快恢复供电。

　　（3）根据大面积停电事故严重程度，决定启动和终止应急预案。

　　（4）及时向上级报告事故情况并向社会公布。

　　（5）必要时请求外力支援。

　　（6）领导小组组长是履行本预案规定的第一责任人。成员单位应在领导小组的.统一指挥下，各司其职，各负其责，通力合作，做好大面积停电事故时的社会综合应急工作。

　　2、应急抢修队队长：

　　后勤主管成员：

　　电维修工职责：

　　发生事故时，组织人员实施救援行动；向指挥小组汇报事故情况，必要时向供电部门发出求援请求，事后总结应电路还是低压电路。如果高压电路出现故障，医院电工立即导入备用电源，应及时与供电部门抢修班联系，尽快恢复，保证用电；如果医院抵押电路出现故障时，应快速查明原因，按照操作规定恢复电路。

　　（二）部门科室应急程序

　　1、各科室接到停电通知后，应该在允许情况下吧所有的及其电源切断，待电路恢复正常后再投入使用。

　　2、接到停电通知后，立即做好停电准备。如有抢救患者使用备用电源。

　　3、突然停电后，立即寻找抢救患者及其运转的动力方法，维持抢救工作，并开启应急灯照明等。并应及时通知电工或总值班。

　　4、危重患者手术中使用呼吸机的患者平时应在机旁备有简易呼吸器，遇突然停电，医护人员立即将呼吸机脱开，使用简易呼吸器维持呼吸。使用电动吸氮的患者，用50ml注射器接吸氮管吸氮。

　　5、如双线均突然出现供电故障，院内发电机供电前，医护人员则应首先保证病人抢救；护士应沉着镇静，上呼吸机者采用手抱球法，上监护仪者采用人工测血压脉搏，电动吸氮者则采用50毫升注射器接吸氮管抽吸等，严密观察并请变化，其余工作人员则立即电话通知电工，人事行政部，并采用应急灯供照明。

　　6、加强巡视病房，安抚患者，同时注意防火防盗。

　　7、电梯遇到突然停电后，后勤人员要做好乘客思想工作，向外面打电话，用人工方法把所有乘客放出去。

　　六保障措施

　　1、电工日常应做好发电机的维护保养工作，保证发电机随时投入使用。

　　2、电工平时要掌握供电知识和操作规范，注意操作安全。

　　3、临床科室常规备有应急灯电筒等照明用物，定期检查，保持完好状态。

　　4、后勤部门要组织进行应急停电演练，每年1-2次，通过演练，使大家熟悉掌握突发停电的应急处置程序，确保病人安全。电路还是低压电路。如果高压电路出现故障，医院电工立即导入备用电源，应及时与供电部门抢修班联系，尽快恢复，保证用电；如果医院抵押电路出现故障时，应快速查明原因，按照操作规定恢复电路。

机房应急预案5

　　总则

　　1.1编制目的

　　为高效有序地做好机房火灾事故的应急处置工作，避免或最大程度地减轻火灾事故造成的损失，保障员工生命和企业财产安全，维护社会稳定。

　　1.2编制依据

　　《中华人民共和国安全生产法》《江苏省消防条例》

　　1.3适用范围

　　适用于机房火灾事故的现场应急处置和应急救援工作。

　　2.事件特征

　　2.1事件类型及危险性分析

　　2.1.1电气线路短路、过载、接触电阻过大，静电，雷击等强电侵入，机房内电脑、空调等用电设备长时间通电过热、设备故障等原因均可能引起计算机房的火灾事故。

　　2.1.2机房火灾事故会造成计算机设备损坏、系统故障网络中断或瘫痪，影响网络的安全运行。

　　2.1.3火灾产生的有毒烟雾污染机房的空气，造成人员中毒、窒息等人身伤亡事故。

　　3.应急组织及职责

　　3.1火灾应急指挥部

　　应急指挥部总指挥：

　　机房火灾应急抢险指挥：

　　成员：

　　3.2指挥部人员的职责

　　3.2.1指挥的职责：全面指挥突发事件应急救援工作。

　　3.2.2高低压专业职责：组织、协调本部门人员参加应急处置和救援工作，对发生险情机房切断电源。

　　3.2.3智能化专业职责：监控相关区域事故情况。

　　3.2.4空调专业职责：发现异常情况，及时切断空调、通风系统，做好运行方式的调整和故障设备的'隔离。 4应急处置

　　4.1现场应急处置程序

　　4.1.1最早发现火情者应立即向值班长和机房负责人汇报，机房负责人到现场指挥灭火，

　　同时报告公司领导，启动本预案。

　　4.1.2机房负责人根据事故状态及危害程度做出相应的应急决定，指挥疏散现场无关人员，各应急救援队立即开展救援。

　　4.1.3事故扩大时，拨打119报警电话请求市消防队支援。报警内容：单位名称、地址、着火物质、火势大小、着火范围。把自己的电话号码和姓名告诉对方，以便联系。同时还要注意听清对方提出的问题，以便正确回答。打完电话后，要立即到交叉路口等候消防车的到来，以便引导消防车迅速赶到火灾现场。

　　4.2现场应急处置措施

　　4.2.1机房负责人组织人员迅速查明着火原因。

　　4.2.2发生火灾事故后，运行值班人员在人身安全不受危害的情况下要坚守本职岗位，确保设备运行。

　　4.2.3火灾初起阶段，值班人员要利用区域内常规灭火器（干粉或气体灭火器）进行扑救。控制初起火灾，防止火势蔓延。根据火势情况立即启动气体自动灭火装置。

　　4.2.4被困火场逃生时，应用湿毛巾捂住口鼻，背向烟火方向迅速离开。逃生通道被切断、短时间内无人救援时，应关紧迎火门窗，用湿毛巾、湿布堵塞门缝，用水淋透房门，防止烟火侵入。

　　4.2.5火灾发生时要采取有效措施扑灭身上的火焰，使伤员迅速脱离开致伤现场。当衣服着火时，应采用各种方法尽快地灭火，如水浸、水淋、就地卧倒翻滚等，千万不可直立奔跑或站立呼喊，以免助长燃烧，引起或加重呼吸道烧伤。灭火后伤员应立即将衣服脱去，如衣服和皮肤粘在一起，可在救护人员的帮助下把未粘的部分剪去，并对创面进行包扎。

　　4.2.6在火场，对于烧伤创面一般可不做特殊处理，尽量不要弄破水泡，不能涂龙胆紫一类有色的外用药，以免影响烧伤面深度的判断。为防止创面继续污染，避免加重感染和加深创面，对创面应立即用三角巾、大纱布块、清洁的衣眼和被单等，给予简单而确实的包扎。手足被烧伤时，应将各个指、趾分开包扎，以防粘连。

　　4.2.7消防队到达火场时，应立即与消防队负责人取得联系并交待失火设备现状和运行设备状况，然后协助消防队灭火，并提供技术支援。

　　4.2.8复情况，事故应急处理全部结束，才能恢复生产秩序。

　　4.3火灾事故报告流程

　　4.3.1出现火情后，值班人员除采取有效措施扑灭初期火情外应立即想机房负责人汇报；

　　4.3.2火势无法控制时由机房负责人决定报火警请求辖区消防队救援。并在在火灾事故发生后1小时内向所云汇报突发事件信息。速报内容主要包括事故发生的时间、地点、人员伤亡、设备损坏情况、可能的引发因素和发展趋势等。

　　4.3.3联系方式

　　消防队：119 医务急救：120

　　4.4注意事项

　　4.4.1应急处置时注意防止中毒、窒息、触电、烫伤。

　　4.4.2危险区设好警戒线，并挂好标示牌。无操作权限的人员不得乱动现场设备。

　　4.4.3佩戴个人防护器具时注意检查防护用品合格，且在有效检验期内；正确佩戴使用正压式呼吸器、隔热服、隔热手套、绝缘靴等安全防护用具。

　　4.4.4现场自救和互救时不熟悉现场情况和灭火方法的人员不得盲目进入危险区域，救人前先确认自己的能力和现场情况是否能够满足对他人施救的需要。

　　4.4.5应急救援结束后要全面检查，确认现场无火灾隐患和建筑物坍塌的隐患。

　　4.4.6加强自身防护，避免救火导致人身伤害。

　　4.5附则

　　4.5.1机房应急人员的联系方式。

机房应急预案6

　　中心机房突发事件应急预案

　　第一条

　　机房突发事件包括网络设备或服务器故障、自然灾害（水、火、电等）造成的物理破坏、人为失误造成的安全事件等等。针对突发事件的预防措施如下：

　　1.建立安全、可靠、稳定运行的`机房环境，防火、防盗、防雷电、防水、防静电、防尘；建立备份电源系统；加强所有人员防火、防盗等基本技能培训。

　　2.服务器采用可靠、稳定的硬件设备，落实数据备份机制，安装有效的防病毒软件，及时更新升级扫描引擎；加强对局域网内所有用户和信息系统管理员的安全技术培训。

　　第二条

　　机房漏水应急预案如下：

　　1.发生机房漏水时，第一目击者应立即通知机房管理人员。

　　2.若空调系统出现渗漏水，机房管理人员应立即安排停用故障空调，清除机房积水，并及时联系设备供应方处理，同时启动备用空调，必要情况下可临时用电扇对服务器进行降温。3.若为墙体或窗户渗漏水，机房管理人员应立即采取有效措施确保机房安全，同时安排通知办公室，及时清除积水，维修墙体或窗户，消除渗漏水隐患。

　　第三条

　　机房火灾应急预案如下：

　　1.完善机房环境，确保机房具备二氧化碳灭火器；禁止携带易燃易爆物品进入机房。2.机房管理人员应熟悉机房内部消防安全操作和规则，了解消防设备操作原理，掌握消防应急处理步骤、措施和要领，懂得灭火的方法，会扑救初起火灾，并定期组织灭火演习。3.一旦发生火灾，迅速切断机房电源，避免灾情的扩散，并迅速拨打物业管理和119火警电话。

　　4.等待消防车到来期间，应组织物业保安或工作人员在保证安全的前提下灭火，应急领导小组应在第一时间内集中所有二氧化碳灭火器，抓住时机，尽可能的把火扑灭。

　　5.配合消防部门调查事故原因，对造成的损失和起火原因做好记录，以便进行灾后总结。

　　第四条

　　雷击事故应急预案如下：

　　1.遇雷暴天气，机房管理人员在下班后应及时关闭所有服务器，切断电源，暂停内部计算机网络工作。

　　2.雷暴天气结束后，机房管理人员应及时开通服务器，恢复内部计算机网络工作，对设备和数据进行检查。出现故障的，事发部门应将故障情况及时报告机房管理人员。

　　3.因雷击造成损失的，机房管理人员应会同相关部门进行核实、报损，并在调查工作结束后一日内书面报告领导。

　　第五条

　　设备防盗被盗或人为损害应急预案如下：

　　1.机房管理人员每日查看、清点设备并锁好机房大门。

　　2.机房管理人员每日检查录像监控服务器状态，确保监控画面正常，并检查每日录像正常性、完整性。

　　3.发生设备被盗或人为损害设备情况时，使用者或管理者应立即报告相关负责人，同时保护好现场。

　　4.机房维护人员接报后，通知保安及公安部门，一同核实审定现场情况，清点被盗物资或盘查人为损害情况，做好必要的影像记录和文字记录。

　　5.事发单位和当事人应积极配合公安部门进行调查，并将有关情况向机房管理人员汇报。

　　第六条

　　机房停电应急预案如下：

　　1.接到停电通知后，机房管理人员应及时通过办公系统、电话等发布相关信息，部署应对具体措施，要求用户在停电前停止业务、保存数据。

　　2.机房管理人员每日检查UPS电源的状态，确保在突发停电时，UPS电源能自动供应服务器正常工作半个小时，保证员工工作的数据及时保存。

　　第七条

　　通信网络故障应急预案如下：

　　1.发生通信线路中断、流量异常等故障后，员工应及时通知机房管理人员。

　　2.机房管理人员在接到报告后，迅速组织相关技术人员检测故障区域，并作相关故障处理，必要时通知通信网络运营商查清原因；逐步恢复故障区与服务器的网络联接，恢复通信网络，保证正常运转。

　　3.应急处理结束后，机房管理人员应在一日之内提交故障分析报告，以便备案。

　　第八条

　　服务器故障应急预案如下：

　　1.机房管理人员每日检查服务器状态，检查邮箱服务器状态，确保系统运行的完善。

　　2.机房管理人员定期备份服务器数据，并将备份资料刻录成光盘或拷贝到移动硬盘。

　　第九条

　　1.发生机房突发事件后，机房管理人员应采取有效措施开展先期处置，恢复信息网络正常状态。应急处置工作结束后，机房管理人员对事件发生原因、性质、影响、后果、责任及应急处置能力、恢复重建等问题进行全面调查评估，根据应急处置中暴露出的管理、协调和技术问题，改进和完善预案，实施针对性演练，总结经验教训，整改存在隐患，组织恢复正常工作秩序。

机房应急预案7

　　机房消防应急预案

　　为使信息机房发生火灾事故时，当班人员能镇静有序地处置事件，特制订本预案，请各成员认真学习，熟悉应急处置程序，提高全员的应急能力，一旦发生突发事件，尽最大努力保证员工人身安全和减少损失。

　　起火原因一般有明火管理不慎；电气设备管理、使用不当；纵火等原因。

　　预案一：当闻到烧焦气味时

　　当班人员发现信息机房内有冒烟现象或闻到烧焦气味时，可能是某处阴燃处于起火阶段或电源超负荷发热引起，容易引发火灾，当班人员要立即查明原因和地点，针对不同情况，采取迅速将火源扑灭或关闭电源总开关、隔离火源附近易燃物、关闭窗等措施，消除起火隐患，防止引了火灾。事后立即向安保部门报告，并做好现场保护工作和防止起火点复燃，不得随意离开现场和将事故隐瞒不报。预案二：当班时发现起火或冒出浓烟

　　由于起火源隐蔽或其他突发原因未能及时发现和消除起火隐患，酿成明火和冒出浓烟，燃烧面积不大，就是火灾的初起阶段，当班人员发现起火或冒出浓烟时，切忌惊惶失措，要沉着、果断，会同其他当班人员分工协作，迅速查明原因组织扑救，当火执已无法控制时处置办法：

　　一是指定专人立即拔打“119”火警电话报警和向上级保卫部门报告，并向本部门和周围的`人及群众喊叫报警；二是组织本单位、部门在场的人员有序地投入扑救工作，充分利用消防栓、灭火器、水桶等器材灭火，不能消极等待消防队到来，而错过灭火良机，力求将火扑灭或控制火势蔓延，不能只顾个人安危而逃离火场

　　三是大声呼喊请求邻近单位及群众的支援。

　　四是在组织灭火同时，要立即组织人员疏散和转移物品中，特别昌易燃、易爆物品和易受到火舌威胁的现金、重要凭证要及时转移到安全地点，并派人员守护，确保安全。

　　五是灭火后要注意保护现场，维护好秩序，以利于消防部门调查分析火灾原因。注意事项：

　　报警人员报警时要向消防部门讲清楚起火地点、单位、起火的种类和火势大小，报警后即到街道或十字路口迎接、引导消防车辆的到来；扑救人员在消防人员到来后，要立即向消防指挥人员讲清火场内存放有何种物资和贵重物品，火场内是否有爆炸、剧毒物品，并协助消防部门维护好现场秩序。自行扑救火灾时要留心观察火势和环境，防止被火围困、烟气中毒、坠物砸伤等，在确保自身安全的情况下扑救火灾。

机房应急预案8

　　网络信息中心机房环境主要监控目标对象为：电力供应、火情、空调异常。监控对象表征为：UPS可监控数据（包括输入、输出、负载等）、烟雾、环境温湿度值。

　　环境监控报警根据影响范围不同定为不同级别，予以不同处置，应急处置流程如下：

　　一、紧急告警

　　(一) 机房烟雾告警

　　1. 如消防系统已启动，立即通知相关区域同志撤离机房。

　　2. 如消防系统尚未启动，立刻调出该场地视频监控，确认是否有火情。一旦确认火情，立即疏散，并确认消防系统能正确启动。

　　3. 火警必须在第一时间电话通知中心主任、相关机房安全责任人、办公室主任和环境与设备工程师。

　　4. 按消防相关程序处置。

　　(二) UPS输入掉电告警

　　1. 立刻通知环境与设备工程师和相关机房负责人，环境与设备工程师即刻响应并处理，通知机房负责人电池放电情况。

　　2. 相关机房负责人待命响应，根据需要按预定程序逐级安全关闭各类系统或设备，并通知相关部门及人员。

　　3. 如影响中心关键业务，由机房负责人作出判断，并立即通知业务所属责任部门。

　　(三) 机房地湿告警

　　立刻通知相关机房负责人和环境与设备工程师，现场查看空调底下是否有水管爆裂漏水。

　　备注：漏水事故影响不可轻忽，某些情况下会引起灾难性事故，请务必关注。

　　(四) UPS输出故障

　　1. 立刻通知环境与设备工程师和相关机房负责人，环境与设备工程师即刻响应并处理，通知机房负责人影响范围。

　　2. 相关机房负责人立即响应，如影响中心关键业务，由机房负责人作出判断，并立即通知业务所属责任部门。

　　二、重要告警

　　(一) 监控数据通信中断告警

　　发现监控数据通信中断告警，需要综合查看，首先排查是否网络原因，其次排查是否服务器原因。以下状况考虑环境因素：

　　如果同时有大面积的网络故障和服务器故障，很可能是UPS输出故障，立即通知环境与设备工程师、运行部负责人和系统部负责人。

　　如果是单纯的数据数据通信中断，一般是监控设备死机，在工作时间通知环境与设备工程师处理。

　　1. 机房高温告警

　　立刻通知环境与设备工程师，如判断空调已失效，则需到现场处置。

　　备注：由于机柜上的温湿度仪因热通道和铁架的.热传导作用使得感应温度偏高很多，只能做参考。因此，如夜间发现高温告警，可注意观察，如有持续异常升温则通知环境与设备工程师处理。

　　2. 冷冻水高温告警

　　发现冷冻水高温告警或空调进水高温告警，即刻通知环境与设备工程师处理。

　　3. 市电掉电告警

　　工作时间，立刻通知环境与设备工程师处理。非工作时间，如发生UPS输入掉电告警，按前述流程处置。

　　三、一般告警

　　其他机房环境监控告警，考虑都是设备故障或者部分功能异常，影响面有限，在工作时间通知环境与设备工程师处理。

机房应急预案9

　　高性能计算技术及应用水平已成为显示综合国力的一种标志。高性能计算机持续不间断地为用户提供高性能计算服务，而运维应急预案是主机运行中处理突发事件的依据和方法，是主机系统稳定运行的保障。本文简要介绍上海超级计算中心主机运维应急预案，供同行参考。

　　1.主机和运维管理制度简介

　　超级计算机是功能最强、运算速度最快、存储容量最大的一类计算机。目前只有少数国家掌握研发技术，系统造价非常昂贵，多用于国家高科技领域和尖端技术研究，是国家科技发展水平和综合国力的重要标志。上海超级计算中心作为上海信息港主体工程之一，国家和上海市政府投资先后引进神威-I超级计算机、神威-64P集群计算机、曙光4000A超级计算机系统并投入商业化运行。

　　上海超级计算中心自20xx年正式开通至今，这些高性能计算机系统已安全、稳定运行七年多时间，上机用户取得了丰硕的科研成果和社会效益。在这七年中，为保障这些高性能计算机系统安全、稳定、不间断地运行，技术支持部在中心引进第一台高性能计算机--神威-I超级计算机系统的同时，建立了机房应急预案、运行记录、设备运行参数等基础运维制度，在二期引进曙光4000A超级计算机系统过程中，不断完善原有运维制度，并针对该主机系统特点编写了大量操作方法和应急预案。

　　中心自20xx年获得ISO27001（BS7799）信息安全认证以来，技术支持部根据其要求规范了文档体系建设，形成了机房管理制度、应急预案、操作方法、运行情况记录的四大类运维文档。

　　正是这些运维管理制度的不断完善和有效执行，才确保了资产价值高、服务对象广、社会影响大的中心主机系统安全、稳定运行，保障重点项目、用户服务的连续性。

　　2.应急预案重要性

　　上海超级计算中心机房运维管理文档划分为机房管理制度、应急预案、操作方法、运行记录共四大类（如图1所示）。

　　图1应急预案分类

　　应急预案在应急系统中起着关键作用，它明确了在突发紧急情况发生之前、发生过程中以及刚刚结束之后，谁负责做什么、何时做，以及相应的策略和资源准备等。它是针对可能发生的重大事故，按照其影响和后果严重程度，在应急准备、响应、操作各个方面预先做出的详细安排，是开展及时、有序和有效事故应急工作的行动指南。因此，应急预案在这四类运维管理文档中处于最为重要的地位。

　　3.应急预案分类

　　应急预案按重要性和事件种类，可以划分为消防预案、断电预案、空调预案、其他预案共4种，预案各文档之间彼此独立又互为关联，具有非常强的可操作性。制定预案的指导原则是尽一切可能，最大限度地确保向用户提供的服务不中断。在紧急事件发生的情况下，保证核心设备连续运行，避免存储数据丢失。在事件处置完成后，能快速恢复高性能计算服务。

　　3.1消防预案

　　消防预案是主机房最重要的应急预案。该类预案根据《上海超级计算中心灭火和应急疏散预案》的原则并结合主机房主机设备和消防设备的运行特性而制定。主要由《主机房消防应急预案》和《主机房气体喷淋消防系统启动撤离及处置应急预案》2个文档组成。

　　消防应急预案：该预案着重规范了火警事件发生后，所有主机维护人员如何根据所属区域和现场情况，判断和选择正确的处理方法，同时配合中心物业人员处置，降低事件带来的影响。

　　对于设备发生烟雾，主机维护人员协同物业人员寻找烟雾点予以切断相关区域电源；当设备发生可以控制火情，协同物业人员灭火；当主机房发生火灾而无法控制，应采取施救方法等措施。

　　气体喷淋预案：该预案描述主机房气体喷淋系统启动的响应和确认并具体规定了撤离机房路线、善后处置。

　　这两个预案中，消防应急预案作为消防预案的主体，涉及到如何处理与消防有关情况的各个方面。气体喷淋预案是主机房发生重大火灾时应对的最终灭火手段和人员撤离引导方法。

　　3.2断电预案

　　断电预案的重要性仅次于消防预案。该类预案根据中心供配电系统实际情况和各种断电影响范围下对主机运行的最小保障要求而制定的。主要由《主机房断电应急预案》、《曙光4000A超级计算机系统紧急关机操作方法》、《曙光4000A超级计算机系统双路断电关机操作方法》等多个文档组成主机房断电应急预案：该预案用于断电情况下，主机维护人员如何与中心物业部门联系控制主机房供电情况，并且负责对主机系统运行受断电影响程度做出正确判断。指导维护人员按影响程度，分别选用预案中对应的操作方法。本预案在所有断电预案中起指导思想作用。紧急关机操作方法：该预案制定了主机系统在紧急情况下，最快速度关机的操作步骤。主要用于发生烟雾、明火或消防、断电预案需在数分钟内关机断电的事件。

　　双路断电关机操作方法：该紧急操作预案主要用于在外界双路供电全部中断情况下的操作。

　　该预案的关机原则是：根据实际电力供应考虑操作步骤，宁慢勿快，在时间允许的情况下，最大程度保证存储节点、SAN和SCSI存储设备、工程用户的计算节点的运行，尽可能减少关闭范围，以确保能在恢复供电的情况下，主机尽快恢复正常运行状态，减少影响范围。

　　3.3空调预案

　　超级计算机系统在运行中消耗大量电能，在

　　提供高性能的计算能力同时产生大量的热量，必须采用专用空调系统，以保持主机系统适当的温、湿度、空气洁净度等运行环境需求。因此，专用空调系统与主机系统密切相关，空调预案是主机房必备的应急预案。

　　制定该预案的原因在于，断电情况下，空调与主机系统存在互相牵制的现状。主机和空调系统均为外界双路供电，主机系统配有UPS不间断电源系统，而空调系统无UPS支持。在双路停电情况下，主机系统可获得UPS电池组支持运行若干分钟，空调系统无UPS支持只能停机。由于在无空调冷却情况下，主机系统会在短时间内积聚大量热量导致超过运行警戒温度，主机系统在有可供电余量的情况下，仍将被迫关机。因此，确保空调中断情况下的主机运行环境是该预案的制定原则。

　　预案根据各台主机配备的空调系统特点制定，由《曙光机房空调系统故障应急预案》和《神威机房空调系统应急预案》2个文档组成，这里仅介绍曙光机房空调系统应急预案。

　　该预案的第一步：考虑增强主机系统散热效果，采用打开主机机柜前后门，和机房周边木门，在通风道上布置有UPS支持的应急风扇，形成空气对流，带走热空气，从而增强主机系统散热效果，降低升温速度。

　　该预案的第二步：在采取上述措施并持续升温到一定温度之上的情况下，考虑紧急关闭部分或全部计算节点，减少热量生成，确保主机系统的核心存储和网络系统不受影响，确保空调系统修复后，主机系统能快速恢复运行。

　　3.4其他预案

　　除了固定的三类预案之外，技术支持部还根据主机系统实际运行中出现的各种意外情况，随时制定具有针对性的预案。

　　如《大楼顶棚坍塌应急操作方法》的制定，就

　　是由于20xx年1月连续发生雨雪等灾害性天气，中心大楼顶棚大量积雪且难融化，物业预计存在情况继续恶化，有发生顶棚坍塌事故的可能，一旦发生将影响一楼主机运行。

　　针对该突发的隐患，中心技术支持部制定应急操作方法，对维护巡查频度范围、漏水可能发生位置、如何处理受漏水影响的主机设备等操作步骤进行严格界定。即使在最后，中心大楼顶棚经受住灾害性天气的考验，该预案并未发挥作用，这正体现了应急预案的备而不用的特点。而且通过各种意外

　　情况的迅速分析、应对和实践操练，不断锻炼主机维护队伍，使之走向成熟。

　　4.在实际案例中，应急预案的`作用

　　在主机系统年复一年的运行中，我们希望这些设备正常稳定运行，应急预案永远不会被使用，然而在实际运行中，总免不了因突发事件执行应急预案。

　　而每次突发事件是检验应急预案制定是否科学、有效的最好证明。

　　4.1双路断电，UPS正常运行案例

　　20xx年8月某天，因打雷导致供电一路跳闸自动换至另一路供电，曙光机房2台空调掉电。

　　主机维护人员立即按应急预案操作，电话通知物业人员恢复空调运行，恢复过程中所有空调相继出现高温报警，机柜液晶屏平均温度35度，开启全部曙光机柜前后门，打开神威-曙光玻璃门并调集应急电扇，于12：45恢复正常。

　　12：50再次出现双路供电中断，曙光空调因无

　　UPS支撑全部断电，启动断电应急预案，开启

　　5、6号木门，开启神威机房全部空调，布置电扇，将冷气导入曙光机房，热量从6号木门的外部通道排出，选择性杀除部分作业，至13：05供电恢复，曙光空调开始工作，13：20环境恢复正常。全机在此过程中，正常运行未停机，只损失了部分不重要的作业。

　　4.2单路断电，UPS失效案例

　　20xx年8月某天，因低压配电柜开关至UPS房间X-JM柜电缆发生相对地短路，造成UPS机组逆变器自身保护动作，关闭UPS机组，导致曙光主机系统失电。

　　全机掉电后，主机维护人员迅速按应急预案

　　手工关闭所有电源开关。10：30恢复供电，温湿度恢复正常后，全机加电，恢复过程中修复

　　storage00

　　1、00

　　5、010三个盘阵的9个用户文件系统，修复15个节点加电故障，除cnode00

　　9、anode029电源

　　环境模块故障，于当日15：10全机系统恢复正常。

　　由于处置及时，主机受影响范围很小，在恢复供电后数小时即成功开启全系统。

　　5.随时保持应急预案的适用性

　　主机长年累月的运行，故障和问题的发生，往往是必然的，也是客观、无法回避的。因此，要求在维护工作中，预先考虑到可能的问题和故障，制定完善的应急预案。应急预案不可能包含所有的故障和问题，但应根据维护经验，尽可能地设想各种危机情况下的处置措施。做到预想到各种可能的问题。

　　而在形成应急预案后，更重要的是持续地在

　　运行中加以完善、测试和演练，尽可能模拟实际情况，做到即使只有1名维护人员在场，也能在真正发生危机时，以最短时间独立处置故障。

　　以目前中心的主机运维工作为例，三年内，仅断电预案就已根据实际运行情况的变化，制定并更新了5~6个版本，针对夏季突发断电也有专用预案。这样的措施，直接保障了20xx年8月突发断电事件中的主机连续运行。而20xx年8月的突发断电事件中，由于预案在之前刚根据实际情况进行过演练和修改，主机维护人员仅用半小时就完成所有应急操作动作，整机仅有个别设备故障，确保了主机设备未因突发断电而发生大范围损坏现象，恢复供电后直接完成开机。

　　实践证明，完善而适用的应急预案能保障向用户提供稳定的高性能计算服务。

　　6.结束语

　　完备而适用的应急预案能有效降低主机系统因意外事件发生带来的运行风险，对可能发生的意外来说，是一种事前防范措施。但对整个主机系统产品而言，是一种事后防范措施。如果主机系统生产厂商能把这些防范措施纳入整个系统设计过程中，使操作方法更加简便、更趋于人性化，这将帮助主机维护人员更为妥善处理意外事件，用户得到更为稳定的高性能计算服务。我们相信未来国产的高性能计算机能做到这一点，期待着这一天早日到来。

　　（为帮助了解，特在附录中节选部分双路断电关机预案内容）

　　附录：《曙光4000A超级计算机系统双路断电关机操作方法》（省略具体操作步骤）

　　曙光4000A超级计算机系统双路断电关机操作方法

　　注意：

　　1、本方法专用于主机房发生双路同时断电紧急操作使用。（包括单线断电切换失败）。

　　2、本方法作为《曙光-4000A超级计算机系统紧急关机操作方法》（SSCS(TS)-XXXX-XXXX-XXXX）的附件。

　　1.断电确认及操作：

　　主机房内一旦发现断电，并接物业明确通知为双路断电，首先执行如下操作（即确保节点温度）：

　　1.1打开机房门便于散热，..

　　1.2机房通道上布置应急风扇加强冷热空气对流，夏季：应急风扇布置..；冬季：应急风扇布置..，使曙光

　　机房的温度尽量降低。

　　1.3打开所有机柜前、后门。

　　1.4密切注意机房节点平均温度（专指各机柜液晶面板所示之环境温度值）。

　　2.紧急关机条件确认：

　　在完成上述操作后，密切观察主机房环境。一旦有如下任何一个条件满足：

　　2.1自断电发生起，已达到XX分钟仍未恢复供电；

　　2.2采取上述紧急通风措施，节点温度持续上升，超过XX℃；

　　可认定为紧急断电事件，即刻按下列紧急关机操作方法进行操作。

　　3.紧急关机操作步骤：

　　注意事项：

　　3.1..

　　3.2关机操作的全过程中，注意随时保持和物业的通讯联系。除根据情况随时联络外，应严格保证每XX分钟与物

　　业联系一次，询问UPS可支撑时间及恢复供电可能。（分机、手机、对讲机等）

　　3.3应理解关机原则为：根据实际电力供应考虑操作步骤，宁慢勿快，在时间允许的情况下，最大程度保证X排节

　　点、存储节点、SAN和SCSI存储设备的运行，尽可能减少关闭范围，以确保恢复。

　　第一级操作：（首先执行）关闭主机系统外围设备..

　　第二级操作：（完成上述操作后，当再次发现UPS电池低于XX分钟或节点平均温度超过XX℃，任一条件满足，执行如下操作）

　　关闭非重要用户计算节点（ABC组）..

　　第三级操作：（完成上述操作后，当再次发现UPS电池低于XX分钟或节点平均温度超过XX℃，任一条件满足，执行如下操作）

　　关闭所有用户计算节点（D组）..

　　第四级操作：（完成上述操作后，当再次发现UPS电池低于XX分钟或节点平均温度超过XX℃，任一条件满足，执行如下操作）

　　关闭SAN存储设备和LSF数据库服务器..

　　第五级操作：（完成上述操作后，当再次发现UPS电池低于XX分钟或节点平均温度超过XX℃，任一条件满足，完成关机操作）

　　关闭SCSI磁盘阵列和所有存储节点..

　　特别关注：

　　1.如时间非常紧急，UPS电池低于XX分钟：

　　直接执行关机脚本：..

　　此脚本可分别将计算节点、接入节点、存储节点进行关闭。

　　2.如时间极其紧急，UPS电池低于XX分钟，可按《曙光-4000A超级计算机系统紧急关机操作方法》（SSCS(TS)-XXXX-XXXX-XXXX），直接拉闸操作。

　　（上述二个方法仅用于突发情况，非极其必要情况下严禁使用，应使用前列方法操作）

　　3.如遇主机失电（如关机操作不及已掉电或突发自动掉电）应关闭所涉范围所有设备电闸开关。..

机房应急预案10

　　第一节总则

　　1、保证人员和财产的安全为前提的原则：在由于火灾或电力问题造成的主机故障，在解决故障前，应以保证人员的生命安全和财产的安全为前提，然后进行故障的解决。

　　2、最快时间恢复业务的原则：本着先想尽一切方法，尽快恢复业务的原则来处理故障，如在有备用设备的情况下，主设备产生了故障，应先尽快将应用切换到备用机上，使业务能够运行，再对故障设备进行诊断和维修。

　　3、故障应急人员高度负责的原则：当故障应急人员在节假日接到故障通知时，本着高度负责的态度，应迅速接手处理障碍，如远程无法处理解决，应迅速赶到故障设备所在地，进行现场处理，处理故障的同时应及时向领导汇报。应急人员不可互相推卸责任，如因特殊情况，确实无法处理障碍，部门领导必须安排好其他人员处理。

　　4、尽可能全面的保留故障现场的原则：当故障发生后，应急人员应尽可能全面的备份出能够反映故障现象的各种日志、记录、受损文件等，便于业务恢复后，对故障的分析、解决，杜绝故障的再次发生。

　　应急方案的目标：保证预付卡运营系统连续安全稳定地运行。

　　第二节应急领导小组

　　应急领导小组成员：

　　组长：副组长：成员：

　　第三节电源系统故障应急处理

　　定期检查信息中心机房电源设备的运行状况，当发生下列突发事件时，按以下方案进行处置：

　　当中心机房发生市电供电突然停电或远程报警电源异常时。首先确认是否为正常停电及预计停电时间。检查不间断电源的电池可供电时间，需在不间断电源供电时效内关闭所有服务器及网络设备。

　　联系工程部查看停电原因，尽快恢复供电，并将情况报告相关领导

　　工程部联系电话：

　　第四节空调系统故障应急处理

　　定期对空调的运行情况进行检查，如有报警信息，应及时查找故障原因，对于不能自行排除的问题，应及时与设备提供商进行联系。

　　当中心机房主空调因故障无法制冷，致使机房内环境温度超过摄氏40度时，打开机房房门，并关闭所有服务器及网络设备。对于无法自行处置的'空调系统异常情况，及时与设备提供商联系，并报告公司领导。空调问题联系人：

　　第五节中心机房自动消防系统应急处理当中心机房发生火警时，按以下方案进行处置：

　　1.上班工作时间发生火警，听到自动消防系统发出的声光报警后，中心机房附近办公室人员应及时紧急撤离，避免气体自动消防系统启动后，消防气体对附近人员造成人身伤害。确认火警后，立刻拨打119报警，并说明尽量使用气体灭火器进行灭火，减少电子设备的损坏。

　　2.发生火警后，信息中心相关人员应马上赶赴现场，并向有关领导报告事故情况。同时立即联系联通等相关公司，及时评估事故损失情况，研讨尽快恢复信息系统正常运行的最佳方案。安保消防中控电话：

　　第六节设备、网络系统故障应急处理

　　设备、网络应用系统故障应由发现人通知技术部，技术部门立即检查故障，进行初步故障定位，解决；

　　1．网络设备、服务器、储存设备均有备份，当设备存在硬件问题时，可随时把业务切换到备份主机上，保证业务正常运行；2．应用系统每更新一次则做一次远程备份，在远程主机上分别备份旧的应用系统和更新后的应用系统，以当天的更新日期命名；3．对磁盘柜上的数据库文件有定时任务，每天凌晨4：00会把数据库里的数据文件倒出到远程备份主机上，以确保磁盘柜出现硬件故障的时候，数据文件不丢失；对于网络、应用系统出现硬件方面的故障，比较严重的问题，对业务的正常运行造成较大的影响，立即向有关领导报告。

　　4、网络中有监控服务器，运用Cactiv10最新的版本，监控网络所有设备（路由器，防火墙，交换机以及服务器设备）；对设备本身的硬件检测、外部入侵检测、外部攻击等多种对系统不利因素以发送mail的形式报警；相关人员收到报警信息，分析收到的log日志以做出相应的处理。

　　5、每周周五对网络设备进行日志及配置文件采集，对数据库数据文件定期下载，和远程备份；在本地电脑上保存最近的配置文件，以便在发生毁灭性的灾难时，用来重组。

　　对简单故障，运维人员应迅速排除故障，解决问题并记录。如果需要更换设备，应上报有关领导，经批准后马上更换故障设备，尽快恢复网络、应用系统运行。运维部门判断无法及时修理时，应立即通知相关的系统运行服务提供商，在最短的时间内安排修理或更换系统。

　　如发现属外部线路的问题，应与线路服务提供商联系，敦促对方尽快恢复故障线路。

　　启用备份线路、设备、系统，迅速恢复相关的应用。

　　联通联系电话：

　　第七节黑客入侵的应急处理

　　发现网络上有黑客攻击行为，任何人员都有义务向技术部门报告。技术部立即启动应急响应，切断受攻击计算机与网络的连接，停止一切操作、保护现场，并上报有关领导。

　　对于黑客攻击，由计算中心组织应急响应专家小组查找入侵踪迹，分析入侵方式和原因。由安全管理员根据对入侵事件的分析，组织相关人员对内部网计算机整改，防止黑客用同样的手段再次入侵其他系统。安全管理员检查确定无安全隐患后，才可将受攻击计算机重新连接网络，或启用备份计算机来恢复应用。

　　安全管理员应做好记录，保护现场，进行日志收集等工作。如果能追查到攻击者的相关信息，可以对其发出警告，必要时可以采取进一步的行动，乃至采取法律手段。根据破坏程度，经有关领导同意后，上报公安部门。

　　若系统已被黑客破坏，无法恢复，应将受黑客攻击的计算机上的重要数据备份到其他存储介质，确保计算机内重要的数据不丢失。如果数据无法恢复，经有关领导同意后，可与国家指定的部门联系，由他们来协助恢复，为保证数据信息安全，需在安全管理部门作记录。

　　第八节生产系统、数据库故障处理

　　生产系统出现故障，技术部做出应急处理

　　1.因软件设计缺陷、设计漏洞等引起的故障，通知公司研发部门在2小时内查明原因，解决问题。

　　2.数据库出现故障，运维人员应在2小时内查清故障原因，其他相关部门应积极配合，解决问题。

　　3.如出现数据丢失情况，确认不能自行恢复后，启用备份恢复数据，24小时内恢复运营。

　　本方案自发布之日起施行

机房应急预案11

　　为建立有效防范和处理火灾事故的工作机制，防范消防安全事故的发生，力保消防安全事故发生时能够快速、高效、合理有序地处置，特制定本预案。一.机房火灾隐患分析由于机房内电气设备多，线路复杂，大部分的火灾都是电气火灾，引发电气火灾的主要因素有：

　　1.电气线路短路、过载、接地电阻过大等引发火灾。 2.由于机房内的电脑、空调、UPS等设备长时间不间断运行或设备故障引发火灾。 3.静电产生火灾。 4.雷电等强电入侵引发火灾。二.处置程序 1.发现火情后，迅速切断电源，利用就近灭火器进行灭火，并按照特级事故通报机制进行通报，向领导汇报火灾具体情况。

　　2.迅速组织相关人员携带消防器具赶赴现场灭火，并听从现场指挥人员指挥。

　　3.如火情较为严重，应立即与大厦消防中控取得联系，并与之协商处理办法措施，必要时需要专业消防灭火的，迅速拨打119。 4.迅速组织相关人员对重要数据设备进行转移，尽可能保证关键设备安全，引导人员进行疏散。三.扑救方法 1.电源或线路起火应首先切断电源，绝不能用水扑救。 2.扑救机房设备时，最好使用气体(如CO2)灭火器，干粉，泡沫灭火器会对设备造成腐蚀，使损失增大。四.注意事项

　　1.一旦机房发生火灾，应遵循以下原则：首先保证人员安全；其次保证关键设备安全；再保证一般设备安全。 2.火灾发生时，第一发现人查明起火原因，如因电源引起，应首先切断电源。

　　3.火灾发生后应遵循边救火，边报警的原则。五.预防措施

　　1.设备整改：机房现有的电气设备和消防设备均有存在不合理之处，需要整改，消除隐患。现有的配电开关为墙上的半埋式家用配电开关，应更换为专业的独立空气配电箱，修改配电柜各类闸刀和开关的布局，使其具备独立切换的功能。现有的'灭火器为干粉灭火器，且维护也已过期，干粉灭火器虽然可以有效灭火，但是会对设备造成腐蚀，损坏设备，应更换为气体灭火器。

　　2.每天定时对机房重要电气设备和电子设备的温度进行了监控，能够及时地发现并消除隐患。 3.应组织相关人员进行消防安全教育，学习消防知识，学会正确使用各种灭火器，有计划的进行相关的消防演习。

机房应急预案12

　　核心机房电力的保障一直是维护体系的头等重要事项，通过实施应急发电演练，建立了可靠的应急预案机制，最大限度的降低电源中断对网络传输质量的影响。现分享核心机房电源中断应急预案，希望分公司尽快建立一套统一指挥、职责明确、反应迅速、处置有力的机房安全保障机制。

　　组织架构:

　　责任领导、工程维护、网络监控、网络运维、质量管理等相关人员。

　　机房电源系统说明:

　　1、机房电力是两路三相四线制供电，进线线缆规格为：RVV50*4+16*1铜芯护套线。

　　2、机房电源系统采用三级防雷系统，三级防雷分别位于电源进线端、UPS输入前端。

　　3、机房现有两台60KVA-UPS电源，均处于正常运行状态。

　　4、机房现有设备机柜已编号，均通过UPS电源和市电供电，每个机柜有独立的20A空气开关。空调、墙壁插座开关、应急灯、照明等都是单独空开接市电。

　　5、运行中的UPS电源所带负荷，在逆变运行状态下能正常工作约4小时(已经过UPS放电测试)。

　　一、核心机房电源中断预案

　　1、在接到停电通知的情况下：

　　1)计划性停电通知要确保综合部、工维机房管理部对口人接到通知(提前将对口联系人备案在物业处)，机房管理员接到计划停电通知后，升级到调度中心进行信息发送，同步进行邮件通知相应应急小组成员。并与负责组长及责任领导电话告知，确保已经接收到本次停电的时间及可能发生的情况。

　　2)维部进行发电应急预案小组成员通知，提前做好机房发电预案要求的准备工作，将相应的发电机、连接线、人员安排到位，各司其职，随时待命现场，做发电准备工作。确保停电时刻的电力安全及机房用电的保障措施，提前调度安排好相应人员做好保障用电的措施。

　　3)计划停电时间开始后，马上启动应急发电操作，按照机房发电操作步骤实施阶梯供电的步骤，恢复市电保障。并进行现场值守及设备工作确认，确保全部正常后电话告知调度中心及维护体系领导。

　　2、在没有接到任何通知，突然发生停电的情况下：

　　确认停电线路，停电时刻，停电时间等要素，启动核心机房发电应急预案。

　　1)值班网管工作流程：

　　⑴值班网管监控到核心机房停电，第一时间告知工维部、网络部、运维部应急小组组长。信息传达到工维部机房管理员(一主一备)，告知停电开始时间。

　　要求在停电5分钟内将消息传达到调度中心，各应急小组组长。如无法联系上，进行升级到责任领导-工维部经理经理处。

　　⑵网管将停电信息电话传达后，进行调度派单，确保全部的应急小组成员都收到本次故障停电的信息。然后进行机房中设备的检查，包括：UPS设备主机、各核心设备、汇聚设备、服务器、语音系统等。检查是否受影响。同时启动机房降温措施(降温方案：初步为加装抽排风设备、增加大风扇排风形成热量流动降温)

　　⑶实时监控设备及UPS工作情况，包括：电量下降情况，设备工作正常情况，每15分钟通报一次电量情况。

　　2)运维部应急工作流程：

　　⑴运维应急同事接到故障通告后，第一时间往停电现场赶，到现场配合网管/工维部门进行设备仪器的检查、客服语音系统的保障，应急发电的协助。

　　⑵现场配合进行机房降温散热措施实施，实时检查网络设备的工作情况。

　　3)运营质量管理应急工作流程：

　　⑴调度中心值班人员接到网管监控调度信息后，第一时间将故障信息记录并发故障通告到相关应急成员，并电话通知各应急小组组长是否知悉。

　　⑵进行客服调度系统的设备工作运行系统检查，特别语音系统级坐席电脑，是否有问题，如发现工作系统有异常，及时与运维应急小组成员沟通，进行检查处理。

　　⑶实时关注故障工单流程进度登记，配合应急小组进行人员调度通告。

　　4)工维部应急工作流程：

　　⑴机房管理员第一时间往停电现场赶，同时进行电话沟通供电公司、物业方等，咨询停电原因，是属于计划性还是突发性停电，预计停电时长，将咨询清楚的结果反馈到应急小组成员中，电话联系物业沟通好需要发电需求申请。

　　⑵工维应急小组组长接到时间后第一时间往停电现场赶，同时进行发电应急小组成员调度，安排第一时间到场工作开展，并升级通报告知主管领导，对口集团维护中心上报信息。

　　⑶工维应急小组成员接到停电时间后第一时间往停电现场赶，要求30分钟内必须到场(住机房附近的人员往现场去，较远同事可以进行打车往现场去)，先行到处同事配合网管、运维同事启动做好应急发电前的准备：连接线布放、接续、发电机发电前检测油/电/水路检查，确保正常。确保一切就绪后，确认可以进行发电操作后，按照发电操作流程进行发电恢复市电。

　　⑷网管将监控到停电的相应信息及级别同步发送到运营质量管理部调度岗，由调度岗将相应信息进行工维、运维、网络关联同事进行信息告知，同时报工维主管领导知悉。

　　5)应急机房发电操作流程：

　　⑴机房用电系统包括四方面：空调制冷、主/备UPS主机、照明系统、客服调度系统。

　　⑵发电前考虑4方面系统设备用电功率情况，为保障发电机带动的正常，不能进行同步供电，要区分优先恢复的步骤实施，确认发电机的工作正常。在发电前将需要供电的“空调制冷、主/备UPS主机、照明系统、客服调度系统”的`市电输入主开关关闭。防止同步启动时发电机的无法供电保证。

　　⑶启动发电机，检测发电输出电流通断，待发电机运行稳定后。

　　第一步启动空调制冷系统的市电输入开关，运维应急小组成员重新启动空调主机(空调因为市电恢复后需要重新启动)观察空调制冷工作是否正常。

　　第二步启动主UPS设备的市电输入开关，观察发电机运行稳定情况，主UPS主机工作稳定情况，网络设备的工作正常与否。

　　第三步启动客服系统的市电输入开关，包括(客服坐席电脑、UPS设备、空调制冷等)，观察发电机运行稳定情况，设备恢复工作情况。

　　第四步启动备UPS设备、市电照明的市电输入开关，观察发电机运行稳定情况，备UPS主机工作稳定情况，网络设备的工作正常与否。

　　⑷发电机启动，市电输入正常后，网管将降温系统的抽排风设备关闭，与运维同事进行所有设备的运行进行全面的检查，确保设备已经是运行正常。

　　⑸发电机发起市电正常后，工维应急小组安排专人现场值守，及时关注发电机油量情况，同时与油品供应商确认油品配送要求及时间要求，并实时与供电部门确认市电恢复时间。

　　6)停电过程中突发事项预防:

　　⑴网管在停电时进行机房确认运行中的UPS工作组、设备组工作状态。主/备UPS工作切换是否正常，在市电中断时UPS是否已经开始进行供电保护。

　　⑵值班网管对机房中的所有设备进行全面检查，确保所有的设备已经是有主备供电，市电中断后UPS已经正常保障设备工作。同时对机房的温度进行观察，温度是否突然升高。

　　⑶停电后，UPS处于逆变工作状态，当班人员要每隔15分钟观察一次UPS的蓄电池容量、带负荷情况、机房环境温度，尽量使蓄电池容量大于60%，带负荷小于85%(因为已经有自购发电机应急，尽快要求短时间发起电，减少UPS的放电过度)。

　　⑷发现机房环境温度大于26℃。当以上指标不能保证时，要及时向机房管理员汇报，同时上报责任领导知悉，网管预案小组成员经过慎重讨论，适时采取关闭不必要网络的网络设备、加强通风降温等措施尽量延长关键设备运行时间。

机房应急预案13

　　第一条：机房意外停电后，首先确定停电的范围以及受影响的设备范围。

　　第二条：确认停电的范围为本公司或本机房，应立即联系工机科电话汇报。估算电力可能恢复的时间，并通知直接上级。

　　第三条：如果确认停电的时间在1个小时内，可以在UPS正常供电的时间内，等到电力恢复。如果不能确认在2个小时内恢复供电，需及时到达现场。做好各设备的.电源停电准备。在UPS供电达1.5个小时后，严格按操作手册停掉存储和各应用服务器的电源，最后停核心交换机和路由期。等待电力恢复，电力恢复供电后转第七条执行。如果确认停电的范围仅在于本机房电源故障，立即汇报给机房电源维护负责人。

　　第四条：机房维护负责人将掉电的电源柜总空开和分空开的状态处于下电状态。并向直接领导汇报，马上联系相关厂家，如有可能请厂家立即到现场支持。第五条：将掉电的所有的设备电源状态处于下电状态，以防止电源柜加电对设备的冲击。

　　第六条：等各厂家和相关的人员到齐后，商议设备恢复时因注意的事项，并形成相关文档。

　　第七条：电力室恢复供电后，先不要急于给电源柜加电，等待10—20分钟后，再开始给电源柜加电，以防止供电不稳或再次掉电。

　　第八条：供电正常后，确定设备处于下电状态后，打开电力柜的总控开。第九条：根据设备加电顺序，启动分项空开。第十条：设备加电顺序，网络交换类设备正常后再给磁盘阵列柜加电，存储状态检查正常后，启动主机（以上各设备务必按操作手册的启动顺序上电）。第十一条：设备启动正常后，开始启动数据库。第十二条：数据库启动正常后，开始启动中间件服务器。第十三条：中间件服务器正常后，启动应用程序。

　　第十四条：机房设备进行全面点检，确认所有设备运行和服务正常。