1、 1 / 8 1. 应急响应机制 1.1. 基本处理流程 发 现 故 障初 步 判 定启 动 应 急 预 案 , 并 通 知 领 导联 系 技 术 支 持 处 理联 系 开 发 人 员 或 厂家 工 程 师 现 场 处 理故 障 恢 复总 结 , 修 订 应 急 预 案扩 大 应 急突 发事 件应 急组按 事 件 流 程 处 理一 般 事 件突 发 事 件已 解 决已 解 决记 录汇 报 进 度汇 报 进 度增 援汇 报未 解 决( 1)值班人员平时应做好应急事件的监控工作,对于突发事件应认真分析、准确判定故障发生的数据域,负责跟踪该事件直至其结束。对于不在运维中心的故障,应在第一时间内通知负
2、责人去现场处理,密切关注事件流程及进展情况,并做好登记工作上报领导。 ( 2)正常情况下,要求值班人员在 10 分钟内进行事件确认。如果属于一般事件则按照事件流程进行分派处理,否则应迅速启动应2 / 8 急预案,并严格按照应急预案所规定的步骤快速实施应急处置,及时汇报上级 领导,掌握实时处理情况。 ( 3)在处理过程中,如需其他部门去现场增援处理,应及时向上级领导部门汇报,协调沟通,尽快联系技术工程师或厂家技术支持赶赴现场援助处理。 2. 演练准备工作 2.1. 视频监控系统 检查视频监控是否正常工作,图像是是否清晰。检查接受到的视频图像为实时图像。 2.2. 湿温监控系统 检查湿度控制器 、
3、温度控制器 是否正常工作, 检测当湿度过高或温度过高时其是否实现实时报警。 2.3. UPS 检测系统 检查监控中心所收到的 UPS 运行状态,与实时 UPS 运行状况是否一致,具体参数是否正常(如输入电压、电流、蓄电池供电情况等)。 3 / 8 3. 演练 过程 3.1. 机房市电供电 异常 3.1.1. 准备工作 机房供电系统图、配电系统维修工具、应急灯、 UPS 操作手册、应急联系电话表。 全面检查机房供电系统状况,重点确保 UPS 主机系统和电池组等处于良好运行状态。 与配电室联系好,保证在演练期间配电室无维修或其他操作,电力供应稳定。 通知 UPS 供应商或维护商做好相应备件及技术支
4、持准备,以防止UPS后备电池因维护保养不善造成其使用寿命缩短或 UPS主机在进行逆变切换时发生故障。 演练前对网络系统及应用系统进行一次系统备份和数据备份。 3.1.2. 应急演练应掌握的数据 由于目前 UPS 系统在机房的负荷 较大,目前 UPS 有效后备时间约 2 2.5 小时。 经与相关 小 组了解业务系统数据应急和设备正常关闭时间约 1.5小时。 机房计算机设备允许最高环境温度为 33C。 4 / 8 3.1.3. 市电异常应急演练处置流程图 突 发 市 电 停 电检 查 U P S 运 行 状 况每 十 分 钟 对 U P S 进行 一 次 记 录 , 对机 房 系 统 进 行 一次
5、 正 常 运 行 确 认每 十 分 钟 记 录 一 次机 房 温 度 、 湿 度短 时 间 能 恢 复供 电机 房 温 度 超 过2 7 C , 打 开 机 房 通道 门 并 使 用 电 风扇 , 减 少 机 房 温 升是 否 大 于 3 3 C对 U P S 主 机 进 行宕 机 , 来 电 后 进行 恢 复 送 电主 机 、 网 络 、应 用 等 系 统 进入 宕 机 流 程 ,并 确 认 系 统 管理 员 密 码通 知 领 导 小 组准 备 宕 机做 好 恢 复 送电 的 准 备市 电 恢 复后 , 对 电 源进 行 检 查恢 复 送 电 后 , 检查 空 调 运 行 状 况主 机 、
6、网 络 、应 用 等 系 统 进入 宕 机 流 程 ,并 确 认 系 统 管理 员 密 码通 知 领 导 小 组 , 根据 要 求 , 逐 台 宕 机是否是与 大 楼 配电 室 联 系否3.1.4. 应急操作过程 首先,接到应急演练小组演练开始的命令,将 UPS 供电总电源切断。 在供电电源停止后,每四分钟对 UPS 供电情况进行一次巡检,检查内容主要是 UPS 的负载情况、输出的电压电流、电池后备时间、电池运行情况,并做好记录(记录表样式附后)。 5 / 8 随时联系配电室人员,了解供 电恢复时间,并向领导小组汇报。当停电半小时后未得到准确送电时间,通知维护小组及其他相关部门,做好停机准备,
7、停部分设备以减少用电负荷。当停电一个小时后仍未得到准确送电时间火灾配电室通知短时间内故障无法排除,向领导小组汇报,由领导小组通知维护小组及相关部门关闭机房全部设备。 如果停电范围较大,涉及机房空调市电停止,还需 有专人对机房温升情况进行监控并记录(记录样式附后)。当机房温度达到 33 C时,向领导小组汇报,由领导小组通知维护小组及其他相关部门关闭机房相关设备,随着温度的升高直至关闭全部设备。 上述 UPS 电源 中断和机房空调电源终端两种情况同时发生时,只要其中一个条件不能满足机房运行要求,就要向领导小组汇报,由领导小组通知维护小组及其他相关部门关闭机房全部设备。 送电后的恢复工作:市电恢复正
8、常供电后,机房管理员检查 UPS系统运行情况和电池组充电状况、空调系统运转情况,并向领导小组进行报告。 3.1.5. 演练中发生异常故障的处理 ( 1)应急演练过程中,发现任何异常情况要及时向应急演练领导小组报告,由应急演练领导决定是否终止应急演练。 ( 2)在应急演练过程中预先准备好灭火器材,防止出现大电流放电出现着火。 ( 3)在 UPS 电池出现 过热时应及时终止演练并恢复市电供电,以防意外发生。 6 / 8 ( 4)出现电池及电缆接头过热情况要及时处理,恢复市电,更换接头等。 3.2. 机房 漏水 3.2.1. 演练内容 计算机机房场地 漏水 ,对计算机系统运行造成严重影响。 3.2.
9、2. 准备工作 吸水设备、水桶、拖布及地板吸盘等水灾抢救用品。机房供电系统系线路图纸、了解机房漏水的风险点。 3.2.3. 机房可能发生大范围漏水的部分 机房空调加湿用的供水水管、除湿的下水和吸顶空调的冷凝水。 3.2.4. 演练操作步骤 演练开始。执行小组接到计算机机房管理人员报告场地 漏水 或计算机机房场地监控系统(漏水报警器报警)发现场地 漏水 ,执行小组立即检查进水部位,查明进水原因,掌握危害 程度 ,并与大楼后勤服务部门联系,请求寻找进水原因。 执行小组向协调小组、领导小组报告计算机场地 漏水 原因、危害程度,同时为了减少损失,通知维护小组做好进行数据备份、业务系统和电子设备关闭的操
10、作准备工作。 大楼后勤服务部门负责疏通排水通道、清楚计算机机房周边积7 / 8 水、切断计算机机房 漏水 水源。协调小组在确保无触电危险的前提下,组织人员用吸水工具抽吸场地内积水,控制进水影响范围。 领导小组根据进水危害程度,命令维护小组部分关闭或全部关闭业务系统和电子设备后,由机房管理员 切断部分或全部场地电源,防止危害进一步扩大。 进水危险解除后,机房管理员检查计算机场地受灾情况和电力线路、网络线路健康情况,进行计算机机房去湿等环境恢复,并向领导小组报告。领导小组根据计算机机房环境恢复情况,命令维护小组部分恢复或全部恢复业务系统和电子设备进行 3.3. 机房火灾 3.3.1. 演练内容 计
11、算机机房发生火灾,对人的生命和计算机系统运行造成危害。 3.3.2. 准备工作 ( 1)手持计算机机房灭火器、手持应急照明灯具等火灾抢救用品。 ( 2)确保气体灭火系统运行稳定,并将启动方式设置为手动。 3.3.3. 演练步骤 火情发现。执行小组接到机房管理人 员的火情报告,或计算机机房场地监控系统发现火情,或大楼消防监控中心发现火情。 执行小组在排除误报和在确保生命安全的前提下,准确掌握火情8 / 8 部位、灾情程度,并向协调小组报告。 协调小组向领导小组报告计算机机房发生的火情和危害程度。 经领导小组同意,执行小组按动火灾报警按钮,发出声、光报警信号,组织人员撤离计算机机房。 分一下两种情
12、况进行处置: ( 1)在火情未蔓延时,领导小组命令执行小组切断火灾部位电源、利用手持机房灭火器具进行灭火。 ( 2)在火情蔓延时,领导小组命令执行小组切断计算机机房全部电源,在确保人员全部撤 离机房后,关闭机房所有通道门、启动气体灭火系统进行灭火。 火情解除后,执行小组检查计算机机房空气质量,掌握受灾情况和电力线路、网络线路等健康情况,并向协调小组、领导小组报告。 领导小组根据计算机机房环境情况, 命令执行小组恢复部分或全部电源供应、维护小组部分恢复或全部恢复业务系统和电子设备运行。 3.3.4. 演练中发生故障及相关问题处理 ( 1)误按了放气按钮怎么办? 在误按了放气按钮时,可在 30s 内按住旁边的止喷按钮,并等待专业人员拿钥匙进行复位。(详见气体灭火 器 使用说明) ( 2)机房发生火情,拉了气体释放开关不释放气 体怎么办? 这种情况的原因是气体灭火的控制屏或释放阀发生故障,可立即到气瓶间拉下上手动释放开关。 9 / 8 UPS 异常运行记录 表 时间 输出电压 输出电流 电池放电电流 电池后备时间 每十分钟记录一次 确认签字: