应急响应计划操作手册.docx
- 文档编号:30430205
- 上传时间:2023-08-14
- 格式:DOCX
- 页数:25
- 大小:23.52KB
应急响应计划操作手册.docx
《应急响应计划操作手册.docx》由会员分享,可在线阅读,更多相关《应急响应计划操作手册.docx(25页珍藏版)》请在冰豆网上搜索。
应急响应计划操作手册
附件一:
<程序/管理文件封面样板>
操作手应急响应计划
编制部门:
编制人:
标准化:
审核:
会签:
批准:
编制日期:
2017-09-19
文件修订履历
版本
修订内容简述
生效日期
修订部门/修订者
00
初版发行
文件发放范围
部门/人员
1操作说明
火灾
火灾及后续处置措施
步骤
行动及目标
责任分工
1
通知所有值班人员并紧急疏散相关人员
值班人员
2
拨打119报警、灭火自救并报告公司消防负责人
值班人员
3
组织灭火
消防负责人
4
灭否后对有报警或硬件损坏的设备进行登记,并作备件紧急调动处理;
基础架构组
5
联系技术人员检查修复UPS,并恢复UPS供电;
基础架构组
6
恢复网络设备供电及网络应用;
基础架构组
7
恢复存储备份设备供电及相关应用;
基础架构组
8
恢复相关数据库服务器及业务相关应用服务器;
系统运维组
9
联系业务相关人员进行测试;
系统运维组
备注
步骤1、通知所有值班人员并紧急疏散相关人员
具
体
操
作
通知信息管理室所有值班人员;
如果火情比较严重,则紧急疏散其它人员;
步骤2、拨打119报警、灭火自救并通知公司消防负责人
具
体
操
作
拨打119报警;
如果火情较小,组织信息管理室值班人员通过手提式灭火器灭火自救;
同时报告公司消防负责人和信息管理室负责人;
步骤3、组织灭火
具
体
操
作
若FM200气体灭火系统能未能启动,则启动机房门口消防系统应急启动按钮,若还是无效,将气瓶室内的驱动瓶瓶口电磁阀安全销拔下,将顶部按钮压下,将气体强行喷出.;
若通过自救和FM200气体灭火系统火势任得不到控制,则消防负责人组织人员灭火并准备好产房及机房图纸,准备接消防车;
消防车到位后,引导消防队员到火灾现场灭火;
步骤4、对有报警或硬件损坏的设备进行登记,并作备件紧急调动处理
具
体
操
作
收集损坏硬件的基本信息;包括设备型号、损坏件型号、损坏件数量,使用情况、及对业务的影响;
坏件比对备件库设备,联系厂商调动备件到现场准备更换处理。
步骤5、联系技术人员检查修复UPS,并恢复UPS供电
具
体
操
作
联系工程师对UPS进行检查修复工作,正常后恢复UPS供电。
1.依次闭合旁路开关Q2和输出电源开关Q5。
待旁路指示灯(3)和负载指示灯(5)亮
(绿色)。
2.断开维修旁路开关Q3。
此时,负载完全切换到静态旁路。
3.依次闭合整流输入开关Q1和电池开关QF1。
4.整流器稳定后,整流器指示灯
(1)绿色常亮。
持续按“INVERTERON”开关超过
2秒,逆变器启动。
等逆变器稳定后,系统切换到正常模式运行。
步骤6、恢复网络设备供电及网络应用
具
体
操
作
1、恢复损坏物理网络线路;
2、核心交换机加电启动,使用console线连接登陆检查交换机自检及配置启动状态
步骤7、恢复存储备份设备供电及相关应用
具
体
操
作
启动存储;
启动磁带机;
启动服务器;
步骤8、恢复相关数据库服务器及业务相关应用服务器
具
体
操
作
启动各系统的后台数据库;
启动各系统的应用服务程序;
打开各业务系统访问页面,检查系统启动是否成功
步骤9、联系业务相关人员进行测试
具
体
操
作
联系各业务系统维护单位或负责民警登陆系统测试数据访问是否恢复正常。
雷击
雷击后续处置措施
步骤
行动及目标
责任分工
1
对有报警或雷击损坏的设备进行登记,并作备件紧急调动处理;
基础架构组
2
联系技术人员检测UPS
基础架构组
3
检测网络设备供电及网络应用;
基础架构组
4
检测存储备份设备供电及相关应用;
基础架构组
5
检测相关数据库服务器供电及相关应用;
基础架构组
6
检测所有相关业务及应用服务器;
系统运维组
7
联系业务相关人员进行测试。
系统运维组
备注
步骤1、对有报警或硬件损坏的设备进行登记,并作备件紧急调动处理
具
体
操
作
收集损坏硬件的基本信息;包括设备型号、损坏件型号、损坏件数量,使用情况、及对业务的影响;
坏件比对备件库设备,联系厂商调动备件到现场准备更换处理。
步骤2、联系技术人员检测UPS
具
体
操
作
联系维护单位对UPS进行检测工作
1、检测UPS主机工作状态,蓄电池的状况
2、检测UPS主机供电是有有异常
步骤3、检测网络设备供电及网络应用
具
体
操
作
1、检测是否有损坏物理网络线路;
2、检测核心交换机,使用console线连接登陆检查交换机自检及配置启动状态
步骤4、恢复存储备份设备供电及相关应用
具
体
操
作
启动存储;
启动磁带机;
启动服务器;
步骤5、检测所有相关业务及应用服务器
具
体
操
作
检测各系统的后台数据库;
检测各系统的应用服务程序;
打开各业务系统访问页面,检查系统启动是否成功
步骤6、联系业务相关人员进行测试
具
体
操
作
联系各业务系统维护单位或负责民警登陆系统测试数据访问是否恢复正常。
地震
地震后续处置措施
步骤
行动及目标
责任分工
1
对有报警或硬件损坏的设备进行登记,并作备件紧急调动处理;
基础架构组
2
联系技术人员检查修复UPS,并恢复UPS供电;
基础架构组
3
恢复网络设备供电及网络应用;
基础架构组
4
恢复存储备份设备供电及相关应用;
基础架构组
5
恢复相关数据库服务器供电及相关应用;
基础架构组
6
恢复所有相关业务及应用服务器;
系统运维组
7
联系业务相关人员进行测试。
系统运维组
备注
步骤1、对有报警或硬件损坏的设备进行登记,并作备件紧急调动处理
具
体
操
作
收集损坏硬件的基本信息;包括设备型号、损坏件型号、损坏件数量,使用情况、及对业务的影响;
坏件比对备件库设备,联系厂商调动备件到现场准备更换处理。
步骤2、联系技术人员检查修复UPS,并恢复UPS供电
具
体
操
作
联系工程师对UPS进行检查修复工作,正常后恢复UPS供电。
1.依次闭合旁路开关Q2和输出电源开关Q5。
待旁路指示灯(3)和负载指示灯(5)亮
(绿色)。
2.断开维修旁路开关Q3。
此时,负载完全切换到静态旁路。
3.依次闭合整流输入开关Q1和电池开关QF1。
4.整流器稳定后,整流器指示灯
(1)绿色常亮。
持续按“INVERTERON”开关超过
2秒,逆变器启动。
等逆变器稳定后,系统切换到正常模式运行。
步骤3、恢复网络设备供电及网络应用
具
体
操
作
1、恢复损坏物理网络线路;
2、核心交换机加电启动,使用console线连接登陆检查交换机自检及配置启动状态
步骤4、恢复存储备份设备供电及相关应用
具
体
操
作
启动存储;
启动磁带机;
启动服务器;
步骤5、恢复所有相关业务及应用服务器
具
体
操
作
启动各系统的后台数据库;
启动各系统的应用服务程序;
打开各业务系统访问页面,检查系统启动是否成功
步骤6、联系业务相关人员进行测试
具
体
操
作
联系各业务系统维护单位或负责民警登陆系统测试数据访问是否恢复正常。
停电
停电及后续处置措施
步骤
行动及目标
责任分工
1
联系动力部及时维修并报告信息管理室负责人
基础架构组
2
通知相关业务部门做好应急准备
基础架构组
系统运维组
3
停相关服务器和设备、等待供电恢复
4
恢复网络设备供电及网络应用;
基础架构组
5
恢复存储备份设备供电及相关应用;
基础架构组
6
恢复相关数据库服务器及业务相关应用服务器;
系统运维组
7
联系业务相关人员进行测试。
系统运维组
备注
步骤1、联系动力部及时维修并报告信息管理室负责人
具
体
操
作
向动力部报告停电情况并要求及时维修;
向信息管理室负责人报告停电情况,并听取指示。
步骤2、通知相关业务部门做好应急准备
具
体
操
作
通过电话、邮件、OA系统等方式通知业务部门做好应急准备。
步骤3、停相关服务器和设备、等待供电恢复
具
体
操
作
若供电无法在1.5小时内恢复正常、则马上停相关的服务器和设备,顺序如下:
1.停数据库和应用
2.停服务器
3.停存储
4.停磁带机
等等供电恢复正常。
步骤3、恢复网络设备供电及网络应用
具
体
操
作
1、恢复损坏物理网络线路;
2、核心交换机加电启动,使用console线连接登陆检查交换机自检及配置启动状态
步骤4、恢复存储备份设备供电及相关应用
具
体
操
作
启动存储;
启动磁带机;
启动服务器;
步骤5、恢复相关数据库服务器及业务相关应用服务器
具
体
操
作
启动各系统的后台数据库;
启动各系统的应用服务程序;
打开各业务系统访问页面,检查系统启动是否成功
步骤6、联系业务相关人员进行测试
具
体
操
作
联系各业务系统维护单位或负责民警登陆系统测试数据访问是否恢复正常。
UPS旁路
UPS旁路后续处置措施
步骤
行动及目标
责任分工
1
检查UPS的排风扇是否故障导致机内散热不良;
基础架构组
2
检查UPS的负载量是否过大而跳旁路;
基础架构组
3
通知动力部工程师做相关检测后再做开机处理;
基础架构组
动力部
4
UPS正常后,检查机房内的计算机、网络设备是否全部都由UPS正常供电;
基础架构组
5
检测服务器设备运转情况。
基础架构组
备注
步骤1、检查UPS的排风扇是否故障导致机内散热不良;
具
体
操
作
到UPS主机后面,检查UPS的排风扇是否停止运转,清理排风扇上积累的灰尘。
把UPS主机周围的遮挡物挪开,保持UPS主机周围的空气流通和循环。
如果因机内温度过高,等温度正常后,UPS会自动切换到市电逆变状态。
步骤2、检查UPS的负载量是否过大而跳旁路;
具
体
操
作
在UPS主机的控制面板上的液晶屏检查UPS的负载量是否过大,或者用万用表检查输出电流是否过大。
如果是因过载而跳旁路的话,一般主机会提示,并且关掉一些不重要的设备,使UPS得负载量降到规定范围内。
步骤3、通知动力部工程师做相关检测后再做开机处理;
具
体
操
作
如果UPS得风扇和负载量都正常,通知动力部工程师到现场检查,做相关检测后再做开机处理。
步骤4、恢复UPS后检查各个系统供电情况
具
体
操
作
待UPS恢复正常后,检查机房内的计算机、网络设备是否全部都由UPS正常供电。
步骤5、检测服务器设备运转情况
具
体
操
作
机房内服务器设备巡检,检查设备状态灯状态;
对有告警的设备进行维护。
UPS电池供电
UPS电池供电后续处置措施
步骤
行动及目标
责任分工
1
恢复UPS供电;
基础架构组
2
恢复网络设备供电及网络应用;
基础架构组
3
恢复存储备份设备供电及相关应用;
基础架构组
4
恢复相关数据库服务器及业务相关应用服务器;
系统运维组
5
联系业务相关人员进行测试;
系统运维组
备注
步骤1、恢复UPS供电
具
体
操
作
1.依次闭合旁路开关Q2和输出电源开关Q5。
待旁路指示灯(3)和负载指示灯(5)亮
(绿色)。
2.断开维修旁路开关Q3。
此时,负载完全切换到静态旁路。
3.依次闭合整流输入开关Q1和电池开关QF1。
4.整流器稳定后,整流器指示灯
(1)绿色常亮。
持续按“INVERTERON”开关超过
2秒,逆变器启动。
等逆变器稳定后,系统切换到正常模式运行。
步骤2、恢复网络设备供电及网络应用
具
体
操
作
1、恢复损坏物理网络线路;
2、核心交换机加电启动,使用console线连接登陆检查交换机自检及配置启动状态
步骤3、恢复存储备份设备供电及相关应用
具
体
操
作
启动存储;
启动磁带机;
启动服务器;
步骤4、恢复相关数据库服务器及业务相关应用服务器
具
体
操
作
启动各系统的后台数据库;
启动各系统的应用服务程序;
打开各业务系统访问页面,检查系统启动是否成功
步骤5、联系业务相关人员进行测试
具
体
操
作
联系各业务系统维护单位或负责民警登陆系统测试数据访问是否恢复正常。
UPS停机
UPS停机后续处置措施
步骤
行动及目标
责任分工
1
检查UPS的液晶显示板和指示灯没有任何反应,是否完全处于停机状态;机房网络设备处于什么状态;
基础架构组
2
检查UPS主机输入输出端和电池组等情况,电话咨询相关工程师是否可以开机测试;
基础架构组
3
如果其他一切正常,UPS内部出现故障,立即安排产品厂家的工程师进行检修;
基础架构组
4
启用旁路市电直接供电
基础架构组
5
通知系统组作好数据备份准备。
基础架构组
备注
步骤1、检查UPS的液晶显示板和指示灯没有任何反应,是否完全处于停机状态;机房网络设备和服务器处于什么状态
具
体
操
作
在UPS控制面板上按操作按键,检查UPS的液晶显示板和指示灯有没有反应,是否完全处于停机状态;如果UPS停机,除了安排相关人员检查机房网络设备和服务器有没有因停机出现故障外,还要立即向应急小组相关负责人报告。
步骤2、检查UPS主机输入输出端和电池组等情况,电话咨询相关工程师是否可以开机测试
具
体
操
作
然后检查UPS主机输入端市电电源是否正常,电池组电压等情况;并且电话动力部工程师,咨询相关情况。
市电电源和电池组正常情况下是否可以开机测试。
步骤3、如果其他一切正常,UPS内部出现故障,立即安排产品厂家的工程师进行检修
具
体
操
作
电话给动力部工程师或厂家的工程师进行维修。
步骤4、启用旁路市电直接供电
具
体
操
作
如果UPS需要进行维修,放弃UPS供电,启用旁路市电直接供电,先保证机房设备的供电正常。
步骤5、通知系统组作好数据备份准备
具
体
操
作
空调停机
《空调停机》后续处置措施
步骤
行动及目标
责任分工
1
如果是机房的精密空调停机,通知动力部工程师进行检修;
基础架构组
2
作好相应的应急处理;
基础架构组
备注
步骤1、如果是机房的精密空调停机,通知动力部工程师进行检修
具
体
操
作
如果是机房的精密空调停机,通知动力部工程师到现场就行检修;如果检测不了,将情况报告给厂家工程师咨询相关的检测内容和步骤,如果检测不了,安排其到场进行检修;
步骤2、作好相应的应急处理
具
体
操
作
如果是2台精密空调同时出现问题,且无法修复,而机房温度持续上升,室温超过40度,根据情况做好相关停机准备。
空调冷量不足
空调冷量不足后续处置措施
步骤
行动及目标
责任分工
1
检查空调的控制器或控制面板,调整温度;
基础架构组
2
咨询相关工程师检查的内容和方法步骤;
基础架构组
3
如果空调出现缺制冷剂;或者出现过滤网脏堵、出风口堵塞等情况;通知相关人员对空调进行清洗或检修;
基础架构组
4
如果空调出现压缩机、室外机风机故障等等情况;通知相关人员对空调进行维修。
基础架构组
5
作好相应的应急处理
基础架构组
备注
步骤1、检查空调的控制器或控制面板,调整温度
具
体
操
作
在空调的显示屏上观察空调温度是否在正常状态下,可以通过显示面板调整温度,使温湿度在规定范围内(温度:
25°C左右;湿度:
45%RH~55%RH左右)。
步骤2、咨询相关工程师检查的内容和方法步骤
具
体
操
作
一般空调室外机都在机房外面,至于一些相关的检查内容和方法步骤,特别是对机房内的精密空调机组的检查,电话咨询动力部工程师或厂家工程师
步骤3、如果空调出现缺制冷剂;或者出现过滤网脏堵、出风口堵塞等情况;通知相关人员对空调进行清洗或检修
具
体
操
作
如果空调出现缺制冷剂;或者出现过滤网脏堵、出风口堵塞等情况;通知相关人员对空调进行清洗或检修。
步骤4、如果空调出现压缩机、室外机风机故障等等情况;通知相关人员对空调进行维修
具
体
操
作
如果空调出现压缩机、室外机风机故障等等情况;通知厂家对空调进行维修。
步骤5、作好相应的应急处理
具
体
操
作
如果是2台精密空调同时出现问题,且无法修复,而机房温度持续上升,室温超过40度,根据情况做好相关停机准备。
空调低压报警
精密空调低压报警后续处置措施
步骤
行动及目标
责任分工
1
如果空调还在制冷,将空调的状态记录下来,向空调专业工程师咨询相关检查的内容和方法步骤;
基础架构组
2
如果现场解决不了,立即联系维护单位安排空调工程师进行检修;
基础架构组
3
如果空调不再制冷,立即启动备用空调进行制冷;然后通知相关负责人并且安排空调工程师进行检修;
基础架构组
4
作好相应的应急处理
基础架构组
备注
步骤1、如果空调还在制冷,将空调的状态记录下来,向空调专业工程师咨询相关检查的内容和方法步骤;
具
体
操
作
如果空调还在制冷,将精密空调显示屏报警的信息和主机的状态记录下来,向空调厂家工程师咨询相关检查的内容和方法步骤。
步骤2、如果现场解决不了,立即联系维护单位安排空调工程师进行检修;
具
体
操
作
精密空调机组的元件比较多,检查起来会比较复杂。
如果现场解决不了,立即联系厂家安排工程师进行检修。
步骤3、如果空调不再制冷,立即启动备用空调进行制冷;然后联系维护单位安排空调工程师进行检修
具
体
操
作
如果空调不再制冷,立即启动备用空调进行制冷;然后联系长家安排空调工程师进行检修
步骤4、作好相应的应急处理
具
体
操
作
如果是2台精密空调同时出现问题,且无法修复,而机房温度持续上升,室温超过40度,根据情况做好相关停机准备。
空调高压报警
精密空调高压报警后续处置措施
步骤
行动及目标
责任分工
1
如果空调还在制冷,将空调的状态记录下来,向空调专业工程师咨询相关检查的内容和方法步骤;
基础架构组
2
如果现场解决不了,立即联系维护单位安排空调工程师进行检修;
基础架构组
3
如果空调不再制冷,立即启动备用空调进行制冷;然后通知相关负责人并且安排空调工程师进行检修;
基础架构组
4
作好相应的应急处理
基础架构组
备注
步骤1、如果空调还在制冷,将空调的状态记录下来,向空调专业工程师咨询相关检查的内容和方法步骤;
具
体
操
作
如果空调还在制冷,将精密空调显示屏报警的信息和主机的状态记录下来,向空调专业工程师咨询相关检查的内容和方法步骤。
步骤2、如果现场解决不了,立即联系维护单位安排空调工程师进行检修;
具
体
操
作
精密空调机组的元件比较多,检查起来会比较复杂。
如果现场解决不了,立即联系维护单位安排空调工程师进行检修。
步骤3、如果空调不再制冷,立即启动备用空调进行制冷;然后联系维护单位安排空调工程师进行检修
具
体
操
作
如果空调不再制冷,立即启动备用空调进行制冷;然后联系维护单位安排空调工程师进行检修
步骤4、作好相应的应急处理
具
体
操
作
如果是2台精密空调同时出现问题,且无法修复,而机房温度持续上升,室温超过40度,根据情况做好相关停机准备。
漏水
机房漏水积水后续处置措施
步骤
行动及目标
责任分工
1
对有报警或硬件损坏的设备进行登记;
基础架构组
2
联系相关人员、厂家对故障设备进行检修;
基础架构组
3
启动设备应急预案,调拨备用设备,并安装到位;
基础架构组
4
协助后勤处对漏水积水进行排查修复工作;
基础架构组
备注
步骤1、对有报警或硬件损坏的设备进行登记,并作备件紧急调动处理
具
体
操
作
收集损坏硬件的基本信息;包括设备型号、损坏件型号、损坏件数量,使用情况、及对业务的影响;
步骤2、联系相关人员、厂家对故障设备进行检修
具
体
操
作
根据设备维保情况,联系相应人员、厂家到现场检修修复工作;
步骤3、恢复相关设备运行
具
体
操
作
恢复相关已修复设备的供电情况,并检查启动是否成功
步骤4、协助后勤处对漏水积水进行排查修复工作
具
体
操
作
大范围网络故障
大范围网络故障后续处置措施
步骤
行动及目标
责任分工
1
到现场进行检修;
基础架构组
2
网络恢复后进行测试,发布网络恢复公告。
基础架构组
备注
步骤1、到现场进行检修
具
体
操
作
如果设备出现故障,需要及时更换备机。
备机的替换和使用,原则上应属于相同型号、相同配置的网络通讯设备。
在没有相同型号设备的情况下,要确保备机具备与原设备同等功能和作用,经过测试及验证,确保不会存在设备间兼容性问题。
初步判断定位网络故障,确认故障原因,如果是设备硬件故障,立即启动网络故障应急预案,启用相应备用设备,同时联系厂家安排维修。
如果是配置问题,则尝试通过修改配置恢复,若无法恢复,则联系TMT信息中心协助处理。
步骤2、网络恢复后进行测试
具
体
操
作
登陆设备,查看主要端口状态是否为UP;Ping设备的ip地址。
最后核实网络恢复情况。
业务系统故障
空调冷量不足后续处置措施
步骤
行动及目标
责任分工
1
相关工程师立即到达机房,初步分析故障原因,并尝试恢复;
基础架构组
系统运维组
2
向部门领导汇报情况,同时发布系统停机公告;
基础架构组
系统运维组
3
启用备用设备,然后尽快对故障服务器进行检修;
基础架构组
4
联系厂商对服务器进行维修;
基础架构组
5
系统故障排除测试无误后,重新开启系统,同时发布系统恢复公告。
基础架构组
系统运维组
备注
步骤1、相关工程师立即到达机房,初步分析故障原因,并尝试恢复
具
体
操
作
相关工程师立即到达机房,检查服务器运转是否正常,初步分析故障原因,如果问题简单,则尝试恢复。
步骤2、向部门领导汇报情况,同时发布系统停机公告
具
体
操
作
若故障短时间内无法排除,立即向部门领导汇报情况,同时通过OA系统、电子邮件发布业务系统停机公告,让业务部门做好应急准备。
步骤3、启用备用设备,然后尽快对故障服务器进行检修
具
体
操
作
若
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 应急 响应 计划 操作手册