调度自动化系统故障现场处置方案
1总则
1.1编制目的
为了正确、有效和快速处理供电分公司(以下简称公司)调度自
动化系统故障,最大限度地减少因调度自动化系统出现故障造成的影
响和损失,根据国家有关规定,结合公司的实际情况,特制定本方案。
1.2编制依据
限公司安全生产事故应急预案管理办法》(桂水电司生〔2010〕64号)、 根据《电力企业现场处置方案编制导则》《广西水利电业集团有
1.3适用范围
本方案适用于公司调度自动化系统故障现场处置。
2可能发生的故障类型和危险性分析
一、主站、分站系统硬件故障和危险性分析
1.主站服务器硬件出现故障,包括SCADA服务器、Web服务器等
硬件故障,如果设备损坏将影响服务器正常工作,严重的影响整个调
度自动化系统的运行。
2.分站综合自动化装置故障,造成数据无法采样、上传,影
响调度自动化系统运行。
二、主站、分站系统软件故障和危险性分析
Windows操作系统、服务器应用程序等软件故障,使自动化系统
无法运行。
三、电源故障和危险性分析
1.主站交流电源使用35kV 西郊站用电源,各分站交流均采用其 |
站用电,交流失电后不尽快恢复,将使调度自动化系统瘫痪。
系统只能短时供电,易造成调度系统瘫痪。淘网 www.tadocs.com |
1.光纤通道出现断线,使调度数据无法上传,系统瘫痪。
2.各服务器与调度数据网(内网)无法连接,将使调度端无法
,造成调度员监控效率大幅下降。
五、病毒损害和黑客入侵和危险性分析
调度数据网接口众多,系统防病毒和他人入侵形势严峻,虽然公
司调度自动化系统通过WEB向公网发布信息实现了物理隔离,但是通
过移动硬盘,用户操作不当等原因,系统还是容易受到病毒、黑客破坏和攻击,使变电站或电站继电保护装置无故障原因接受跳闸或其他
指令,造成系统大面积停电,导致严重的社会、经济影响。
六、遥信、遥测异常和危险性分析
1.各分站一次设备、综合自动化装置故障,造成数据无法采样、
上传。
2.数据库定义错误造成遥信、遥测数据异常,影响调度员正确、
安全指挥系统运行。
3应急组织及职责
3.1应急处置组织
现场应急处置组
副组长:调度专责、变电检修班班长、各变电站站长
成员:调度室值班员、变电检修班人员、各变电站值班员
3.2应急组织的职责
1.正确判断现场故障情况,及时向值班调度员和上级报告。
2.做好对故障设备的观察和巡视,提高巡视密度。
3.调度值班员正确分析调度主站以及各分站报告的各种调度自
动化系统信息,发现主站故障或接到分站故障报告后及时报告调度专
责和调度室主任。
4.调度室主任组织处置人员对故障设备进行更换,必要时请专
业机构支援。
4应急处置
4.1应急处置程序
1.调度自动化系统发生故障后,各变电站值班员应立即报告值
班调度员,同时报告各变电站站长;值班调度员发现主站故障或接到
分站故障报告后及时报告调度专责和调度室主任。
2.由各处置组组长统一指挥,及时修复管辖范围内发生的调度
理,需要专业技术力量支援的上报请求外援,及时与相关单位联系支
援。
4.2事故预想与应急处置措施
一、机房意外
1.调度中心自动化机房发生火灾时,应及时断开事故部位电源,
采取必要的隔离措施并用灭火器灭火。火势有扩大趋势或已经不能控
制要及时拨打119 火警。
2.调度中心自动化机房发生雷击打火事件时,应先仔细检查设
备损坏情况,再进行维修处理。在不能确认有其他设备受到冲击时,
不能盲目恢复维修好的设备,以防止事故扩大。
二、电源系统
1.机房停电
调度中心自动化机房发生长时间停电(2小时以上)时,应关掉UPS
所带的次要设备的供电,以增加UPS电池的放电时间。在停电超过4
小时以上时间时,关掉双机互为备用运行设备的其中一台以进一步增
加UPS电池的放电时间。
当电池容量告警时,按操作程序逐一关闭系统设备, 恢复送电时
调度中心自动化系统UPS系统故障(逆变器告警、充电器告警、
电池告警,以及旁路电源告警)时,应临时接入备用UPS电源,并认
真检查设备的告警信息,认真做好记录。在不能及时维修好时应及时
与设备供货商联系尽快修复。
三、调度自动化系统
1.主服务器事故预想
1.1 系统主程序异常
异常包括组件告警、组件退出、程序死。立即重启相应组件,或者重启主程序。
1.2主服务器死机
首先将主调工作站切换到服务器模式(或者设置为自动切换),用“开始”菜单里的“关机/关闭系统”来关机或重新启动,用默认用户名“administrator”登录后,双击启动桌面上的主程序快捷方式。然后将主调工作站切换到工作站模式。
1.3主服务器设备硬件损坏
服务器硬件设备一旦出现问题,应首先进行应急判断,如机器黑
屏,冷启动过程中发出异常声响,可初步确认为硬件损坏,应迅速通
2.工作站事故预想
当副调工作站出现程序异常或者死机,立即重启工作站程序或者重启计算机,如果故障没有消除,应迅速通知系统管理员。系统管理员进行判断后,根据实际情况通知厂家售后服务人员进行维修。
当主调工作站出现程序异常,立即重启工作站程序;当主调工作站死机,首先将语音告警设置到副调工作站,然后重启计算机。如果故障没有消除,应迅速通知系统管理员。系统管理员进行判断后,根
据实际情况通知厂家售后服务人员进行维修。
3.维护工作站事故预想
维护工作站出现故障后,由系统管理员负责组织检查及维修,必
须在24小时内恢复正常。期间必要的维护工作可以通过副调工作站
完成。如果24小时内无法恢复正常,应迅速通知主管领导,并根据
实际情况通知厂家售后服务人员进行维修。
4.Web服务器事故预想
维护工作站出现故障后,由系统管理员负责组织检查及维修,必
须在1小时内恢复正常。如果1小时内无法恢复正常,应迅速通知主
管领导,并根据实际情况通知厂家售后服务人员进行维修。
5.子站通信中断
5.1通过维护工作“开始运行cmd”,启动命令行,ping相应
的子站IP,如果不能ping通,可能网络故障或者子站通信服务器故
障,根据第二步进行诊断;如果能够ping通,转到第三步。
5.2检查变电站光端机工作指示灯,如果只有两个及以下指示灯
亮,说明网络存在故障;如果光端机指示灯工作正常,检查通信服务
器的指示灯,如果只有两个及以下指示灯亮,说明通信服务器存在故
障。在检查其他网络设备进行判断后,根据实际情况通知厂家售后服
务人员进行维修。
5.3在命令行输入“telnet”+IP,启动通信服务器远程调试方
式。进入主菜单,如下所示。
选择7——“Monitor””Async”进入数据监控,如下所示,
如果“RxCnt”数量无变化,可能变电站调度数据存在故障。
5.4在通信服务器远程调试主菜单,选择s——“Save/Restart””
Yes”重启通信服务器,重启1-2分钟后查看通信是否恢复正常。
5.5根据实际情况,可以联系厂家售后服务人员协助查找故障原
因。
四、数据安全与病毒防范
1.对于服务器和调度员工作站、维护工作站,请不要使用不明
来历的软盘、优盘和光盘。
2.为Windows工作站系统打上最新的系统补丁。
3.为Windows工作站安装杀毒软件,并定期升级病毒库和扫描所有驱动器。
4.不要随便安装其它软件,确实需要安装,须获得系统管理员批准后才能安装。
5.请定时做好数据备份工作,如果有程序更新,请备份以前版本的程序,并在文件中注明备份日期;
4.3应急报告
1.变电站值班员发现调度自动化系统故障后立即报告站长和值
班调度员,站长联系不上时,直接报告生技部主任,值班调度员报告
2.调度自动化系统故障发生后,调度室主任确定本部门力量不
能完成的,立即向专项应急办主任(生技部主任)报告。
3.现场人员可以直接向总经理报告事故情况。情况紧急时,可直接向县安监局或者其他负有相关安全监管职责的部门报告。
5注意事项
1.调度自动化系统发生故障时,值班员应沉着应对,对故障设备进行重点监控,提高巡视密度。紧急情况下值班员可以先行处理,
然后再报告值班调度员和站长。
2.做好调度自动化数据库、系统应用程序的备份、存档工作,凡是需要增加、减少或者修改、修复有关内容或者参数的,在修改、修复后,要将有关内容记入《调度自动化系统数据变化记录》,有关人员核查签名。
3.主站交流电源消失,需要减少调度自动化系统负荷时,切记调度录音系统电源不能关闭。
4.当调度自动化系统设备或机房发生火灾或设备事故时,应按照公司相关预案进行处置。
5.做好现场处置工作的安全措施,避免处置人员遭触电或其他
伤害。
6附则
6.1术语和定义
一、公司应急总指挥部(简称总指挥部)
是公司常设的最高应急指挥机构,其主要职责是统一领导公司应急工作,决定公司应急工作重大事项,决定应急预案的启动和终止,确保应急资金的投入和人力物力的保障。
二、总应急办公室
是公司应急总指挥部常设工作机构,负责公司日常应急管理工作,组织公司各类应急预案制定和修订以及督促、检查公司各部门的应急管理工作。在应急处理时,处理应急总指挥部的事务性工作。该办公室设在公司安监部,人员由公司各部门有关人员组成。
三、专项预案应急指挥部(简称专案应急指挥部)
是针对专项应急预案成立的常设应急指挥机构,在公司应急总指挥部的领导下,负责对专项事故应急救援工作的管理、组织、协调、指挥。
四、专项预案应急处理办公室(简称专案应急办)
是在专项预案应急指挥部下常设的事故应急处理工作机构, 由专
非启动期间,主要负责应急预案的修订、演练组织、应急准备工作督
促和检查。
五、现场应急处置组
故障、事故发生后,第一时间在现场处理的基层组织。负责对故障、事故现场的设备、环境进行检查、监控、报告、警示、隔离和恢复等工作。由运行值班人员、施工作业班组、第一批赶赴现场的人员组成。其主要任务是发现和控制事态发展,及时向上级报告求援,完 成力所能及的恢复工作。
6.2方案备案
本方案经专家评审合格后,报荔浦县安监局备案。同时抄报荔浦
县经贸局、荔浦县应急办、桂林市安监局、广西水利电业集团有限公
司。
6.3方案修订
一、有下列情形之一的,在专案指挥部领导下,专案应急办及时
组织对本方案进行相应修订:
1.调度自动化系统发生较大变化或进行重大技术改造的;
2.公司隶属关系发生变化的;
调整的;
5.方案编制依据的法律、法规和标准发生变化的;
6.现场处置方案演练、实施或处置方案评估报告提出整改要求
的;
7.电力监管机构或属地政府有关部门提出要求的。
二、本现场处置方案进行修订后,应当及时向有关部门报告修订
情况,并按照有关程序重新备案。
6.4制定与解释
本方案由专案指挥部领导专案应急办制定,专案指挥部负责解释,
专案应急办负责接受咨询和具体答复工作。本方案的制定、修订与解
释,均要经过总指挥部的批准。
6.5方案实施
本方案于发布之日起实施。