QC活动之缩短操作站故障恢复时间

缩短操作站故障恢复时间发布人曹哲组别热工分部自动班QC小组单位国电电力邯郸热电厂日期2013年12月25日国电电力邯郸热电厂热工分部自动班QC小组76983215410111213140目录CONTENT一、小组概况

国电电力邯郸热电厂热工分部自动班QC小组一、小组概况小组名称热工分部自动班QC小组课题名称缩短操作站故障恢复时间成立日期1991年3月课题注册日期2013年4月课题类型现场型注册编号HDRD-2013-18活动时间2012年3-11月受QC教育时间63小时/人活动次数8次人均出勤率96%序号姓名性别年龄文化程度职务（职称）组内职务1王

峰男55大专分部主任技术指导2顾开宇男46大专分部主任技术指导3王春辉男38本科分部主任技术指导4李建平男37本科分部专工技术指导5郝志国男38本科班长组

长6李

捷男31本科技术员方案策划7曹

哲男28本科专责工方案策划8靳丽华女33大专甲检现状调查9王梦娟女30本科甲检方案实施10张倩倩女29本科甲检效果检查11潘银涛男27研究生乙检资料整理小组成员及分工国电电力邯郸热电厂热工分部自动班QC小组76983215410111213140目录CONTENT一、小组概况二、选题理由国电电力邯郸热电厂热工分部自动班QC小组1、厂部要求：规定消缺时间应该控制在24小时以内二、选题理由国电电力邯郸热电厂热工分部自动班QC小组二、选题理由2、目前存在的问题：

小组成员对近两年发生的操作站故障情况进行数据跟踪和整理并绘制出表格，可以看到DCS控制系统在运行中，平均每5个月发生一次操作站故障，故障消除时间在24小时以上，造成人力精力消耗过大，严重影响机组人员的正常操作和班组的日常工作。故障时间故障设备故障现象故障结果处理方法投入人力处理时间2011年10月12号机组锅炉副站画面死机，重新启动主机失败横河工控机操作系统损坏使用外置磁带恢复3人48小时2012年3月脱硫DCS系统54号站操作软件报错，重新打开失效和利时操作员在线软件损坏更新软件重新配置3人36小时2012年10月11号机组汽机主站画面死机，重新启动后操作软件无法运行横河DCS控制软件损坏使用光盘恢复3人40小时2013年1月脱硫DCS系统52号站开机后无法登陆window操作系统主机硬盘损坏更换硬盘重做系统3人30小时规定消缺时间国电电力邯郸热电厂热工分部自动班QC小组

根据厂部对于消缺时间的要求，结合我们的设备目前存在的问题，我们选定的课题是：缩短操作站故障恢复时间。二、选题理由选定课题国电电力邯郸热电厂热工分部自动班QC小组76983215410111213140目录CONTENT一、小组概况二、选题理由三、活动计划

国电电力邯郸热电厂热工分部自动班QC小组活动计划阶段活动程序活动内容计划活动进度主要参与者3-6月7-8月9-10月11月P现状调查设定目标分析原因确认要因制定对策通过对现状的调查，设定活动目标，确定要因并制定好对策.

郝志国李

捷曹

哲D实施对策组织实施制定的对策

曹

哲张倩倩C检查效果搜集数据检查活动效果

靳丽华王梦娟A巩固成果总结回顾

郝志国潘银涛三、活动计划国电电力邯郸热电厂热工分部自动班QC小组76983215410111213140目录CONTENT一、小组概况二、选题理由三、活动计划

四、现状调查国电电力邯郸热电厂热工分部自动班QC小组四、现状调查班组目前掌控4套DCS控制系统，包括三台主机组和独立的脱硫系统国电电力邯郸热电厂热工分部自动班QC小组四、现状调查

操作站（台）操作系统控制软件网络配置DPU数量投运时间11号机组8windowsxpprofessionalcentum3000双结构V网、E网2对1998年6月12号机组7windowsxpprofessionalEDPF-NTPlus双网段A、B9对1999年4月13号机组7windows2000Dos6.22EDPF-NT双网段A、B14对2006年8月脱硫系统6windows2000professionalHOLLiAS5.04网段128、129、130、13110对2006年4月各系统基本信息从上表可以看出，自动班所管辖的各机组操作站数量多差别大，由于操作系统、控制软件、系统配置等方面的不同给操作站故障出现后的恢复工作带来极大不便。国电电力邯郸热电厂热工分部自动班QC小组四、现状调查故障时间故障设备故障结果硬件更换安装操作系统软件安装DCS控制软件进行系统配置恢复时间2011年10月12号机组锅炉副站横河工控机操作系统损坏无安装安装配置48小时2012年3月脱硫DCS系统54号站和利时操作员在线软件损坏无无安装配置36小时2012年10月11号机组汽机主站横河DCS控制软件损坏无无安装配置40小时2013年1月脱硫DCS系统52号站主机硬盘损坏更换硬盘安装安装配置30小时我们根据以往故障处理时间，利用“分层法”制作出每个部分所占恢复工作内容的比例如下:国电电力邯郸热电厂热工分部自动班QC小组四、现状调查其中操作系统、DCS控制软件、系统配置都属于软件范围，可以得到以下图表：█我们可以看到，影响操作站故障恢复时间超标的主要原因是软件方面占据了大部分内容，只有想办法最大程度缩短软件恢复时间，才能从根本解决问题！

所以，“软件恢复时间超标”是我们的症结所在！软件操作系统DCS控制软件系统配置国电电力邯郸热电厂热工分部自动班QC小组76983215410111213140目录CONTENT一、小组概况二、选题理由三、活动计划

四、现状调查五、设定目标

国电电力邯郸热电厂热工分部自动班QC小组五、设定目标

11号操作员站班组PC机品牌

戴尔DELL联想LenovoCPUIntelXeonIntelDuo主频2.4GHz2.93GHz内存3GB2GB硬盘容量250GB320GB操作系统windowsxpwindowsxp应用软件容量8GB10GB系统配置需要不需要恢复方式光盘安装软件还原工具故障恢复时间40小时2个小时1、活动目标□我们拿11号现场操作员站与班组普通PC机进行了详细比较和数据统计，结果如下表所示：国电电力邯郸热电厂热工分部自动班QC小组五、设定目标可以看到，两者软硬件主体配置相似，但班组PC机故障恢复仅用了2个小时，所以我们有理由、有信心将操作站故障恢复时间由之前的平均38.5小时缩短至6个小时。10

2030

40

小时38.5小时活动前6小时目标值缩短32.5小时国电电力邯郸热电厂热工分部自动班QC小组五、设定目标2、目标可行性分析因此，我们制定的目标一定能够实现！(1)人员素质：本小组成员整体水平较高，小组11名成员均具为大专及以上学历，工程师6名，助理工程师5名，专业知识丰富。(2)QC经验：小组成员经过多次活动，具有分析和解决实际问题的经验和能力，自小组成立以来，通过团队协作，共解决过30余个QC课题，节省资金超过两百万元人民币。(3)技术支持：计算机技术发展突飞猛进，应用软件层出不穷，小组成员曾多次使用新方法、新手段攻克计算机难题，拥有丰富现场经验。国电电力邯郸热电厂热工分部自动班QC小组76983215410111213140目录CONTENT一、小组概况二、选题理由三、活动计划

四、现状调查五、设定目标

六、原因分析

国电电力邯郸热电厂热工分部自动班QC小组六、原因分析针对症结找原因，小组成员围绕影响软件恢复时间长的症结，从人、机、料、法、环五方面进行了深入的讨论和分析，共找出8条末端因素并绘制出关联图：

软件恢复时间超标人员人员检修不到位人员培训不到位机器材料方法环境操作站性能差软件版本低操作系统安装DCS控制软件安装系统配置现场环境恶劣国电电力邯郸热电厂热工分部自动班QC小组六、原因分析1.人员培训不到位2.人员检修不到位3.操作站性能差4.软件版本低5.操作系统安装6.DCS控制软件安装7.系统配置8.现场环境恶劣通过分析得出8条末端因素针对每条末端因素进行要因调查……国电电力邯郸热电厂热工分部自动班QC小组76983215410111213140目录CONTENT一、小组概况二、选题理由三、活动计划

四、现状调查五、设定目标

六、原因分析

七、要因确定

国电电力邯郸热电厂热工分部自动班QC小组七、要因确定□班组定期进行培训学习，其中专门针对DCS控制系统进行过技术讲课，并进行实际考试操作，每人的成绩都在80分以上。1、人员培训不到位日

期2012-3-72012-9-152013-1-172013-4-12

姓

名理论考试理论考试理论考试实际操作平均成绩郝志国9896999897.75李

捷9797959896.75曹

哲9290858086.75靳丽华8992909591.5张倩倩9283899088.5王梦娟9290869390.25潘银涛9593949694.5国电电力邯郸热电厂热工分部自动班QC小组七、要因确定及格线1、人员培训不到位人员培训效果明显，培训不到位是非要因国电电力邯郸热电厂热工分部自动班QC小组七、要因确定□操作站属于DCS系统重要设备，按照热工行业标准，要定期进行各级检修工作，每次检修都有专人负责，填写检修工作票，工作完成后，进行检查验收，我们查看了以往的检修台账，有详细检修记录表。2、人员检修不到位

检修时间设备人数12012年3月11号机组DCS系统C级检修422012年3月脱硫DCS系统C级检修432012年5月13号机组DCS系统C级检修442012年9月12号机组DCS系统C级检修352012年9月脱硫DCS系统C级检修362013年3月12号机组DCS系统A级检修472013年4月脱硫DCS系统A级检修2人员检修不到位是非要因国电电力邯郸热电厂热工分部自动班QC小组七、要因确定

性能指标11号机组12号机组13号机组脱硫系统最低要求操作系统windowsxpprofessionalwindowsxpprofessionalwindows2KDos6.22windows2Kprofessionalwindows2K处理器IntelXeonPentiumDualPentium4Intel4三代以上主频2.4GHz2.6GHz2.4GHz2.8GHz2.0GHz以上内存3GB2GB512MB512MB不低于256MB硬盘250G500G80G80G80G以上□通过调查各机组的操作站，其主要性能如下表所示3、操作站性能差操作员站性能差是非要因国电电力邯郸热电厂热工分部自动班QC小组七、要因确定

11号机组12号机组13号机组脱硫系统投运时间1998年6月1999年4月2006年11月2006年4月DCS厂家西仪横河国电智深国电智深HOLLiAS升级改造时间2010年7月2013年4月无2010年11月升级前版本centum-cscentum-csEDPF-NTV1.1.0.SP1升级后版本centum-cs3000EDPF-NTPlus同上V1.1.0.SP4同类产品最新版本centum-cs3000EDPF-NTPlusEDPF-NTPlusV1.1.0.SP44、软件版本低□自机组投运以来，11、12号机组以及脱硫系统都经历过升级改造过程，版本对比如下：软件版本低是非要因国电电力邯郸热电厂热工分部自动班QC小组七、要因确定序号步骤内容所需时间1进入Bios选择光盘启动5分钟2等待安装就绪10分钟3进行硬盘分区30分钟4选择方式进行系统安装60分钟5进行声卡、网卡等配置15分钟6安装程序检查系统配置、性能20分钟7重新启动，输入个人信息10分钟8安装必要的windows工具软件2小时5、操作系统安装

从上表可以看到，理想状态下重新安装操作系统需要4小时以上，此外光盘不平整、光驱磁头老化、硬盘存在数据死区都会影响光盘安装速度，可见要想达到缩短操作站故障恢复时间，必须解决操作系统安装问题，所以，操作系统安装是第一个要因！□当操作站出现故障需要恢复时，在进入不了桌面的情况下需要重新安装操作系统。传统安装方法是使用光盘安装，主要步骤和所需时间如下表所示：国电电力邯郸热电厂热工分部自动班QC小组七、要因确定

11号操作站12号操作站13号操作站脱硫操作站总控制台1111监控软件1111工程管理0001数据采集1111历史趋势1111驱动设备2234其它应用软件6455合计121012146、

DCS控制软件安装□下面列举出各操作站正常运行时需要安装的软件数量：国电电力邯郸热电厂热工分部自动班QC小组七、要因确定6、

DCS控制软件安装□

考虑到现场实际安装环境和成员技能水平，以安装一个软件平均耗用0.5小时计算，并与一个法定工作日8小时比较，得到下面图表：可以看到DCS控制软件安装几乎占据了一个工作日的时间，是造成操作站故障恢复时间超标的第二个要因！国电电力邯郸热电厂热工分部自动班QC小组七、要因确定7、

系统配置□

在操作系统和DCS控制软件安装完成后需要对操作站进行系统配置，以脱硫系统为例，主要配置步骤如下：网络配置每个网卡配置不同的IP地址4块网卡分别对应128、129、130、131段功能配置操作级别管理权限安全等级报警等级启动选项数据拷贝控制逻辑操作画面历史数据国电电力邯郸热电厂热工分部自动班QC小组七、要因确定网络配置以每个网段需要5分钟时间计算需要5*4=20分钟功能配置配置每项功能平均30分钟计算需要6*30=3小时数据拷贝控制逻辑、画面、各种数据占20GB左右，USB传输速度一般为15MB/s所需时间为20*1024/15/60=25分钟20M3H25M4小时左右

可见，进行系统配置占据了大量时间，所以操作站系统配置是要因！7、

系统配置□

我们对这三个主要步骤所用时间进行分析总结，结果如下：国电电力邯郸热电厂热工分部自动班QC小组七、要因确定

冬季夏季

温度（℃）湿度（％RH

）温度（℃）湿度（％RH

）11号主控室1945254012号主控室1945254013号主控室20402438脱硫主控室18502245适宜值15~3030~7015~3030~708、现场环境恶劣□

我们统计了冬夏两季各主控室温度、湿度值并与适宜值比较，可以看到，操作员站均在合适环境下运行工作，所以，现场环境恶劣是非要因。国电电力邯郸热电厂热工分部自动班QC小组七、要因确定

通过小组对上述所有末端原因的论证，找出了主要原因，软件恢复时间超标的主要原因为：操作系统安装、DCS控制软件安装、系统配置

操作系统安装DCS控制软件安装系统配置软件恢复时间超标的主要原因国电电力邯郸热电厂热工分部自动班QC小组76983215410111213140目录CONTENT一、小组概况二、选题理由三、活动计划

四、现状调查五、设定目标

六、原因分析

七、要因确定

八、制定对策国电电力邯郸热电厂热工分部自动班QC小组八、制定对策主要原因对策What目标Why措施How负责人Who地点Where计划完成时间When操作系统安装更改安装方式缩短操作员站故障恢复时间至6小时使用软件还原工具曹哲脱硫电子间2013年5月张倩倩DCS控制软件安装缩短控制软件安装时间使用软件还原工具李捷脱硫电子间2013年6月靳丽华王梦娟参数配置优化参数配置步骤使用软件还原工具郝志国脱硫电子间2013年6月潘银涛

根据以上主要原因，自动班QC小组按照5W1H的原则，制定对策表如下：国电电力邯郸热电厂热工分部自动班QC小组76983215410111213140目录CONTENT一、小组概况二、选题理由三、活动计划

四、现状调查五、设定目标

六、原因分析

七、要因确定

八、制定对策九、对策实施

国电电力邯郸热电厂热工分部自动班QC小组九、对策实施措施实施：操作站故障出现时，使用软件还原工具来代替原有的操作系统安装、DCS控制软件安装、系统配置等方法。操作系统DCS软件系统配置软件还原工具国电电力邯郸热电厂热工分部自动班QC小组九、对策实施软件还原步骤1、选择分区2、镜像备份3、保存文件国电电力邯郸热电厂热工分部自动班QC小组九、对策实施

11号操作站12号操作站13号操作站脱硫操作站硬盘分区数量3443镜像文件数目16141412单个文件大小1.3GB1.2GB1.4GB1.7GB自动班QC小组已将4套DCS系统共28台操作站进行了软件还原备份，生成了56个镜像文件，同时也保存在操作站非系统硬盘分区内，这些镜像文件中包含各个操作站所有的数据信息和系统配置。国电电力邯郸热电厂热工分部自动班QC小组九、对策实施

与传统恢复方式相比，软件还原方法拥有毋庸置疑的优势，下面就两种方法进行实际对比：

传统安装方式软件还原方法主要步骤操作系统安装DCS控制软件安装系统配置镜像还原恢复方式手动切换自动进行工具类型光盘、硬盘、外置光驱、说明书等优盘所需人数至少2人1人即可风险度容易造成硬件损坏纯软件操作安全可靠数据完整度数据易丢失数据无丢包现象恢复质量需要磨合效果差100%克隆效果好国电电力邯郸热电厂热工分部自动班QC小组76983215410111213140目录CONTENT一、小组概况二、选题理由三、活动计划

四、现状调查五、设定目标

六、原因分析

七、要因确定

八、制定对策九、对策实施

十、效果检查

国电电力邯郸热电厂热工分部自动班QC小组十、效果检查我们小组于2013年7月至11月利用消缺机会对操作站进行了现场试验，结果如下表所示：

13号机组脱硫系统脱硫系统实施前40小时36小时30小时活动后3.5小时2.5小时3小时

可以看到，操作站的恢复时间由活动前的平均38.5小时缩短至3小时，远远达到了目标值要求。国电电力邯郸热电厂热工分部自动班QC小组十、效果检查6h38.5h3h目标实现了！国电电力邯郸热电厂热工分部自动班QC小组76983215410111213140目录CONTENT一、小组概况二、选题理由三、活动计划

四、现状调查五、设定目标

六、原因分析

七、要因确定

八、制定对策九、对策实施

十、效果检查

十一、效益分析国电电力邯郸热电厂热工分部自动班QC小组十一、效益分析□使用软件还原工具代替传统装机方法，可以用4个16G优盘代替大量的传统安装工具，以windowsxp正版操作系统为例，市场价为1600元/套，仅可安装5次，使用软件还原方法后可以节省上千元的开支。1、经济效益国电电力邯郸热电厂热工分部自动班QC小组十一、效益分析2、社会效益□活动后，操作站故障恢复时间极大程度缩短，减少了风险时间，降低了工作强度，无形中延长了操作站使用寿命。

此外活动的开展应用打破了常规思路方法，为下一步的技术创新提供了丰富的经验和信心，有助于创先争优、降本增效等活动的开展。国电电力邯郸热电厂热工分部自动班QC小组十一、效益分析3、小组综合素质质量意识实施前：2分实施后：5分个人能力QC知识团队精神自信心质量意识个人能力实施前：2分实施后：4分QC知识实施前：2分实施后：4分团队精神实施前：3分实施后：5分自信心实施前：3分实施后：5分实施后实施前国电电力邯郸热电厂热工分部自动班QC小组76983215