网元告警处理流程.doc

一、半永久连接状态告警A2/APT WHMSC8*57/GB/0/ 926 020820 0627 SEMIPERMANENT CONNECTION FAULT NAMEMSC3-0此告警出现多伴随有信令中断以及DIP中断告警，多为传输故障引起。如果没有半永久连接所在设备的DIP告警出现，可以先拆除此半永久连接，再按原有定义数据重新定义激活，即可。若激活不成功，仍有告警，则说明信令终端设备也许有故障，可以另换一个新的C7ST2C设备定义（用STDEP：DEV=C7ST2C-0&-200；找出状态为IDLE的）。若告警仍出现，则注意观察与此有关的DIP是否有传输质量告警。具体步骤为：1、EXSCP：NAME=MSC3-0；找到对应的UPD设备及信令中断C7ST2C-xx2、EXSCE：NAME=MSC3-0，DEV=UPD-xx；拆除该半永久连接3、EXSPI：NAME=MSC3-0；重新定义EXSSI：DEV=UPD/C7ETC4/MALT-xx；EXSSI：DEV=C7ST2C-xx；4、EXSCI：NAME=MSC3-0，DEV=UPD-*；二、SIZE调整告警A2/APZ WHHLR3*57/GB/0/ 263 020826 1034 SIZE ALTERATION OF DATA FILES SIZE CHANGE REQUIRED此告警出现说明有部分FUNCTION BLOCK的SAE值需增加，可根据提示查看需要调整的SAE值，向爱立信工程师确认此FUNCTION BLOCK SAE值是否可以扩大1、DBTSP：TAB=SAACTIONS； 通过查看SAACTIONS表，找到引起告警的FUNCTION BLOCKDATABASE TABLEBLOCK TAB TABLE WRAPPEDSAFTAB1 SAACTIONS YESACTNUM SAE BLOCK TYPE CNTRTYP CURRNI NEWNI 0 700 C7OMASE LOCAL CONS1 0 0 NIE NIR STATUS 0 0 REGEND通过该范例，可以发现需要调整的为SAE=700，BLOCK=C7OMASE，当前值为0，希望增加到的值仍为0，这是一个特例。可以通过参考同类其他网元的相同BLOCK值。如果当前和希望增加到的值相同，则可以通过指令SAALI；RESET此告警。2、SAAEP：SAE=700，BLOCK=C7OMASE； SIZE ALTERATION OF DATA FILES INFORMATIONSAE BLOCK CNTRTYP NI NIU NIE NIR 700 C7OMASE CONS1 0END3、SAALI;WO WHHLR3*57/GB/0/1/06/06 NVT-495 TIME 020827 1343 PAGE 1SIZE ALTERATION OF DATA FILES RESULTSAE BLOCK NI NIE NIR 700 C7OMASEFAULT CODE 97NI INCREASE TO ZERO REQUESTEDEND注：1、SAALI指令应慎用，因为该指令的作用是自动将BLOCK扩大到系统所期望的值，为避免引起不必要的SIZE调整，仍建议手工调整SAE值。2、HLR中如果出现SAE=501，BLOCK=ASD以及SAE=261 的SIZE调整告警，不要盲目调整，这两个SIZE的NI值与系统的设计容量有关，最好以释放资源的方式消除告警。三、IOG卷容量超过门限值告警A2/APZ WHHLR*57/FC/0/1 273 020826 0607 VOLUME LIMIT EXCEEDEDSPG VOLUME LIMIT0 CHARVOLUME 80%此告警出现说明卷内容量超过总容量的门限值，由卷内多余文件占用硬盘存储空间引起，确认该告警产生的门限值大小，通常为总容量的80%左右。删除部分多余文件既可。但删除文件时应确认该文件是否有用。INMCT:SPG=0;:INFIP:VOL=CHARVOLUME; 查看该卷内的文件FILE TABLEFILE FCLASSICIFILE00 CMPICIFILE01 CMPRELFSW0 CMPRELFSW8 CMPTTFILE00 CMPEND经确认，RELFSW8文件为CP DUMP文件，不应存储在该卷中，可以删除。A2/APZ WHMSC1*57/FC/0/1 273 020826 0607 VOLUME LIMIT EXCEEDEDSPG VOLUME LIMIT0 EXCHVOLUME 2%此告警虽然也说明卷内容量超过总容量的门限值，但显而易见，该告警产生的门限值太小，只有2%。类似这类告警产生的门限值低于50%的告警，可以通过调整告警门限的方法来消除告警。inmct:spg=0; :invop:vol=exchvolume; 确认告警门限值大小VOLUME ATTRIBUTES STATUSREV DATE TOTSIZE(KB) USEDSIZE(KB) LIMIT1 201231 10938448 321475 2AVAILSIZE(%) USEDSIZE(%)97 3NODE1 IO1 SIZE1(KB)A HD-1 10938448NODE2 IO2 SIZE2(KB)B HD-1 10938448ENDINVOC：VOL1=EXCHVOLUME，LIMIT=80；修改告警门限值。END；四、CP故障告警A3/APZC WHMSC6*57/GB/0/ 806 020825 0222 CP FAULT此告警出现说明CP存在硬件临时或永久性错误，CP故障告警根据其严重性分为A1、A2、A3级别，告警出现后应先用指令DPWSP；查看CP工作状态，通常A3级别告警不影响CP工作状态。具体诊断修复过程如下：1、REPCI; 诊断CP故障ORDERED CP DIAGNOSISTEST RESULTFAULTFAULTTYPETEMPORARYMAG PCB REPLACED REASONCPU-B STUD-2 CPU-B POWC END此例诊断结果为一临时性错误，由DSU板故障引起，通常A3 CP FAULT告警诊断结果与此类似。临时性错误可以用指令修复或插拔板解决。REMCI:MAG=CPU-B,PCB=STUD-2; 根据诊断结果指令修复或插拔换板ORDERED CP MANUAL INTERVENTIONINTERVENTION PREPARATIONSUCCESSFULRECCI; 指令修复CP，使执行侧备用侧并边ORDERED CP REPAIRSUCCESSFUL注：A1、A2级别的CP FAULT须换板修复，应尽量在晚上话务量较低时执行。五、FORLOPP告警O1/APZ WHMSC4*57/GB/0/ 530 020819 1133 SYSTEM STATELONG DURATION TIME FOR FORLOPPINF1 INF2 INF3 INF4 H3E3 H2C H18 syfap:hours=1; ORDEREDWO WHMSC4*57/GB/0/1/06/06 NVT-534 TIME 020823 1047 PAGE 1ACTIVE FORLOPPSFORLOPP-ID STATUS NACT NPASS FLPROTYPE START BLOCKH0256 000D NORMAL 3 0 H0000 0002 020820 AOTH03EE 0019 ABORTED 10 4 H0000 0000 1133 C7TCPH02E1 002F ABORTED - - H0000 0000 1133 MRRMH02AF 001D NORMAL 1 26 H0000 0008 020821 JOBH03E3 002C NORMAL 3 0 H0000 0002 020816 AOTH012A 0030 NORMAL 3 0 H0000 0002 020819 AOTENDsyfip:fid=h3e3-h2c; ORDEREDWO WHMSC4*57/GB/0/1/06/06 NVT-534 TIME 020823 1047 PAGE 1HBWO WHMSC4*57/GB/0/1/06/06 NVT-534 TIME 020823 1049 PAGE 1INDIVIDUALS CONNECTED TO FORLOPPSEARCHYESFORLOPP-ID STATUS FLPROTYPE DATE TIMEH03E3 002C NORMAL H0000 0002 020816 1134BLOCK FILENUMBER INDIVIDUAL STATUS FID-VARAUE H0001 H0000 0000 ACTIVE1 H0051ADE H0001 H0000 0000 ACTIVE1 H0064AOT H0001 H0000 0000 ACTIVE1 H0090LAD H0011 H0000 007A ACTIVE2 H016BLAD H0012 H0000 0075 ACTIVE2 H016FLAD H0012 H0000 006A ACTIVE2 H016FLAD H0013 H0000 0152 ACTIVE2 H0166ENDSYFRI:FID=H3E3-H2C,BLOCK=AOT,IND=H0,FILENUM=H1;EXECUTED六、软件应用错误告警A3/APZ WHMSC1*57/GB/0/ 444 020822 0841 APPLICATION DETECTED SOFTWARE ERROR此告警出现多由于FORLOPP非正常释放引起，该告警仅仅只是告知维护人员此问题出现过。用指令确认后，即可去掉告警。但是我们应该观察此告警出现频率，如果频繁出现，应通知爱立信工程师，确认是否存在深层次软件问题。1、SYRIP：SURVEY； 指令查看软件事件记录，找到状态为ACTIVE的ORDEREDWO WHMSC1*57/GB/0/1/06/06 NVT-745 TIME 020823 1100 PAGE 1SOFTWARE RECOVERY SURVEYEVENT TYPE EXPLANATION EVENTCNT FRDEL 19 APPLERR ERROR REPORTED BY PROCEDURE FLERROR 456 18 APPLERR ERROR REPORTED BY PROCEDURE FLERROR 17 APPLERR ERROR REPORTED BY PROCEDURE FLERROR 16 APPLERR ERROR REPORTED BY PROCEDURE FLERROR 432 15 APPLERR ERROR REPORTED BY PROCEDURE FLERROR 167 14 APPLERR ERROR REPORTED BY PROCEDURE FLERROR 5 13 APPLERR ERROR REPORTED BY PROCEDURE FLERROR 12 APPLERR ERROR REPORTED BY PROCEDURE FLERROR 138 0 FORLOPP MANUALLY INITIATED FORLOPP RELEASE 0 61 FORLOPP FORLOPP RELEASE REQUESTED FROM APPL 1 53 FORLOPP MANUALLY INITIATED FORLOPP RELEASE 0 48 FORLOPP MANUALLY INITIATED FORLOPP RELEASE 0 44 LARGE FUNCTION CHANGE WITH SIDE SWITCH 43 LARGE COMMAND ORDERED RESTART 42 SMALL REST. OF APZ BLOCKS IN SB/SE AT FC 24 LARGE FUNCTION CHANGE WITH SIDE SWITCH EVENT CODE INF1 INF2 INF3 INF4 SIDE STATE DATE TIME ACTIVE 19 H4300 H6C02 H0201 H00D1 H002E A-EX PARAL 020822 0841 YES 18 H4300 H6C02 H0201 H00D1 H002E A-EX PARAL 020822 0838 NO 17 H4300 H6C02 H0201 H00D1 H002E A-EX PARAL 020822 0835 NO 16 H4300 H6C02 H0201 H00D1 H002E A-EX PARAL 020821 0747 NO 15 H4300 H6C02 H0201 H00D1 H002E A-EX PARAL 020820 2259 NO 14 H4300 H6C02 H0201 H00D1 H002E A-EX PARAL 020820 2244 NO 13 H4300 H6C02 H0201 H00D1 H002E A-EX PARAL 020820 2241 NO 12 H4300 H6C02 H0201 H00D1 H002E A-EX PARAL 020820 1421 NO 0 H310C H0000 H0144 H0001 H0000 A-EX PARAL 020819 1235 NO 61 H3100 H0146 H0001 H0000 H0002 A-EX PARAL 020816 1158 NO 53 H310C H0000 H0607 H0000 H0000 A-EX PARAL 020731 1619 NO 48 H310C H0000 H0001 H000F H0000 A-EX PARAL 020719 1537 NO 44 H900D H0000 H0000 H0000 H0000 B SINGLE 020712 2350 NO 43 H9003 H0000 H0000 H0000 H0000 B SB-SEP 020712 2246 NO 42 H900B H0000 H0000 H0000 H0000 B SB-SEP 020712 2243 NO 24 H900D H0000 H0000 H0000 H0000 B SINGLE 020519 2223 NOENDSURAE:RECTYPE=APPLERR; 指令去活该记录，使其状态变为DEACTIVEDA2/APT WHMSC6*57/GB/0/ 399 020823 1111 CCITT7 SIGNALLING LINK FAILURELS SPID SLC ST2-17-255-4 HLSTPB 0 C7ST2C-9SDLMLSTPB-0,C7BTC4-1FCODE INFO REASON 100 H0 EXCESSIVE ERROR RATE WHILST IN-SERVICE七、用户非法登陆告警A2/APZ WHHLR3*57/GB/0/ 001 020713 2332 H0001-0000USER EXCEEDED ALLOWED ACCESS ATTEMPTSUSER SOURCE TIME NVT-200 000630 0813此告警出现说明用户登陆输入口令不正确，且输入错误达到三次以上。通常这类告警一段时间后能自动消除，但是FORLOPP未能正常释放，所以仍然存在，为避免无意义的告警出现，可人工释放FORLOPP。1、ALLIP：ACL=A2，FID=YES； 显示告警的FORLOPP ID，如上所示2、SYFIP:FID=H1-H0； 显示该FORLOPP的FUNCTION BLOCK和FILE NUMBER3、SYFRI：FID=H1-H0，FILENUM=xx，BLOCK=xxx，INT=xx； 释放FORLOPP八、GROUP SWITCH 交换矩阵告警此告警出现说明TSM或SPM出现硬件故障，可根据告警和测试提示换板修复。1、GSSTP:TSM=TSM-B-1; 查看TSM设备状态，WO/S说明虽然是工作状态，但怀疑有故障GROUP SWITCH STATEUNIT STATE BLSTATE VARIANTTSM-B-1 WO/S 4END2、GSBLI:TSM=TSM-B-1; 闭掉该设备ORDERED GROUP SWITCH UNIT BLOCKING RESULTUNIT RESULT INFOTSM-B-1 EXECUTEDEND3、GSTEI:TSM=TSM-B-1; 用指令让交换机自行进行检测ORDERED GROUP SWITCH UNIT TEST RESULTUNIT TCASE FCODETSM-B-1 1 17POSSIBLE FAULTY CARDSUNIT SUBUNIT MAG CARDTSM-B-1 LMU-1 CILSU EMCC7ETC4-385 - ETC32END检测结果说明有以上板可能发生故障，但通常TSM工作状态不正常是由TSM所连接的SNT引起，这时我们可以首先通过指令测试SNT是否有错误，然后按提示依次换板。SNT和TSM之间会相互影响工作状态。4、NTCOP:SNT=C7ETC4-385; 根据测试结果，显示SNT连接TSM的位置确认连接关系SWITCHING NETWORK TERMINAL CONNECTION DATASNT SNTV SNTP DIP DEV DEVPC7ETC4-385 1 TSM-1-1 385C7B4 C7BTC4-12320&-12351END5、NTBLI:SNT=C7ETC4-385; 闭掉SNT6、NTTEI:SNT=C7ETC4-385; 指令进行SNT错误测试ORDERED SWITCHING NETWORK TERMINAL TEST RESULTSNT TCASE FCODE SUBSNT FCINFOC7ETC4-385 1 NO FAULTS FOUND 测试结果说明SNT没有错误END7、NTBLE:SNT=C7ETC4-385; 解闭SNTORDERED SWITCHING NETWORK TERMINAL DEBLOCKING RESULTSNT RESULT INFOC7ETC4-385 EXECUTEDEND8、关电，更换LMU-1板。注：此示例为BYB202老硬件故障处理办法。对于新硬件BYB501，如果测试结果为TS4B板故障，更换TS4B板时须闭掉该板上的全部TSM，一共4个和4个TSM所连接的EM，方能换板。9、GSTEI:TSM=TSM-B-1; 开电，重新进行TSM测试 GROUP SWITCH UNIT TEST RESULTUNIT TCASE FCODETSM-B-1 1NO FAULTS FOUND END10、测试无误后，解闭TSM，即恢复正常。GSBLE:TSM=TSM-B-1;九、网络同步错误告警（即时钟错误）A2/APT WHMSC6*57/GB/0/ 930 020828 1604 NETWORK SYNCHRONIZATION FAULTRCM/CCM/DIP/EXT STATE FCODERCM-0 BLOC 3此告警说明参考时钟存在硬件故障。可以进行测试后换板修复，处理步骤如下：1、NSBLI:RCM=RCM-0; 闭掉该时钟EXECUTED2、NSTEI:RCM=RCM-0; 交换机自行测试该参考时钟ORDERED CLOCK-REFERENCE TEST RESULTRCM/CCM/DIP/EXTRCM-0CLOCK-REFERENCE SIGNAL TOTALLY MISSINGPOSSIBLE FAULTY BOARDSMAG BOARDRCM-0 POU-1 POU-0 RPU ROUCLM-0 RCUCLM-1 RCUCLM-2 RCUEND测试结果说明电源故障导致参考时钟信号全部丢失，按提示关电，更换电源板，然后开电重新测试。若错误仍然如上所失，可尝试依次更换后续板块。如果仍然无效，用万用表测量电源线输入电压以及POU板输入输出电压是否正常。确认是否为电源线或机框故障，然后更换相应硬件。直至测试无误，解闭设备后工作状态正常为止。A2/APT WHMSC5*57/GB/0/ 930 020828 1604 NETWORK SYNCHRONIZATION FAULTRCM/CCM/DIP/EXT STATE FCODERCM-0 BLOC 5此告警说明参考时钟的振荡频率偏仪移较大，可以通过测试，指令修复，测试步骤同上，测试结果如下1、NSTEI:RCM=RCM-0; 交换机自行测试该参考时钟ORDEREDCLOCK-REFERENCE TEST RESULTRCM/CCM/DIP/EXTRCM-0CLOCK-REFERENCE FAULT-FREEPOSSIBLE FAULTY BOARDSMAG BOARDRCM-0 ROUEND 2、NSFMI：RCM=RCM-0；对RCM 的相关频率偏移情况进行测试。ORDERED 测试结果将在30分钟或5小时后出现CLOCK-REFERENCE RESULT OF FREQUENCY DEVIATION MEASUREMENTRCM/CCM/DIP/EXTRCM-0PERFORMEDRELATIVE FREQUENCY DEVIATION = 0 (UNIT: 1/100000 PPM)END3、NSDAP; 查看时钟模块的监测数据CLOCK-REFERENCE SUPERVISION DATASYNCHMODE STATESINGLE OPERATINGSTATIC DATARCM/CCM/DIP/EXT CLREFINL REFGRP PRI FDL WDL ACLRCM-0 0 2 2 4000 20 A22UPET 1 1 1 2000 10 A2EXT-0 8 3 3 100 10 A1DYNAMIC DATARCM/CCM/DIP/EXT FD WD FREQMEMRCM-0 0 0 02UPET 0 0EXT-0END4、比较频率的偏移量，如果小于设定值，解闭时钟模块 NSBLE：RCM=RDM-0；十、路由设备监测告警A2/APT WHGMSC4*57/GB/0/ 930 020908 1604BLOCKING SUPERVISIONR LVB NDV BLOGW2O 31 2776 31此告警表示路由上DEVICE 闭塞数超过了告警门限，引起该告警的原因较多，具体处理方法如下：1、 STRDP：R=GW2O，STATE=LIBL&SEAL&BLOC; 查看路由上闭塞DEVICEDEVICE STATE SURVEYR NDV NOCC NIDL NBLO RSTATGW2O 3561 839 2703 19 NORESDEVICE STATE DETAILSDEV STATE BLS FTYPE ADM ABS LST LISTC7BTC4-8634 LIBL HFFC7BTC4-8635 LIBL HFFC7BTC4-8638 LIBL HFFC7BTC4-8639 LIBL HFFC7BTC4-8641 LIBL HFFC7BTC4-8643 LIBL HFFC7BTC4-8644 LIBL HFFC7BTC4-8645 LIBL HFFC7BTC4-8646 LIBL HFFC7BTC4-8647 LIBL HFFC7BTC4-8648 LIBL HFFC7BTC4-8649 LIBL HFFC7BTC4-8651 LIBL HFFEND“LIBL“表示DEVICE的状态为线路闭塞，多由对端人为闭塞造成，可与对端交换机房联系，请其配合解闭闭塞DEVICE即可。2、 STRDP：R=8689O，STATE=LIBL&SEAL&BLOC; 查看路由上闭塞DEVICEDEVICE STATE SURVEYR NDV NOCC NIDL NBLO RSTAT8689O 60 33 27 7 NORESDEVICE STATE DETAILSDEV STATE BLS FTYPE ADM ABS LST LISTC7BTC4-10273 SEAL H50C7BTC4-10274 SEAL H30C7BTC4-10275 SEAL HFFC7BTC4-10276 SEAL H60C7BTC4-10277 SEAL HFFC7BTC4-10278 SEAL H50C7BTC4-10279 SEAL HFFend“SEAL“表示DEVICE被吊死多由话务信令过程中交换设备未收到征实信号造成，可通过以下步骤解决：1）、BLODI：DEV=C7BTC4-10273&-10279; 关闭DEVICE2)、EXDAE:DEV=C7BTC4-10273&-10279; 将DEVICE 设为预服务状态3)、EXDAI：DEV=C7BTC4-10273&-10279; 将DEVICE 由预服务状态设为服务状态4）、BLODE：DEV=C7BTC4-10273&-10279; 解闭DEVICE3、STRDP：R=YMCJO，STATE=LIBL&SEAL&BLOC; 查看路由上闭塞DEVICEDEVICE STATE SURVEYR NDV NOCC NIDL NBLO RSTATYMCJO 120 0 120 0 NORESDEVICE STATE DETAILSDEV STATE BLS FTYPE ADM ABS LST LISTC7BTC4-1377 BLOC ABL HFFC7BTC4-1378 BLOC ABL HFF C7BTC4-1379 BLOC ABL HFFC7BTC4-1380 BLOC ABL HFFC7BTC4-1381 BLOC ABL HFFC7BTC4-1382 BLOC ABL HFFC7BTC4-1383 BLOC ABL HFFC7BTC4-1384 BLOC ABL HFFC7BTC4-1385 BLOC ABL HFF “BLOC“表示DEVICE为闭塞状态，如果闭塞状态为ABL ，多由传输告警造成，可