MGW Core MP 倒换流程_gd_shenwenguang_01.doc

PublicINSTRUCTION9 (9)Prepared (Subject resp)No.CBC/PS/UApproved (Document resp)CheckedDateRevReferenceCBC/PS/U2012-07-23PA1MGW Core MP Switch Procedure1 准备工作检查MGW的alarm以及event，以确保MGW不存在严重告警。检查步骤如下：1.1 检查MGW的active alarm打开EMAS/NM，选择Alarm List。如果告警列表里不是空的，你可以通过在该告警条目上按鼠标右键选择Detail来查看详细信息。确保没有 critical级别或者是发生原因不明的告警。告警等级Critical这类问题需要被立刻解决。Major这类问题可以在正常的工作时间内修复。Minor这类问题可以等到MGW定期维护的时候修复。Warming这类告警等级表明，在任何重大影响发生之前，监测到有发生会影响服务的问题的可能性或者这种问题即将发生。1.2 检查MGW的Alarm log以及 Event log打开EMAS/NM，选择Alarm Log或者 Event Log 或者 Alarm and Event Log。通过右击一个alarm或者event，选择Details，可以得到相关的具体信息。这些alarm或者event历史记录反应了该网元近期的表现。1.3 对磁盘进行disk health checkAmos指令：1) lt ManagedElement2) get ManagedElement=1=Proxy Id 0MO SubNetwork=FET,MeContext=PC02MG,ManagedElement=1=.healthCheckResult Struct3 1.healthCheckResultCode = 99 (INITIAL_VALUE) 2.message = 3.startTime =healthCheckSchedule t1 = Struct1 has 2 members: 1.weekday = 1 2.time = 19:00 （该时间需要加8小时）.Total: 1 MOs查看周检的时间，避免在对磁盘周检时倒换core GPB板。3) acc 0 startHealthCheck ! 此处的0对应2）中打印的proxy id ！注意：请避免在常规计划操作，例如：auto CV backup的时候对磁盘进行disk health check（即避免执行：acc 0 startHealthCheck ） 等待打印结果：get ManagedElement=1.healthCheckResult Struct3 1.healthCheckResultCode = 0 (OK)若磁盘健康检查结果不是OK，而是NOT_OK或ABORTED, 请避免对core GPB板进行倒换。4) altk再次检查确保没有 critical级别或者是发生原因不明的告警或者File System Diagnostic Error handling或者Configuration Version Corrupt或者Upgrade Package Corrupt的告警。若有相应告警，请避免对core GPB板进行倒换，并按相应OPI处理。2 实施步骤2.1 对于GMPV3.0的实施步骤(软件版本R5或R6)：1) 创建一个新的CVcv mk 2) 把这个CV设成Startablecv set 3) 利用CLI命令行来检查哪个GPB板是active的。 lhsh 000200 mirror state lhsh 000300 mirror state 等待打印结果：在进行下一步之前，确保Peer Disk state是Connected和Valid。打印结果:4) 通过EMAS/NM重启active的GPB板来进行倒换（选择冷启动：RESTART_COLD）。5) 检查mirror stat 来确保倒换被执行了。 lhsh 000200 mirror state lhsh 000300 mirror state 等待打印结果：在进行下一步前确保Peer Disk state是Connected和Valid。注：如果只是检验备用GPB能否作为主用GPB，本步操作完毕后，跳至第8步。6) 倒换后运行24小时再倒回原来状态。 通过EMAS/NM冷重启（RESTART_COLD ）active的GPB板倒换回步骤3）时core MP的active，passive状态。如果倒换后的最终状态不是步骤3）时的状态，请继续执行第6）与第7）步。这里是指进行倒回操作，即对另外一块GPB板进行冷启动。7) 检查mirror stat 来确保倒换被执行了。 lhsh 000200 mirror state lhsh 000300 mirror state 等待打印结果：在进行下一步前确保Peer Disk state是Connected和Valid。8) 倒换后进行必要的健康检查。 健康检查步骤如下：8.1) 检查000200和000300上的RPU状态，所有RPU的opMode都应该是ASCONF（As Configured）状态，即RPU按照缺省定义运行在相应的core GPB板上，表示load module运行状态正常：Amos指令：inv！查看GPB2板的RPU状态！=Active Passive reliableProgramLabel LM Prod_Rev opMode switchOver norm replication Rpu MOid= 1,2 1,3 act_aal0_dynamic_adm CXC1322211_R61CJ01 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 2 1,2 1,3 act_aal0_static_adm CXC1322210_R61FN02 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 3 1,2 1,3 act_aal1_static_adm CXC1323491_R61CA01 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 6 1,2 1,3 act_aal5_dynamic_adm CXC1322209_R61HL01 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 14 1,2 1,3 act_aal5_static_adm CXC1322208_R61FN02 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 15 1,2 1,3 act_nsaal_adm CXC1321171_R61CG02 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 31 1,2 1,3 aet_aal2_mp CXC1320836_R61HL04 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 12 1,2 1,3 aet_atm_mp CXC1320839_R61HL08 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 20 1,2 1,3 aet_ds0mp CXC1323636_R61HL04 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 21 1,2 1,3 aet_equip_mp CXC1321520_R61FN05 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 22 1,2 1,3 aet_phy_mp CXC1324169_R61HL02 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 35 1,2 1,3 ans_aal05ncc CXC1320978_R61DX01 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 1 1,2 1,3 ans_aal1_cc CXC1323506_R61CA01 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 4 1,2 1,3 ans_aal1_ncc CXC1323507_R61HL01 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 5 1,2 1,13 ans_aal2cpsrc_12 CXC1322418/12_R61HL01 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 17 1,2 1,13 ans_aal2distncc_12 CXC1322419/12_R61HL02 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 9 1,2 1,3 ans_aal2nccadm_12 CXC1322420/12_R61HL03 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 13 1,2 1,3 ans_aalcrossconn CXC1320980_R61HL01 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 16 1,2 1,3 eah_fro CXC1324933/8_R30K01 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 1007 1,2 1,3 ipac_ipadm CXC1327943_R61HH03 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 25 1,2 1,3 ipcp_ipadm CXC1327846_R61HH09 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 26 1,2 1,3 licenseServer CXC1325792_R61HH06 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 29 1,2 1,3 msp_oam_eqh CXC1327784/8_R30T01 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 1052 1,2 1,3 msp_oam_im CXC1327782/8_R30J01 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 1054 1,2 1,3 msp_oam_msf CXC1327783/8_R30T01 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 1053 1,2 1,3 nclishell CXC1720483_R61HH07 1:ASCONF 1:ATPIUFAULT 2:AUTO 2:NEVER NcliShell 1,2 1,3 nss_mp CXC1321118/1_R61HH02 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 32 1,2 1,3 oam_clib CXC1728278/8_R30G01 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT CLI_Broker 1,2 1,3 osa_inet CXC1321315_R61HH03 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 24 1,2 1,3 osa_ospf CXC1321317_R61HH04 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 34 1,2 1,3 osa_secure_shell CXC1323911_R61HH08 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 39 1,2 1,3 osa_sw_installation CXC1321341_R61HH04 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 40 1,2 1,3 sa_mppxy_fro CXC1725745/8_R30S01 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT sa_mppxy_fro_act_0102_pas_0103 1,2 1,3 scc_adm CXC1327798_R61HH14 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 36 1,2 1,3 scc_mtp2_adm CXC1323657_R61BE02 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 30 1,2 1,3 scc_mtp2_hsl_adm CXC1723007_R61HH01 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS Mtp2HslAdm 1,2 1,3 sctp_adm CXC1325240/1_R61HH02 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS 37 1,2 1,3 spas_resource CXC1321408_R61HH03 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 381,2 1,3 target_monitor CXC1326054_R61HH02 1:ASCONF 2:ATPIUREST 2:AUTO 1:ALWAYS target_monitor！查看GPB3板的RPU状态！ 1,3 1,2 acsg_fro CXC1722797/8_R30U01 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT acsg_fro 1,3 1,13 ans_aal2cpsrc_12 CXC1322418/12_R61HL01 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 18 1,3 1,13 ans_aal2distncc_12 CXC1322419/12_R61HL02 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 10 1,3 1,2 osa_http_server CXC1320783_R61HH02 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 23 1,3 1,2 osa_ip_utilities CXC1322506_R61HH03 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 27 1,3 1,2 osa_jvm CXC1320784_R61HH08 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 28 1,3 1,2 osa_object_support CXC1323464_R61HH10 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 33 1,3 1,2 pms_event_distr CXC1321344_R61HH02 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT Pms 1,3 1,2 upcf_oam CXC1324928/8_R30S01 1:ASCONF 1:ATPIUFAULT 2:AUTO 4:APPLCONT 10058.2) 再次验证active core MP的状态：AMOS指令：get 0 coreget 0 core110602-22:10:27 OFFLINE_SZGM55 8.0t MGW_NODE_MODEL_B_15_106 stopfile=/tmp/9064=MO Attribute Value=ManagedElement=1 faultTolerantCoreStates s2 = ManagedElement=1,Equipment=1,Subrack=MAIN,Slot=2,PlugInUnit=1;Active ManagedElement=1,Equipment=1,Subrack=MAIN,Slot=3,PlugInUnit=1;PassiveReady =上述打印中Active的GPB应该