SCTP偶联中断故障处理案例

1、SCTPf禺联中断故障处理故障现象：诺西端局 CSGS45 勺单块 ESBfe 故障，造成 SCTPf 禺联的主通路中断，由于现网局问SCTR禺联均配谿了双通路， 单块 ESB8故障并不会导致局间SCTR禺联中断。而实际情况是，CSGS4 空中兴局向部分 SCTR 禺联中断，而到华为局向和其他诺西局向的 SCTR 禺联均正常，也就是说 SCTP 勺双通路并未起到保护作用，对此，我们进行了分析，并排除了故障。原因分析：分析判断可能原因：1、备用通路不通2、诺西端局硬件或配谿问题3、中兴端局硬件或配谿问题原因排查:SCTP(STREAMCONTROLTRANSMISSIONPROTOCO 以输协议

2、)能在两个端点之间提供稳定、有序的数据传递服务，在 SIGTRANfr 议的应用中，SCTP 上层用户是 SCN 信令的适配模块(如 M2UAM3UA,下层是 IP 网。偶联实际上是在两个 SCT 嘲点之间建立的连接关系，任何时亥 ij 两个 SCT 图点之间能且仅能建立一个偶联。通路则是一个端点将 SCT 吩组数据发送到对端端点特定传送地址的路由。在现网中，如下图 1 所示，两个端局之间配谿了 4 个偶联，每个偶联具有主备两条通路，并采用了心跳机制，即当某条通路空闲时，本端端点会生成相应的心跳消息并通过该空闲通路发送到对端端点，而对端端点收到消息后将立即发回对应的心跳确认消息。该机制被用来随

3、时监视偶联通路的可用情况，当某一条通路故障时，数据传送将立即切换到另一条通路上，以此来保持 SCTR 禺联的可靠性和稳定性。图 2 诺西端局偶联配谿示意图如上图所示， 诺西端局的偶联建立在 GISU 板上， 每一块 GISU 板对应一个偶联。每个偶联的两条通路分别通过两块 ESB连接直 IP 承载网，进而与对端局相连。本次故障起因为 ESB1 板故障， 但单块 ESB 板故障只会导致偶联 2 条通路中的 1 条通路中断，根据偶联的心跳机制，数据传输将立即切换到另一条通路上，整个偶联将不会受影响。而实际情况是 CSGS4 宏中兴局向部分 SCTR 禺联中断，而到华为局向和其他诺西局向的 SCTR

4、 禺联均正常，也就是说 SCTP 勺双通路并未起到保护作用，对此，我们进行了如下分析。1、偶联备用通路不通当偶联的主用通路中断后，备用通路未起到作用，导致偶联中断。因此，首先排查 备 用 通 路 是 连 通 。 通 过 ZOYI:A; 命 令 查 询 了 偶 联 对 应 的 IP 地 址 如 下 。ASSOCIATIONSETNAMEASSOCSETIDSCTPUSERROLEASSOC.ASSOCIDPARAMETERSETINDUNITINUNITNAMESTATE0GISU-2-MSSBICCSCTP-DOWNSOURCEADDRESS1:8SOURCEADDRES

5、S2:66SOURCEPORT:2905PRIMARYDEST.ADDRESS.:3/27SECONDARYDEST.ADDRES.S4/27DESTINATIONPORT:8071DATASTREAMCOUNT.:16ASSOC.ASSOCIDPARAMETERSETINDUNITINUNITNAMESTATE1GISU-4-MSSBICCSCTP-DOWNSOURCEADDRESS1:9SOURCEADDRESS2:67SOURCEPORT:2905PRIMARYDEST.ADDRES

6、S.:3/27SECONDARYDEST.ADDRES.S4/27DESTINATIONPORT:8072DATASTREAMCOUNT.:16ASSOC.ASSOCIDPARAMETERSETINDUNITINUNITNAMECSGS9BICC9M3UASERVERSTATESOURCEADDRESS1:10,157.32.40SOURCEADDRESS2:10,157.32.168SOURCEPORT:2905PRIMARYDEST.ADDRESS.:10,157.5.13/27SECONDARYDEST.ADDRES.S4/27

7、DESTINATIONPORT:8073DATASTREAMCOUNT.:16ASSOC.ASSOCIDPARAMETERSETINDUNITINUNITNAMESTATE3GISU-84MSSBICCASP-DOWNSOURCEADDRESS1:10,157.32.41SOURCEADDRESS2:10,157.32.169SOURCEPORT:2905PRIMARYDEST.ADDRESS.:10,157.5.13/27SECONDARYDEST.ADDRES.S4/27DESTINATIONPORT:8074DATASTREAMCOUNT.:16SPECIFICATI

8、ONVERSION.:1.0(RFC)TRAFFICMODE:LOAD-SHAREASPMESSAGES:YESREGISTRATIONREQUEST.:YESSSNMMESSAGESBROADCAST:NONETWORKAPPEARANCE.:4294967295ASPMESSAGESINIPSP.NOROUTINGCONTEXT:-FIRSTDATASTREAMNUMBER.:1TACK:2SECONDSM3UAHB.INTERVAL:15SECONDSACTIVATIONDELAY:0SECONDS其中 SOURCEADDRESSHPRIMARYDEST.ADDRESS了主用通路的两个端

9、点的 IP 地址， SOURCEADDRESS2SECONDARYDEST.ADDRESS 了备用通路两个端点的 IP 地址。利用 ZQRm 令，对每个偶联的备用通路 IP 地址进行了 PING 测试，结果均能 PING 通，表明备用通路每个地址都是连通的。QRX:GISU,3:IP=4,SRC=66”,;LOADINGPROGRAMVERSION24.18-0MSCiCSGS452013-01-2117:23:36PING,SENDINGUNIT:GISU-2PING4(4)from66:

10、56databytes64bytesfrom4:icmp_seq=0ttl=251time=26.921msGISU-5MSSBICCSCTP-DOWN-4pingstatistics-1packetstransmitted,1packetsreceived,0%packetlossround-tripmin/avg/max/stddev=26.921/26.921/26.921/0.000msCOMMANDEXECUTED2、诺西端局硬件或配谿问题诺西端局的偶联是由 GISU 板负责的，首先通过 ZUSI 命令查询各 GISU 板工作状态均正常，且无任

11、何告警，证明硬件无问题。ZUSI;LOADINGPROGRAMVERSION27.15-0EXECUTIONSTARTEDMSCiCSGS452013-01-2117:13:32WORKINGSTATEOFUNITSUNITPHYSSTATELOCATIONINFOGISU-0003ASP-EXVMU-2IDLEGISU-1003BWO-EXVMU-2-GISU-2003CWO-EXVMU-3-GISU-3003DWO-EXVMU-3-GISU-4003EWO-EXVMU-4-GISU-5003FWO-EXVMU-5-GISU-60040WO-EXVMU-6-GISU-70041WO-EXVM

12、U-7-GISU-80042WO-EXVMU-8-GISU-90043WO-EXVMU-9-GISU-100044WO-EXVMU-10-GISU-110045SP-EXVMU-10IDLE接下来查询建立在同一块 GISU 板上，但到其它局向的偶联状态。如下所示,标黄的部分为到华为关口局 HYADS 酌偶联，且开在 GISU-2 和 GISU-4 板上，这与到中兴 CSGS 的的偶联开在同一块板件上。两者采用相同配谿，到华为关口局的偶联正常，排除了因诺西端局配谿不当导致偶联中断的因素。ASSOCIATIONSETNAMEASSOCSETIDSCTPUSERROLEHYADS2BICC6M3UA

13、SERVERASSOC.ASSOCIDPARAMETERSETINDUNITINUNITNAMESTATESOURCEADDRESS1:6SOURCEADDRESS2:64SOURCEPORT:2905PRIMARYDEST.ADDRESS.:/27SECONDARYDEST.ADDRES.S30/27DESTINATIONPORT:2906DATASTREAMCOUNT.:160GISU-17MSSBICCASP-ACTIVEASSOC.ASSOCIDPARAMETERSET1GISU-07MSSBI

14、CCASP-ACTIVESOURCEADDRESS1:10,157.32.37SOURCEADDRESS2:10,157.32.165SOURCEPORT:2905PRIMARYDEST.ADDRESS.:10,157.129.2/27SECONDARYDEST.ADDRES.S31/27DESTINATIONPORT:2906DATASTREAMCOUNT.:16ASSOC.ASSOCIDPARAMETERSETINDUNITINUNITNAMESTATE2GISU-26MSSBICCASP-ACTIVESOURCEADDRESS1:10,157.32.38SOURC

15、EADDRESS2:10,157.32.166SOURCEPORT:2905PRIMARYDEST.ADDRESS.:10,157.129.3/27SECONDARYDEST.ADDRES.S30/27DESTINATIONPORT:2906DATASTREAMCOUNT.:16ASSOC.ASSOCIDPARAMETERSETINDUNITINUNITNAMESTATE3GISU-46MSSBICCASP-ACTIVESOURCEADDRESS1:10,157.32.39SOURCEADDRESS2:10,157.32.167SOURCEPORT:2905PRIMAR

16、YDEST.ADDRESS.:10,157.129.3/27SECONDARYDEST.ADDRES.S31/27DESTINATIONPORT:2906DATASTREAMCOUNT.:16SPECIFICATIONVERSION.:1.0(RFC)TRAFFICMODE:LOAD-SHAREASPMESSAGES:YESREGISTRATIONREQUEST.:YESSSNMMESSAGESBROADCAST:NONETWORKAPPEARANCE.:8ASPMESSAGESINIPSP.NOROUTINGCONTEXT:-FIRSTDATASTREAMNUMBER

17、.:1TACK:2SECONDSINDUNITINUNITNAMESTATEM3UAHB.INTERVAL:15SECONDSACTIVATIONDELAY:0SECONDS3、中兴端局硬件或配谿问题1）中兴端局的偶联是由 SIPI 板负责的，经诊断 2 块 SIPI 单板工作状态均正常，且无任何告警，证明硬件无问题。2）查看中兴交换机 CSGS9SCTP 联配谿，数据配谿正确，如下：数据配置S9-CSGS45）.txt3）、查看 BFD（双向转发检测：BidirectionalForwardingDetection）功能是否开启。BFD功能可在极短时间内检测到转发路径中的错误，并触发切换到备

18、用路由、接口甚至是整个网络。通过中兴 CSGS9E 执行 SHOWBFDSESSION 认 CSGS91JCE 之间开启了 BFD 功能且 BFD 犬态为 UP 状态，正常。在中兴交换机 CSGS9t 执行 SHOWIPROUT取 CSGS91JCSGS45 勺路由配谿如下：IPv4Roux1ngTable:DestMa131cGwInterfaceOwnerprinuetricbfdWeight10.1ST.32.3S5510,157.5.1370 1:11:1110disable110157.32.35255,255.255x255ID-157.5.90 1510

19、1:11static2口disable11Q.157,329233.255.255,255ID.157.S.9011s-ac-ic10disable955370 1:141:112udisable11Q.157.32.402S58ID.157.5.137011static10disable：110.15-t33+40255,255.2555501:101:1120disable110.157a32.412S55ID.157.5.90 1:101:11static

20、10disable110.1B7.32.41255.255.25S.255370 1:11:1120disable1255,255.255x255ID-1B7.5.1370 1:141:11STuBtiC1口disable110.1ST.32.1665510.157.S.901s-ac-lc20disable110,157.32.1675510.157-5.90 1:101:1110disable6755ID.157.5.1370 It11311stac-ic20disable110.15,32.ieSi55t255r；55TJ55IC.157.5.1370110dxsbl11Q.157.32.16&2SS.25S.255.255ID.157.5.90 1:101:11static20disable110.1B7.32.16