TDLTE故障处理手册及典型案例.docx

lte故障处理手册一. 重大故障处理方法1. 重大故障实时告警列表告警类别告警设备表述描述可能的原因及影响华为enodeb网管批量网元断链或小区不可用基站断电，或大批量双模站点td测gps故障 传输设备网管批量网元断链基站断电，或传输原因中断2. 重大故障处理步骤【批量基站断站或小区不可用】原因分析 基站批量断点或或批量双模站点td测gps出现故障及传输设备故障关注重点 批量基站断站或小区不可用常见处理方法序号 处理方法“是”“否”1联系传输人员，看是否为传输设备故障422联系代维人员确定基站是否断电533联系代维人员确定基站是否为双模基站并确定td测gps完好54通知传输人员处理65通知代维人员处理66结束二.告警预处理告警分类1. 实时告警分类总表告警等级告警号告警名称本机网管紧急网元连接中断enodeb重要29243小区服务能力下降告警重要19240小区不可用告警重要26205bbu单板维护链路异常告警重要29207基站控制面传输中断告警重要25621直流输出异常告警重要26276制式间站点配置冲突告警重要26238rru组网拓扑类型与配置不一致告警重要bbp心跳检测失败告警重要26529射频单元驻波告警重要26322bbu测收发光异常重要26503rru测收发光异常重要26233bbu ir光接口性能恶化告警重要29201s1接口故障告警重要25888sctp链路故障告警重要26235射频单元维护链路异常告警重要26506rru测光口性能恶化重要26260系统时钟不可用告警2. 主要告警分析和常见的处理手段。1） 【网元链接中断】告警解释：网元与omc网管之间的链接中断，一般来讲，为断电或传输问题 对系统的影响 对该网元无法控制 告警处理序号处理方法“是”“否”1检查同一环路下基站是否全部中断(基站侧检查光路和电源是否ok.) 2 32通知传输中心处理433通知机房巡检处理故障(基站侧更换传输光模块/光纤)44结束2) 【29243：小区服务能力下降】 告警解释当基站射频资源或基带资源不能满足当前小区的配置规格时，产生此告警对系统的影响告警小区提供给客户可用的无线空口资源会减少。告警处理序号处理方法 “是” “否“1dsp brdmfrinfo查看当前rru型号(基站侧直接查看rru型号)2 72lst rru查询rru配置信息是否与当前rru相符(基站侧可以直接登录基站侧查看命令相同) 3 43lst almaf查询当前的告警信息，看可用通是否相符(基站侧可以直接登录或网管确认) 4 54mod rru 把通道数该为当前rru通道数，看告警是否恢复（基站侧请联系数据修改组修改数据） 9 5dsp vswr查看告警小区rru是否有驻波（基站侧联系网管确认） 866dsp sfp查看光模块型号是否满足lte需求（基站侧可直接查看）光模块大于6.144g。 787考虑可能基带板资源不足，需增加基带板lbbp。看是否恢复 9 8通知基站代维人员上站处理rru通道/驻波/光模块 9 9结束查询rru配置通道：查询基站当前告警信息：查询驻波：查询光模块型号，速率：3）【19240：小区不可用告警】 告警解释当基站检测到小区不能提供业务时，产生此告警。对系统的影响告警小区不能提供业务。告警处理序号处理方法“是“ “否“1在网管上查看基站是否断开（基站侧联系网管确认） 8 22dsp cell，发现小区为不可用状态（基站侧可直接登录基站查询或联系网管） 3 113lst almaf查看是否有rru告警,如硬件,温度,掉电等告警（基站侧可直接检查或登录基站查询） 94 4dsp brd ，看是否有rru故障（基站侧可直接查看rru是否掉电） 9 55dsp sfp查询不可用rru对应的光路是否ok（基站侧可看指示灯是否正常） 9 6 6dsp clksrc 查看当前使用的时钟,如是gps ,dsp gps查看当前收星情况（基站侧直接查看gps是否开路或登录基站查看） 9 77查看是否有系统无license运行告警、配置数据超出license限制告警 10 8通知传输人员处理故障 119通知代维人员处理故障 1110联系华为申请 1111结束查询小区是否可用：查看rru是否有告警：查询光路是否ok：查询gps是否可用：查看是否有license告警：4) 【29207: 基站控制面传输中断告警】（注：由于网元断链，网管无法对基站控制） 告警解释 当基站所有sctp链路状态都异常时，产生此告警。 对系统的影响 基站所有承载s1interface、x2interface的sctp链路（链路个数不少于2条）状态都异常，导致基站所有s1接口、x2接口无法建立成功，小区无法激活，用户无法入网。 告警处理序号 处理方法 “是“ “否“1在网管中心的告警台上，检查是否存在根源告警： sctp链路故障告警，s1接口故障告警2 42检查并处理sctp链路闭塞情况并处理，看是否恢复43联系传输网络维护人员处理故障 44结束5）【26233：bbu ir光接口性能恶化告警】 告警解释 当bbu的ir端口上的光模块的接收或发送性能恶化时，产生此告警。 对系统影响 1、光模块的收发性能严重恶化，可能导致ir链路承载的业务质量严重下降，或导致下级射频单元业务中断。2、光模块的收发性能轻微恶化，可能导致射频单元该ir链路承载的业务质量出现轻微恶化。告警处理序号处理方法 “是“ “否“1在网管中心的告警台上，检查是否存在告警（基站侧可登陆基站或联系网管） 2 52光模块的型号与射频单元测是否匹配,并用dsp sfp命令查询收发光是否过低或过高（基站侧可直接检查bbu到rru光模块型号是否相同或登陆基站查询）。 4 43联系代维到bbu近端，重新插拔故障ir端口上的光模块和光纤接头并用酒精擦拭以清洁光纤接头，看是否恢复 5 44通知代维人员上站更换光模块 55结束 查询rru收发光：6)【26260：系统时钟不可用告警】 告警解释 当基站使用本地晶振的时间超过其可保持的时限时，产生此告警。 对系统影响基站业务处理会出现各种异常，如切换失败、掉话等，严重时基站不能提供业务。告警处理序号处理方法 “是” “否”1网管中心告警台上，检查系统是否存在相关告警。（基站侧可直接检查gps是否开路或登陆基站检查） 2 52在网管室查询td测(lte取得时钟为对端及td测)是否配置时钟参考源和时钟参考源是否存在异常。（基站侧联系网管或登陆基站查询） 3 53查询单板是否故障 454通知代维处理 55结束查询gps情况：查询gps问题是否是有单板故障问题引起： 提示enodeb大部分取得时钟为对端（及td测），现网大部分为gps，当前时钟状态为不可用时，可判断gps问题，需上站检查gps。关于license的下发遵守的规则：td：lte：典型案例1、光模块速率问题导致小区服务能力下降告警现象描述：某局站点开通后出现小区服务能力下降告警，查询基站cell ，vswr 等均正常，也无任何告警。现场rru类型3152-e，基带板lbbpd，且3152-e开单流 1*20m小区。可能原因：1、射频单元发射通道故障，比如驻波，现场所接rru物理通道和数据配置不一致。2、单板硬件故障，软件运行异常等。3、小区cpri 带宽资源不足，光模块速率不匹配。处理过程：1. 网管查询 cell 建立成功，vswr 均为1.2左右，低于门限值，没有驻波。rru开单流 物理通道和数据配置一致。，排除原因1.2. 远程下点复位告警单板，单板运行正常后告警仍然不消除，近端插拔单板也不行，且没有单板硬件故障告警和单板软件运行异常告警，排除原因2.3. 通过命令dsp cprilbr 查询每个rruchain 的协商速率均为2.5g，重新协商str cprilbrneg 后 仍为2.5g，之后通过 dsp sfp 查询发现 bbu侧和rru侧光模块均为2.5g，到底问题基本定位，联系室分厂家全部更换6.14g 光模块后重新协商cpri速率，均为最大能力4.9g，告警也随之消除。总结建议3152-e 开1*20m 小区所需cpri速率为4.9g，而2.5g 满足不了此要求，进而就上报了小区服务能力下降告警。2、数据配置问题导致小区服务能力下降现象描述tds/l双模站点“xxxx”，tdl侧3个小区上报“小区服务能力下降告警”，但是查询rru驻波、收发光功率都正常，无其它相关告警，需要排查产生该告警的原因。enodeb版本：dbs3900v100r005c00spc310nodeb版本 ：dnb6200v400r007c00spc500告警信息小区服务能力下降告警，告警id= 29243，定位信息：本地小区标识=1, 小区当前使用发射通道数=1, 小区当前使用接收通道数=1, 具体问题=小区射频资源, 小区名称=盛平村fe1原因分析通常小区服务能力下降告警都是由于站点硬件故障导致的，例如rru驻波告警、rru到bbu之间收发光异常、光模块速率过低等，但是查询该站点并不存在上述情况，怀疑跟数据配置有关。处理过程1 查询rru驻波、收发光功率、光模块速率都正常，也不存在其它异常告警，初步排除硬件故障原因；2 怀疑跟数据配置有关，查询rru和扇区配置发现该站点为8t8r的宏站配置，而且rru的8个path也都正确关联进去，如下所示（详见附件）lst rru: 查询rru/rfu配置信息 - 柜号 框号 槽号 管理状态 rru拓扑位置 rru链/环编号 rru在链中的插入位置 rru类型 rru工作制式 接收通道个数 发射通道个数0 60 0 解闭塞 主链环 1 0 mrru tds_tdl 8 8lst sector: 查询扇区配置信息 - 扇区号 扇区名称 地理坐标数据格式 秒格式天线经度(秒) 秒格式天线纬度(秒) 经度(1e-6度) 纬度(1e-6度) 天线模式1 sector_1 度格式 null null 11425002 2273022 八发八收3 怀疑rru硬件可能是rru3152-fa，不支持上述8t8r的配置，查询rru硬件信息发现确实如此（见下），将相关配置数据修改为rru3152-fa支持的场景后，告警恢复。/查询单板制造信息dsp brdmfrinfo:cn=0,srn=60,sn=0; - 单板类型 = wd1mtru4fadh 条码 = 210231935610c6000572 描述 = td-tech rru3152-fa dc,wd1mtru4fadh,td-scdma 1880-1910mhz&2010-2025mhz 2 path思考与总结1、 本案例中rru配置为8发8收，实际物理硬件为rru3152-fa，只支持2发2收，但没有上报“单板类型和配置不匹配告警”，而是从检测rru的实际能力出发，上报“小区服务能力不足告警”，这一点需要注意。此外，告警信息中提示“小区当前使用发射通道数=1, 小区当前使用接收通道数=1”，而不是2个通道数 , 应该与小区实际生效时检测到只有1个可用通道有关。问题回溯后发现，现场负责硬件安装的督导与后台负责数据制作的督导之间没有及时有效沟通，后台想当然地根据宏站lte站点8发8收的模板制作数据，后续项目组在开站流程上予以梳理规避，特别是对于rru3152使用在宏站、室分的场景，要求必须核实。3、双模站点因tds载波扩容后超过产品规格导致lte小区服务能力下降的问题处理现象描述多个双模站点lte侧上报小区服务能力下降告警，无其它相关告警，需要排查产生该告警的原因。enodeb版本：dbs3900v100r005c00spc372nodeb版本 ：dnb6200v400r007c00spc700rru类型 ：3168-fa告警信息lte站点只有小区服务能力下降告警tds侧无任何异常告警原因分析1. 驻波告警，光模块速率问题2. lte数据配置问题3. 产品规格问题处理过程1、dsp vswr 查询驻波值均不超过1.3，通过扫频测试驻波值也正常，dsp sfp 查询光模块速率均为 9.8g，由于当前软件版本不支持 9.8g光速率，所以数据配置仍为 6.1g,目前局点该场景很多，并无问题，排除原因1。2、仔细检查数据配置的各种关键参数（扇区模式、天线收发模式、rru链环配置等）均无发现问题，对比其它类似场景站点的数据配置，也未发现问题，且都是一个cme模板做出来的，排除lte数据配置问题。该站点tds属于新建站点，lte在tds基础上升级，之前开通时并无问题，对比之前的tds数据配置，发现tds侧多配置载频，之前载频配置为s2/2/2，当前载频配置为s4/5/8，lte侧第三小区上报小区服务能力下降告警，且该小区tds侧载频配置较多，怀疑是tds侧载波扩容导致的告警；通过查看相关资料知道，双模组网场景下，3168的规格如下：问题浮出水面，解决问题的两个方法：1.修改光口速率为9.8g；2.rru使用双光纤组网。鉴于当前版本不支持9.8g的实际情况，安排施工单位上站增加一条光纤后，告警消除，问题解决。思考与总结该双模站点之前已经开通过且并无问题，后来tds载波扩容的时候增加载频数量超过了硬件的支持能力，此时tds并不会上报告警，且载频均能正常建立，从检测rru的实际能力出发，lte上报小区服务能力下降告警。4、双模站点gps共用设置问题处理建议现象描述：某lte站点开通，lte与tds共用gps，现场tds站点可用，lte站点提示时钟资源不可用告警告警信息：小区时钟资源不可用原因分析：1、 lte时钟资源设置问题。2、 tds侧gps链路为激活。处理过程：1. 在tds侧dsp gps查看gps是否可用。查看小区状态可用且跟踪gps卫星数目符合搜星要求。2. 在lte端lst gps查询是否配置gps。因为双模站点规定gps最后放置在7槽位主控板上，lte原则上不用配置gps。3. 发现lte 基站侧已配置gps数据，将其删除。添加peerclk时钟编号4. 设置参考时钟源工作模式为手动；制定参考源为对端时钟建议与总结： 细心检查数据，查看是不是有什么别的脚本添加错误5、lte双模基站改造时由于tds的wmpt主控版本与lte不匹配导致tds网元连接中断问题现象描述：tds-lte双模基站改造完成后，加电，发现tds基站omc网管上报“网元连接中断”告警，enodeb脱管，omc无法进行管理，无论复位、插拔、更换wmpt单板后tds均无法恢复正常。告警信息：tds基站omc网管上报“网元连接中断”告警。原因分析：对基站进行双模改造，新增umpt、lbbp，更换uepuc、fanc，并通过分路传输进行通信。在加电后，发现tds站点图标一直退服，可能原因：1、tds分路传输故障。2、电源故障，bbu加电失败。3、wmpt主控板故障或者配置数据丢失。4、tds-lte双模版本不匹配。5、bbu框电路或