CPU负荷过载导致连接成功率低解决案例.doc

学习资料收集于网络，仅供参考 CPU负荷过载导致连接成功率低解决案例福建电信CDMA莆田项目组2014年2月20日学习资料【问题描述】秀屿局东峤铁炉村_R1WZ和秀屿局东峤魏厝_R2WZ等5个小区从1月26日开始每天都出现在异常扇区中，主要为连接成功率差引起，每天上榜出现时段都在10个时段以上，对全网连接成功率产生一定影响，这5个小区都下挂在“516秀屿局东峤模块局”下，异常扇区上榜情况如下图所示：数字代表每天连接成功率差上榜时段。本基站下挂小区分布以及覆盖方向如下图所示：小区分布图【问题分析】516秀屿局东峤模块局共下挂5个RRU，单板为CCA板，配有两块CHD0板，每个RRU下1X和DO都开通了双载波，统计早忙时DO连接成功率指标发现，从25日开始连接成功率下降明显，最差时连接成功率仅为90%，失败原因主要为分配资源失败，同时本基站DO早忙时话务量都在150Erl以上，基站指标统计如下所示：10时指标BTSDO: 小区AT发起的无线连接请求次数DO: 小区AN发起的无线连接请求次数DO: 小区无线连接成功率(%)DO: 小区无线连接建立失败次数(原因为分配资源失败)DO: 小区无线连接建立失败次数(原因为反向业务信道俘获失败)DO: 小区无线连接建立失败次数(原因为没有收到TCC消息)DO话务量2014/1/20秀屿局东峤模块局8424298599.6801423582014/1/21秀屿局东峤模块局11196394399.4104148842014/1/22秀屿局东峤模块局10591336099.5302342782014/1/23秀屿局东峤模块局12532395199.6103430912014/1/24秀屿局东峤模块局12900440099.6402437952014/1/25秀屿局东峤模块541025551112014/1/26秀屿局东峤模块局16864547597.6742142571362014/1/27秀屿局东峤模块5918357511262014/1/28秀屿局东峤模块局16483588498.229953501382014/1/29秀屿局东峤模块7483093481372014/1/30秀屿局东峤模块局12370304893.789642331162014/1/31秀屿局东峤模块局20330462491.97182293901552014/2/1秀屿局东峤模块42118284521552014/2/2秀屿局东峤模块85150453631562014/2/3秀屿局东峤模块9120067461532014/2/4秀屿局东峤模块局19188421790.01219984551612014/2/5秀屿局东峤模块1596354611422014/2/6秀屿局东峤模块7193961501612014/2/7秀屿局东峤模块5224950501502014/2/8秀屿局东峤模块局19594568698.183574261154从CNO2中对业务细节中的DO失败原因进行详细分析统计发现，近期出现较多的CONNECTION_SETUP_CCM_CPU_OVERLOAD失败，占总失败的80%以上，具体如下所示：查询CONNECTION_SETUP_CCM_CPU_OVERLOAD2013失败解释如下：连接建立过程中为多个导频分配资源或切换过程手机请求切换加新的导频，SP会向RCP发送消息请求分配BTS资源，但CCM的CPU利用率超过门限值而过载，导致资源分配失败。（注：CCM/CCA是整个BTS的信令处理、资源管理以及操作维护的核心，并负责BTS内数据、信令的路由。CCM也是信令传送证实的集中点，BTS内各单板之间与BTS单板之间的信令传送都由CCM转发）查询本基站近期历史告警发现存在CPU过载告警，同时“通知”里间隔几分钟就存在CPU过载类告警，具体如下所示：统计CCA单板CPU利用率情况发现，CPU最大利用率都为100%，平均利用率也在60%左右。开始时间System单板名称最大利用率(%)平均利用率(%)2014/2/4516 秀屿局东峤模块局_bwz1CCA100642014/2/5516 秀屿局东峤模块局_bwz1CCA100632014/2/6516 秀屿局东峤模块局_bwz1CCA100612014/2/7516 秀屿局东峤模块局_bwz1CCA100612014/2/8516 秀屿局东峤模块局_bwz1CCA100582014/2/9516 秀屿局东峤模块局_bwz1CCA100572014/2/10516 秀屿局东峤模块局_bwz1CCA100562014/2/11516 秀屿局东峤模块局_bwz1CCA10043【优化措施】由于本基站下RRU数量较多，且话务量高，建议将CCA板换成处理能力更强的CCC板。【优化效果】2月11日将CCA板换成CCC板后连接成功率有明显的改善，基本维持在99.6%左右，恢复到正常水平。早忙（10时）BTSDO: 小区AT发起的无线连接请求次数DO: 小区AN发起的无线连接请求次数DO: 小区无线连接成功率(%)DO: 小区无线连接建立失败次数(原因为分配资源失败)DO: 小区无线连接建立失败次数(原因为反向业务信道俘获失败)DO: 小区无线连接建立失败次数(原因为没有收到TCC消息)DO话务量2014/2/4秀屿局东峤模块局19188421790.01219984551612014/2/5秀屿局东峤模块1596354611422014/2/6秀屿局东峤模块7193961501612014/2/7秀屿局东峤模块5224950501502014/2/8秀屿局东峤模块局19594568698.1835742611542014/2/9秀屿局东峤模块局11088346699.6402528932014/2/10秀屿局东峤模块44331621502014/2/11秀屿局东峤模块局6260213399.33192015522014/2/12秀屿局东峤模块57030471102014/2/13秀屿局东峤模块56037391052014/2/14秀屿局东峤模块53041551232014/2/15秀屿局东峤模块局16401605799.61036521232014/2/16秀屿局东峤模块68033261082014/2/17秀屿局东峤模块局8910385899.5902725782014/2/18秀屿局东峤模块局8283309199.5402626752014/2/19秀屿局东峤模块局7813260599.630172264连接成功率走趋图同时换板之后，CCC板的最大利用率都在70%以下，平均利用率都在30%以下，之后未再出现CPU过载类告警，调整前后如下所示：开始时间System单板名称最大利用率(%)平均利用率(%)2014/2/4516 秀屿局东峤模块局_bwz1CCA100642014/2/5516 秀屿局东峤模块局_bwz1CCA100632014/2/6516 秀屿局东峤模块局_bwz1CCA100612014/2/7516 秀屿局东峤模块局_bwz1CCA100612014/2/8516 秀屿局东峤模块局_bwz1CCA100582014/2/9516 秀屿局东峤模块局_bwz1CCA100572014/2/10516 秀屿局东峤模块局_bwz1CCA100562014/2/11516 秀屿局东峤模块局_bwz1CCA100432014/2/11516 秀屿局东峤模块局_bwz1CCC71292014/2/12516 秀屿局东峤模块局_bwz1CCC51252014/2/13516 秀屿局东峤模块局_bwz1CCC59252014/2/14516 秀屿局东峤模块局_bwz