bsc308重大故障报告.doc

四川公司省内重大故障报告 12/27/192012年1月21日成都移动bsc308重大故障报告填报时间：2012年1月31日故障标题成都移动bsc308重大故障故障工单编号故 障 基 本 信 息故障定位信息故障发生地点故障所属专业故障原因类别成都无线电源故障设备信息故障设备厂家故障设备集成商故障设备类型华为华为bsc故障时间信息故障发生时间故障消除时间故 障 历 时2012.1.21 09:412012.1.21. 14:25284分钟影响业务时间信息影响业务时间业务恢复时间影响业务时长影响业务种类影响业务范围2012.1.21 13:552012.1.21 14:2530分钟全部话务成都市区锦江宾馆、南大街、华西医院等用户无法正常通信故障现象bsc308设备掉电复位，该bsc业务全阻影响业务情况（或未影响业务原因）故障导致成都移动bsc308覆盖区域业务中断，具体原因分析见“故障原因及处理情况”。1、此次故障影响区域为：锦江宾馆、南大街、华西医院等68个基站。2、通信能力：业务中断30分钟。故 障 原 因 及 处 理 情 况故障处理情况（简述）2012年1月21日上午09:41分，bsc308上报一条告警“机柜输入电压异常告警”和两条“风扇盒输入电源单路掉电告警”，如下表格：图表 1 bsc308复位前告警信息告警名称定位信息告警发生时间风扇盒输入电源单路掉电告警插框号=0, 槽位号=7, 子系统号=0, 风扇盒电源的路数=1, 风扇类型=非独立风扇2012-1-21 09:41风扇盒输入电源单路掉电告警插框号=1, 槽位号=7, 子系统号=0, 风扇盒电源的路数=1, 风扇类型=非独立风扇2012-1-21 09:41机柜输入电压异常告警插框号=0, 槽位号=7, 子系统号=0, 电源输入的路数=1, 配电盒类型=非独立配电盒, 告警原因=欠压2012-1-21 09:41根据告警信息判断，bsc的0号机柜的第1路供电欠压，第2路供电正常，由于bsc为主备两路配电，所以此时bsc308的设备运行正常。为了确保在春节期间设备的稳定运行，无线中心安排人员对该告警进行处理。bsc308机框掉电情况如下：图表 2 bsc308机框掉电情况1、该bsc出现故障后，无线中心现场人员联系华为工程师提供远程技术支持，并安排人员到现场处理。华为工程师在后台查看配电盒的状态发现第一路输入0，初步怀疑bsc的第一路输入短路或者断开。华为工程师建议现场测试第一路（48v1处）供电的输入电压是否正常；2、13:40动力中心工程师到场后对第一路供电进行测试，测试结果为0v。13:45动力工程师对设备供电输入端再次进行测试，测试时bsc308的0号机柜断电复位。此时动力中心工程师再次测试端子后发现万用表读数在350v左右，为非正常状态。经多次测试，万用表读数时而为0，时而为其他非正常数值。动力中心人员自检万用表，自检也异常。3、14:10左右设备供电恢复，bsc开始启动并加载数据。从始至终bsc侧未作任何操作（bsc上的空开都是处于on状态）。bsc全部单板加载完毕时间在14:25左右，此时业务全部恢复；4、华为工程师在得知bsc复位后第一时间安排人员赶往机房现场，在到机房前bsc308业务已经开始逐步恢复。由于gbam掉电后关机，华为工程师在14:30将gbam重新开启恢复后台监控。登录维护台后查看业务全部恢复正常。故障原因分析（简述）从bsc的原始日志文件、告警文件分析，本次故障的根本原因是：在bsc主机柜第一路电源输入异常的情况下，第二路电源也于13：45分出现异常，从而导致bsc308主机柜设备0、1框、gbam掉电。因此本次故障的原因是设备输入电源断电导致的。14：10分电源恢复之后，业务于14：25分左右陆续恢复。由于0框为系统主控框，0框掉电导致该bsc业务全阻。备注填报人陈航联系电：重大故障报告分三部分提交 第一部分是故障处理报告：与全网重大故障报告相比，省内重大故障报告中少了经验总结部分。故障处理报告需各故障发生部门在24小时内提交省监控中心 第二部分是“故障经验总结及整改计划” 该部分需故障发生部门与厂