《中国移动IP设备产品质量和售后服务质量后评估系统研究》开题汇报

1、中国移动通信集团河南移动有限公司 承担部门：规划技术部 网络管理中心 2010年5月 课题名称：中国移动课题名称：中国移动ip设备产品质量和售后服务设备产品质量和售后服务 质量后评估系统研究质量后评估系统研究 项目类型：项目类型： 集团重点项目集团重点项目 课题名称中国移动ip设备产品质量和售后服务质量后 评估系统研究 课题分类网管 主题词ip承载网、模糊评估、用户感知度 预计开始时间2010年3月预计结束时间2010年10月 立项经费、预算 50万元 一、项目信息一、项目信息 二、立项背景和意义二、立项背景和意义 目前，电信企业在设备采购过程中已经由传统的常规 采购模式转变为战略采购模式，因

2、此在设备的总成本上， 除了采购价格以外，管理成本、使用成本等也被纳入成本 考量的范畴。 基于全成本的战略采购理论强调采购管理是一个持续 循环的过程，包含了从采购需求产生到采购执行直至采购 设备使用的所有管理环节。采购设备以直接或间接的方式 渗透从供应商到达运营商并参与到生产运营的全生命周期 过程当中，构成了采购设备的整体拥有成本。 立项的背景：立项的背景： 本课题的意义：本课题的意义： 通过统计和分析设备硬件故障、软件bug、设备缺陷等 指标,及时发现存在的问题并进行回溯，推动设备厂商 对产品设计和售后服务的不断改进，配合网维部门提高 网络质量，降低设备的机会成本和生产部门的运营成本 建立科学

3、的、可量化的评估模型，配合相适应的it支撑 手段，全面评估采购设备质量和厂商服务质量，通过量 化考核客观评价设备厂商提供的ip设备质量及售后服务 的优劣 为网络维护、设备采购等部门在将来网络的升级扩容和 设备引入工作提供决策依据，建立起ip设备公平竞争、 择优录用的良性循环机制。 建立完善的ip设备评 估指标体系、评估方 法、评估流程，评估 设备质量和售后服务 质量 研究如何基于现有的管理和it支撑手段进行后 评估系统建设实施，以尽可能少的网管建设成 本以及流程改造代价获得预期的后评估效果， 解决生产和采购过程脱节的问题，使设备从采 购到生产形成闭环 协助厂家分析设备故 障和缺陷问题，并促 进

4、厂家售后服务质量 的不断提升 三、课题研究目标三、课题研究目标 四、课题研究主要内容四、课题研究主要内容 研究范围研究范围 网络设施网络设施 ipip承载网承载网cmnetcmnet ipip城域网城域网 业务支撑网业务支撑网网管网络网管网络 研究专业：基于ip网络研究并开发ip设备后评估系统 支持设备： huawei、cisco、alcatel、juniper、ericsson等厂家 ar/br/cr/rr/ce 随着研究成功和深入，将来可推广到系统设备（包括服务器、存储设备）和传输 设备 后评估工作现状的调研后评估工作现状的调研 调研目前业内对通信设备质量和设备厂商售后服务 质量评估工作的

5、现状 调研目前对设备产品质量和设备厂商售后服务质量 评估的管理流程、支撑手段；收集和整理目前存在 的主要问题，以及各相关部门不同角色的需求 后评估指标体系的研究及建立后评估指标体系的研究及建立 建立一套ip设备质量和厂商售后服务质量评价体系 从设备硬件故障、软件bug、软件升级、厂商修 复服务等几个维度建立可量化的质量评估指标，保 证指标的全面性 通过二级分解筛选指标方法，保证评价体系的可操 作性； 建立评估模型，通过模糊评价方法，得到量化的服 务质量评价； 总结各种设备中常见服务质量指标分级、权重和度 量方法，提高可推广性 采集方法和分析方法的研究采集方法和分析方法的研究 研究分析并明确各项

6、指标的数据来源、采集粒度、 时延要求、可实现性 研究基于it手段的自动采集及统计分析方法，弥 补现有手段不足 研究科学的统计分析理论，分析设备质量存在的 问题 it支撑手段建设的研究支撑手段建设的研究 提出系统和操作流程改造建设的演进策略 给出下一步建设改造的落地方案或建议 四、课题研究主要内容四、课题研究主要内容 五、研究总体框架五、研究总体框架 根据实际现网的困境和需求，分析研究后评估系统的必要性根据实际现网的困境和需求，分析研究后评估系统的必要性 详细分析并建立后评估指标模型详细分析并建立后评估指标模型 以以ipip网络路由器设备为切入点，详细分析现有相关支撑手段和操作流网络路由器设备为

7、切入点，详细分析现有相关支撑手段和操作流 程，提出具体的完善和改进方案程，提出具体的完善和改进方案 根据网络现状和实际设备情况，搭建后评估系统平台根据网络现状和实际设备情况，搭建后评估系统平台 针对系统平台进行测试，研究后评估指标评价体系在现网应用的可行针对系统平台进行测试，研究后评估指标评价体系在现网应用的可行 性和存在的问题性和存在的问题 总结完善平台功能，并得出后评估系统的建设指导性意见总结完善平台功能，并得出后评估系统的建设指导性意见 六、主要技术方案和关键技术六、主要技术方案和关键技术 和电信领域常见的qos技术不同，本课题研究的指标数据并不需要实时采集，而且由于 其关注的主要是设备

8、软硬件缺陷和厂商售后服务情况，所以指标数据的主要提供源是 eoms系统和备品备件管理系统，包括对故障单、软硬件更换和升级、备品备件出入库 信息的数据采集，另外也辅助参考现网和实验室测试、厂商公开发布的信息等。数据采 集的周期一般为季度。 基于用户感知度的基于用户感知度的ip设备质量和售后服务质量后评估体系设备质量和售后服务质量后评估体系 用户感知度的指标体系，采用自上向下，逐层细分的方法，将影响感知度的指标按不同的维度、层 次分解归类。ip设备质量和售后服务质量评估体系指标维度分为设备和服务2大维度。 用户感知度算法模型，采用了模糊评估的方法得出算法模型，可通过指标的实际质量得出用户感知 度评

9、价值或分数 基于用户感知度的ip设备质量和售后服务质量后评估体系主要由感 知度指标体系和感知度算法模型两部分构成。 图-1 多维度感知指标体系图-2基于模糊评估的用户感知度评价体系 模糊评估模型模糊评估模型 模糊现象在各种领域中很常见，如教学水平，软件质量，用户满 意度等，都没有明确的边界，都具有亦此亦彼的过渡性质，呈现 出模糊性。对这些对象的质量进行评价时，业界越来越多地趋向 于用模糊数学的方法来进行，即模糊综合评价。在对复杂对象进 行评价时，影响其质量的因素，根据其重要程度还可能分属不同 的层次，这就需要在每一层次上对目标进行评价，即所谓的多层 次模糊综合评价。该方法在很多领域都有较广泛的

10、应用并取得了 显著的效果。 模糊评估实施步骤模糊评估实施步骤 （1 1）确定被评价对象的论域（以下均称为因素集）确定被评价对象的论域（以下均称为因素集） 这一步实质是确定评价维度（指标）体系。本课题采用“自上而下”确定因素集的基本方法 ，由专家根据文献和相关积累集体确定影响每个数据业务感知度的因素集，共分两级，即维 度和指标体系。 （2 2）确定评语等级集）确定评语等级集 这一步体现了模糊综合评价的特点。因为模糊综合评价的对象具有模糊性，因此对被评价对 象的描述不应是断然的，而只能用属于各等级的程度（即隶属度）来表示，等级数目一般在 4到9个之间。选定评语等级后，为了获得评价结果（百分制分数）

11、应对每个评语等级进行“ 赋值”。本课题采用的是5级评语，各等级的“赋值”如下：很好（95），好（82.5），一 般（67.5），差（50），很差（20）。 （3 3）确定评价因素的权重向量）确定评价因素的权重向量 各因素的权值也采用模糊方法来确定，它是评价因素对被评价对象所起作用的隶属程度的度 量。权重确定的方法很多，可以分为两大类：主观赋权方法与客观赋权方法。所谓主观赋权 就是凭经验确定权重，如二元比较法、直接打分法、delphi法、ahp法等；本课题对每个数 据业务采用的是以二元比较法为主结合直接打分法来分别确定维度（指标）的权重向量。（ 具体计算方法参见下页） （4 4）建立模糊关系矩阵

12、。）建立模糊关系矩阵。 该步是在被评价对象的因素集与评语等级集之间进行单因素评价并建立模糊关系矩阵。本课 题采用等级比重法，此方法要求多个评价者对评价对象的第i个因素属于哪个等级做出判断 ，然后将第i个因素判断为属于第j个等级的人数与评价者总人数的比值作为矩阵中第i行第j 列元素。（具体方法参见下下页） （5 5）权重向量与模糊关系矩阵的合成。）权重向量与模糊关系矩阵的合成。 本课题采用 “主因素突出型”的综合评价。 （6）分两级获得评价结果。分两级获得评价结果。 权重向量专家确定法（二权重向量专家确定法（二/四元比较法）四元比较法） （1 1）建立评价表）建立评价表 根据要评价的因素建立评价

13、表（如下表所示）。每位专家对所有因素进行两两比较，将评估结果填 入表一 （2 2）权重的最终确定）权重的最终确定 将每个专家的评价结果按表二方式进行汇总 （3 3）权重的修正）权重的修正 如果因素集的数目较少（小于4个）时，所有专家都认为某一因素重要程度均低于其它因素，此时 有两种修正方法：如果专家认为该因素不重要，则可以从因素集中直接去除；否则可采用直接打分 法对各因素进行重新评估。 如果某一因素无法测量或暂不考虑，则先从权重向量集中去除该因素所对应的权重，再对剩下权重 重新进行归一化处理，即可得到新的权重向量。 模糊关系矩阵建立与评价结果计算模糊关系矩阵建立与评价结果计算 （1 1）建立模

14、糊关系矩阵建立模糊关系矩阵 在被评价对象的因素集 与评语等级集 之间进行单因 素评价并建立模糊关系矩阵 （2 2）权重向量与模糊关系矩阵权重向量与模糊关系矩阵 的合成的合成 根据等级比重法建立权重向量与模糊关系合成矩阵 （3 3）权重的修正）权重的修正 根据测试数据计算得到第i维度下所有指标的隶属度向 量建立二级模糊关系矩阵，然后进行归一化处理建立 一级模糊关系矩阵； 最终计算得出评价结果：根据前面步骤的输入进行运 算，通过建立运算关系算法模型，最终得出用户感知 指数（加权得分部分）。其中，蓝色部分的一级权重 和二级权重，根据“指标权重”的红色部分 七、项目的难点七、项目的难点 模糊评估的感知

15、度模型确立及实现模糊评估的感知度模型确立及实现 如何通过模糊模型，动态评估设备产品质量、厂商售后服务质量 需要通过在专家权重系数基础上进行数据和结果的模拟，并通过用户调研数据验证公 式的合理性（需要较多的样本量），工作量较大 相关指标数据的采集相关指标数据的采集 和eoms、备品备件管理等系统建立接口，采集设备硬件故障或更换、软件bug或升级等 信息，以及厂商售后服务质量、服务时效等信息 八、本课题的创新点和专利点八、本课题的创新点和专利点 创新点创新点 对设备供应商产品和售后服务质量 进行量化评估考核 搭建ip设备后评估平台，完善现有 网管支撑体系，填补现有体系中资 源管理层与供应链/供应商

16、管理层之 间的管理缝隙。 专利点专利点 基于模糊评估的感知度指标体系和 计算模型 九、与本课题有关的研究工作积累和已取得的研究九、与本课题有关的研究工作积累和已取得的研究 成果成果 确立计算感知度的模糊评估模型的相关因子维度、特征、确立计算感知度的模糊评估模型的相关因子维度、特征、 权重等权重等 确定系统总体架构、实现方式、系统功能点确定系统总体架构、实现方式、系统功能点 十、项目输出成果十、项目输出成果 主报告：中国移动主报告：中国移动ipip设备质量与售后服务质量后评估系统设备质量与售后服务质量后评估系统 研究报告研究报告 附件一：附件一：ipip设备质量与售后服务质量后评估指标体系设备质量与售后服务质量后评估指标体系 附件二：附件二：ipip设备质量与售后服务质量后评估体系操作流程设备质量与售后服务质量后评估体系操作流程 附件三：河南移动附件三：河南移动ipip设备质量与售后服务质量后评估系统设备质量与售后服务质量后评估系统 附件四：河南移动附件四：河南移动ipip设备质量与售后服务质量后评估报告设备质量与售后服务质量后评估报告 附件五：河南移动附件五：河南移动ipip设备后评估系统改造建议书设备后评估系统改造建议书 十一、项目研究实施计划十一、项目研究实施计划 开题 调研阶段 5月