质量提升大会战操作手册（校讯通）.doc

数据业务产品质量提升大会战操作手册校讯通业务分册1. 总则1.1 产品质量评测目标为提升校讯通产品质量，全面提高移动客户对于数据业务的使用体验，提高产品竞争力，特进行质量评测1.2 产品质量评测方法评测方法采取业务拨测、用户调研及业务平台查询的方法1.3 测试样本量要求每次测试要求10次以上，取平均值。2. 操作手册2.1 可用性测试2.1.1 订购成功率指标定义每月完成1组测试，在1组测试中，连续操作订购5次，记录订购成功次数的比例。指标来源业务拨测测试环境在internet网络环境下，并且保持网络畅通预置条件1) 手机号码A1初始化为未开通校讯通产品2) 手机号码A1为移动品牌号码测试步骤1) 录入A1号码到校讯通平台，设置为免费待审状态2) 审核A1号码，系统下发告知短信3) 模拟免费到期，将A1号码转为收费状态4) 系统下发转收费通知5) 用户A1通过密码登陆校讯通平台，并正常使用平台功能6) 校讯通平台确认用户A1开通校讯通业务测试记录用户记录数据：1） 订购成功次数2） 计算订购成功率=订购成功次数/总订购次数如测试中发生失败，需在备注项记录失败提示信息，如无提示信息需详细描述失败现象备注2.1.2 退订成功率指标定义每月完成1组测试，在1组测试中，连续操作退订5次，记录退订成功次数的比例。指标来源业务拨测测试环境在internet网络环境下，并且保持网络畅通预置条件1) 手机号码D1初始化为开通校讯通业务2) 手机号码D1为移动品牌号码测试步骤1) 手机用户D1编辑00000 到 106582222) 用户D1收到取消校讯通短信.3) 校讯通平台确认取消用户D1.4) 通过校讯通平台退定用户D1校讯通业务5) 用户D1收到取消校讯通短信6) 校讯通平台确认取消用户D1测试记录用户记录数据：1） 退订成功次数2） 计算退订成功率=退订成功次数/总退订次数如测试中发生失败，需在备注项记录失败提示信息，如无提示信息需详细描述失败现象备注2.2 易用性测试2.2.1 校讯通WEB界面友好度指标定义评价校讯通WEB界面体验友好度指标来源用户调研 用户体验中心 调查问卷测试环境web使用应在宽带2M以上网络环境下，网络通畅；预置条件1）电脑接入宽带2M以上网络环境；测试步骤1） WEB：通过浏览器进入校讯通页面，进入栏目页观察和体验2） 让用户对界面、功能区位置进行评测3） 对抽取的样本进行统计，取平均分测试记录用户记录数据：非常优秀为5分,优秀为4分,良好为3分,差为2分,非常差为1分平均分=总分数/调研用户数备注2.2.2 校讯通操作流程易用性指标定义评价校讯通使用流程的合理性指标来源用户调研 用户体验中心 调查问卷测试环境使用应在宽带2M以上网络环境下，网络通畅；预置条件1） 电脑接入宽带2M以上网络环境2） 手机应在GSM和TD网络环境下，并且保持网络畅通测试步骤1） WEB：WEB浏览器输入/进入首页以及各栏目，进行查询统计和短信发送操作2） 短信：编辑相应短信命令到平台，使用短信通道各项功能3） 让用户对结果进行评测对抽取的样本进行统计，取平均分测试记录用户记录数据：非常优秀为5分,优秀为4分,良好为3分,差为2分,非常差为1分平均分=总分数/调研用户数备注2.3 完备性测试2.3.1 功能合理指标定义评价家校互动、平安短信、亲情电话功能的合理性指标来源用户调研测试环境1） 使用应在宽带2M以上网络环境下，网络通畅预置条件电脑接入宽带2M以上网络环境测试步骤1） 登陆校讯通网站，通过首页进入各栏目，学校建站、班级空间以及各人博客进行操作2） 让用户对功能设定的合理性进行评测3） 对抽取的样本进行统计，取平均分测试记录用户记录数据：非常合理为5分,合理为4分,一般为3分,差为2分,非常差为1分平均分=总分数/调研用户数说明2.3.2 功能完备指标定义评价家校互动、平安短信、亲情电话功能的完备性指标来源用户调研测试环境所有技术指标都应在GSM和TD网络环境下，网络通畅；互联网测试，应在2M以上预置条件电脑接入宽带2M以上网络环境测试步骤1） 登陆校讯通网站，通过首页进入各栏目，学校建站、班级空间以及个人博客进行操作2） 让用户对功能设定的完备性进行评测3） 对抽取的样本进行统计，取平均分测试记录用户记录数据：非常合理为5分,合理为4分,一般为3分,差为2分,非常差为1分平均分=总分数/调研用户数说明2.4 稳定性/可靠性2.4.1 短信发送成功率指标定义向测试号码发送短信，计算短信发送成功率指标来源业务拨测测试环境所有技术指标都应在GSM和TD网络环境下，并且保持网络畅通预置条件1） 手机终端保持在GSM网络下2） 手机有足够内存测试步骤1） 通过平台向5个测试号码发送短信2） 从后台观测5个测试号码的返回报告3） 跟返回报告计算短信成功率按上述步骤，各个门户各连续测试10次，分别记录登录成功次数、总次数，然后对10次测试结果求平均值，计算登录成功率。测试记录1） 发送短信总次数、成功接收次数2） 计算短信发送成功率=短信返回报告为成功次数/总发送次数如测试中发生失败，需在说明项记录失败提示信息，如无提示信息需详细描述失败现象说明2.4.2 发送短信延时指标定义向测试号码发送短信，计算发送短信时延指标来源业务拨测测试环境所有技术指标都应在GSM和TD网络环境下，并且保持网络畅通预置条件1） 手机终端保持在GSM网络下2） 手机有足够内存测试步骤1） 向测试号码发送短信2） 手机终端成功接收短信后，根据网关回复状态报告时间，计算短信延时按上述步骤连续测试10次，分别记录登录成功时延，然后对10次测试结果求平均值，计算登录成功时延。测试记录1） 记录各次短信延时3） 计算短信延时=短信延时总和/成功发送总次数如测试中发生失败，需在说明项记录失败提示信息，如无提示信息需详细描述失败现象说明2.4.3 WEB登陆成功率指标定义通过互联网访问校讯通网站，计算登陆成功率指标来源业务拨测测试环境使用应在宽带2M以上网络环境下，网络通畅预置条件1）电脑接入2M宽带，并保持网络通畅；测试步骤1） 浏览器中输入/2） 记录页面打开成功数3） 输入帐号/密码登陆4） 记录登陆成功次数按上述步骤，各个门户各连续测试10次，分别记录访问成功时延，然后对10次测试结果求平均值，计算访问成功时延。测试记录1） 记录页面打开成功数和登陆成功数2） 页面访问成功率=访问成功数/总访问次数系统登陆成功率=登陆成功数/总登陆次数如测试中发生失败，需在说明项记录失败提示信息，如无提示信息需详细描述失败现象说明登录时延计算说明：访问阅读页时延：“具体书籍阅读页目录页”到“再进入某一具体章节内容页”的时间差；2.4.4 页面访问时延指标定义通过互联网访问校讯同网站，计算页面访问时延指标来源业务拨测测试环境使用应在宽带2M以上网络环境下，网络通畅预置条件1）电脑接入2M宽带，并保持网络畅通；测试步骤1） 浏览器中输入/2） 记录页面打开时间3） 按上述步骤，各个门户各连续测试10次，分别记录下载成功次数、总下载次数，然后对10次测试结果求平均值，计算下载成功率。测试记录用户记录数据：1） 页面打开时间页面访问延时=页面访问时间总和/页面访问次数如测试中发生失败，需在说明项记录失败提示信息，如无提示信息需详细描述失败现象说明下载成功是指用户成功下载书籍文件到终端上；2.5 丰富性测试2.5.1 家教资源丰富性指标定义评价手机阅读业务的内容的丰富性指标来源用户调研测试环境使用应在宽带2M以上网络环境下，网络通畅预置条件1）电脑接入2M宽带，并保持网络通畅测试步骤1） 浏览器输入/ 点击家教资源，进入家教资源2） 进入各栏目，查看各资源内容测试记录用户记录数据：非常丰富为5分,丰富为4分,一般为3分,差为2分,非常差为1分平均分=总分数/调研用户数说明2.5.2 家教资源质量指标定义评价手机阅读业务的内容的丰富性指标来