手机上网业务测评报告.doc

手机上网业务测评报告一 测评依据 根据关于实施2010年产品运营质量测评工作的通知（中电信粤网运【2010】40号）文的要求，需要按计划组织对部分重点产品或业务进行组织测评工作，省NOC针对该文的要求，在6月29日下发了关于组织开展手机上网测评工作的通知（中电信粤电函【2010】2880号文），组织省NOC各专业室以及各分公司，对手机上网业务进行了测评。二 测评说明1 测评组织分工整个测评组织工作由省NOC服务支撑室负责，包含测评结果的搜集，测评报告的编写等工作；测评方案由省研究院网络运营支撑部业务网络室提供，由省NOC下发各单位执行；省研究院负责测评技术支撑。 2 测评要求及内容本次测评的原则是以普通用户的角度体验测试定制终端对上网的兼容性，主要测评终端上网功能的性能、功能、平台计费准确性验证、应用软件的兼容性等内容；以终端对常用的浏览器软件以及其他常用的需要上网通讯的应用软件、主流网站的访问时延等为测试用例，涵盖了约40款销量排在前列的终端进行了测试。三 测评结果1连通性及浏览器的兼容测试1.1访问时延项目机型1.1.1本地用户使用OPERA浏览器访问网站1.1.3 本地用户使用UCWEB浏览器访问网站1.1.5 本地用户使用FireFox浏览器访问网站1.1.7 本地用户使用IE浏览器访问网站LG KV60040.00 酷派S100手机42.00 S900C10.00 15.00 多普达T539935.00 5.00 30.00 摩托XT8003.00 天语E32910.00 5.00 酷派N90023.00 5.00 13.00 酷派N9215.00 6.00 三星SCH-I3298.00 14.00 5.00 华为C590015.00 三星M6098.00 6.00 酷派N900CVIP定制42.00 28.00 13.60 三星F33910.70 摩托罗拉A1890三星S359天语F130酷派D52011.00 酷派N9251.70 11.00 华为C560031.00 三星F83910.00 7.00 诺基亚3806天语A969110.00 105.33 中兴CX763酷派N900+72.67 14.33 摩托罗拉A189010.00 酷派D5207.00 多普达S900C12.00 12.00 12.00 10.00 三星M609（校园）21.00 深圳广信DF82029.00 三星8.00 4.00 5.00 华为590011.04 9.93 三星W79911.09 16.00 三星F5395.00 酷派S508.00 酷派E2105.00 6.00 诺基亚1506 海信E84.60 6.80 3.90 天语E37965.90 说明：1、黄色背景为访问时延较短，用户感知较好2、红色背景为访问时延较长，用户感知较差3、值为“”表示终端不支持该浏览器或无预装。 从测试结果来看，终端与UCWEB浏览器的兼容性是最好的，打开互联星空门户的时延最小，其次是OPERA浏览器，建议电信未来定制终端能够首选预装这两种上网浏览器软件，以提升用户使用手机上网的感知。1.2访问成功率项目机型1.1.1本地用户使用OPERA浏览器访问网站1.1.3 本地用户使用UCWEB浏览器访问网站1.1.5 本地用户使用FireFox浏览器访问网站1.1.7 本地用户使用IE浏览器访问网站LG KV600100.00%酷派S100手机100.00%S900C100.00%100.00%多普达T5399100.00%100.00%100.00%摩托XT800100.00%天语E329100.00%100.00%酷派N900100.00%100.00%100.00%酷派N92100.00%100.00%三星SCH-I329100.00%100.00%100.00%华为C5900100.00%XT800100.00%三星M609100.00%100.00%酷派N900CVIP定制100.00%100.00%三星F339100.00%100.00%摩托罗拉A1890三星S359天语F130酷派D520100.00%酷派N92100.00%100.00%华为C56000.00%100.00%三星F839100.00%100.00%诺基亚3806天语A969100.00%100.00%中兴CX763酷派N900+66.67%100.00%摩托罗拉A1890100.00%酷派D520100.00%多普达S900C100.00%100.00%100.00%100.00%三星M609（校园）100.00%深圳广信DF820100.00%三星100.00%100.00%100.00%0.00%华为5900100.00%100.00%三星W799100.00%100.00%三星F539100.00%酷派S50100.00%酷派E210100.00%100.00%诺基亚1506海信E8100.00%100.00%100.00%天语E379100.00% 从测试结果来看，各款终端均能访问互联星空门户，但部分终端的个别版本拨号上网与网络侧可能配合有些问题，如酷派N900，关闭浏览器如过快重新打开浏览器后上网时，会有“网络关闭”的错误提示。1.3浏览器适配性所有机型1.1.1本地用户使用OPERA浏览器访问网站1.1.3 本地用户使用UCWEB浏览器访问网站1.1.5 本地用户使用FireFox浏览器访问网站1.1.7 本地用户使用IE浏览器访问网站小计较好2 7 0 4 13正常9 17 2 13 41较差5 2 0 3 10不适配23 13 37 19 92整体适配性28.21%61.54%5.13%43.59%34.62% 从上表统计结果可看出，目前电信市场上的主流终端与热门浏览器的整体适配性不高，只有34.62%。 2性能测试2.1时延项目机型1.2.1 NET方式从页面链接下载媒体内容1.2.2 WAP方式从页面链接下载媒体内容1.2.3 NET方式网页打开耗时测试LG KV600酷派S100手机S900C5.00 多普达T539990.00 80.00 5.00 摩托XT80060.00 70.00 3.00 天语E32920.00 5.00 酷派N900283.00 66.00 酷派N92250.00 52.00 三星SCH-I329180.00 120.00 112.00 华为C5900180.00 XT80070.00 70.00 5.00 三星M60970.00 40.00 4.00 酷派N900CVIP定制61.30 12.60 149.00 三星F339109.00 58.00 摩托罗拉A189036.00 三星S359天语F130酷派D52011.00 15.00 酷派N9211.30 111.00 华为C560032.00 三星F83920.00 5.00 诺基亚3806天语A96977.00 120.00 中兴CX763467.00 酷派N900+25.00 80.67 95.33 摩托罗拉A189071.00 酷派D520192.00 22.00 10.00 多普达S900C31.00 29.00 12.00 三星M609（校园）900.00 94.00 17.00 深圳广信DF820199.00 20.00 三星45.00 20.00 20.00 华为590090.82 7.23 三星W799131.00 36.08 158.00 三星F53960.00 50.00 5.00 酷派S508.00 酷派E2107.00 6.00 5.00 诺基亚1506 海信E837.50 72.77 天语E37991.82 说明：1、黄色背景为访问时延较短，用户感知较好2、红色背景为访问时延较长，用户感知较差3、值为“”表示终端不支持该浏览器或未做测试 从百度下载同一首MP3，最快的终端需要半分钟左右，基本能够满足用户的使用感知；部分终端下载所用时长过慢，最慢达到10几分钟，多数终端需要1分钟以上；打开新浪（）主页较快，较好的终端一般在8秒左右，部分终端达到58分钟左右，客户感知不好。2.2适配性所有机型1.2.1 NET方式从页面链接下载媒体内容1.2.2 WAP方式从页面链接下载媒体内容1.2.3 NET方式网页打开耗时测试小计较好1 2 4 7正常17 24 21 62较差2 0 1 3差0 0 2 2不适配13 6 7 26无法测试(终端无法设置用NET方式上网)6 7 4 17整体适配性46.15%66.67%64%58.97% 从整体上来看，终端通过net方式访问百度（）进行MP3下载以及访问新浪主页（）的感知一般，整体适配性只有58.97%.3业务及定制应用测试3.1手机QQ使用测试所有机型次数备注较好3 正常22 较差6 酷派E210：有QQ软件，登录QQ时死机海信E8：登陆较慢，聊天窗口无法退出其它是由于无QQ群功能选择较差不适配2 三星F339：正常下载手机QQ软件，但是输入用户名和密码后，界面下部被控制键遮挡，无法登陆深圳广信DF820：虽然有QQ软件，但每次启动QQ程序时都会出现存储空间不足等提示，即使删除文件夹中的很多文件后。启动后会自动退出。没有安装手机QQ软件6 3.2手机证券使用测试所有机型次数备注较好3 正常17 较差0 不适配1 S900C：不正常，发送密码短信后收不到密码，不能登陆没有定制手机证券18 3.3天翼LIVE使用测试所有机型次数备注较好4 正常12 天语E379：登录很慢较差0 不适配0 没有定制天翼Live23 3.4爱音乐业务使用测试所有机型次数备注较好1 正常27 较差2 S900C：部分不正常，每次下载都无反应，需要点击“接续下载多普达T5399：许多铃音资源缺乏，下载全曲不成功摩托罗拉A1890：登陆 ，提示“到服务器的链接中断”；直接通过手机终端定制天翼wap里的快捷图标点击进入音乐下载专区下载全曲、振铃正常，订购彩铃正常。不适配4 酷派N900：打不开（705错误）天语F130：内存不足天语A969：登陆 提示:连接服务器失败中兴CX763：705 连接服务器失败终端不支持5 3.5爱音乐业务使用测试(校园定制版)所有机型次数备注较好1 正常12 较差0 不适配1 摩托罗拉A1890：访问3g.118114.cm/3g，提示“请求的内容未找到”不支持25 3.6院线通业务使用测试所有机型次数备注较好1 正常13 较差0 不适配6 三星F339、三星F839、天语A969、中兴CX763和摩托罗拉A1890：打不开3/3g酷派N900+：院线通业务不能使用（打开号百终端软件，点击院线通没有任何反映）没有定制19 3.7任翼行业务使用测试所有机型次数备注较好3 正常11 较差0 不适配7 三星F339、酷派D520、三星F839、天语A969、中兴CX763、摩托罗拉A1890和酷派D520：打不开3/3g没有定制18 3.8手机影视（天翼视讯）WAP方式使用测试所有机型次数备注较好5 正常22 较差2 华为C5600：天翼定制按键进入手机影视；视频点播和电视直播页面正常，收费提示正常，但无法进行播放。摩托罗拉A1890：点播或进入直播页面，选择电视频道并确定包月收费后进入“测试手机对流媒体播放支持能力”的页面，点“播放”提示“与服务器连接中断”,点“下载”后提示“格式不支持”不适配3 摩托罗拉A1890、三星S359：显示“不支持的URL海信E8：手机设置wap上网后不能连接网页没有定制7 3.9手机影视（天翼视讯）客户端方式使用测试所有机型次数备注较好3 正常9 较差0 不适配1 三星F839：无法访问网站3g.118114.cm/3g没有定制26 3.10189邮箱邮件提醒功能测试所有机型次数备注较好3 正常31 较差2 S900C：到达提醒为WAP上网连接时，收到WAP push,打开但提示找不到邮件，再登陆邮箱后能找到邮件酷派D520：提醒方式为WAP上网连接时接收邮件无提醒不适配1 天语E329：未收到短信提醒不支持2 3.11WAP方式使用189邮箱测试所有机型次数备注较好3 正常31 较差1 中兴CX763：通信录增加新联系人时，有写名字和Email，但提示“联系人名字和Email不能为空“。其它功能正常。不适配1 海信E8：手机设置wap上网后不能连接网页不支持3 3.12手机导航使用测试所有机型次数备注较好2 正常16 较差1 酷派N900：手机下载打开不了手机导航软件不适配5 多普达T5399：未能安装三星F339：按测试方案，通过“天翼定制按键手机下载下载中心-，找不到地图导航，无法测试。三星S359：无法定位天语F130：无法实现“导航软件”下载不支持15 3.13WAP方式登录和使用论坛功能所有机型次数备注较好5 正常23 差2 XT800：能正常登录，但页面显示太小，放大后又太大浏览不清晰中兴CX763：能登陆，浏览，发帖。不能回帖。较差5 酷派N900、酷派N92：WAP方式无法对论坛()的浏览发帖，回帖功能正常三星SCH-I329：输入用户名密码后登陆论坛失败，出现乱码提示三星M609：登录时间较长，页面显示不完整，图片打不开，有时会出现乱码，无法登录和使用论坛功能华为5900：不能正常登陆不适配2 天语F130：无法显示华为C5600：被测终端无法通过WAP方式发起对论坛()的浏览；不支持2 3.14NET方式登录和使用论坛功能所有机型次数备注较好2 正常20 差3 XT800：能正常登录，但页面显示太小，放大后又太大浏览不清晰中兴CX763：能浏览。不能登陆，发帖，回帖。酷派N900+：发帖后长时间空白，没有反应较差3 三星M609：使用NET方式登录不能使用互联网浏览器进入，需用Ucweb浏览器，能正常进入，但点击登录按钮无反应，无法登录天语A969：登陆后黑屏华为5900：不能正常登陆不适配5 三星F339：约3S后提示内存不足，无法打开界面，无法测试。摩托罗拉A1890：无法完全展示页面，提示“内存不足无法显示”三星S359：内存不足无法显示天语F130：内存不足无法显示华为C5600：被测终端无法通过NET方式发起对论坛()的浏览；不支持6 3.15业务及定制应用测试汇总业务及定制应用测试与测试终端关联问题汇总表（详细见附件“手机上网业务测评项目及结果上报表汇总表.xls”中的“业务及定制应用测试汇总”）。其中，黄色背景结果为不适配，红色背景为差或较差：序号机型.....10 .121.3.13 1.3.14LG KV600酷派S100手机S900C多普达T5399摩托XT800天语E329酷派N900酷派N92三星SCH-I329华为C5900三星M609酷派N900CVIP定制三星F339摩托罗拉A1890三星S359天语F130酷派D520酷派N92华为C5600三星F839诺基亚3806天语A969中兴CX763酷派N900+多普达S900C三星M609（校园）深圳广信DF820华为5900三星W799三星F539酷派S50酷派E210诺基亚1506 海信E8天语E379 终端与当前电信移动互联网增值业务应用的兼容性整体统计情况如下： 小项产品较好正常较差不适配无定制适配率天翼live412002341.03%爱音乐12724571.79%院线通113061935.90%任翼行311071835.90%手机影视39012630.77%189邮箱33111387.18%小计151033199450.43%从上表可看出，终端与目前的电信移动增值业务的兼容性一般，整体不到51，也就是说大概有50的用户是因为终端原因而很少或不使用电信的业务。4特殊场景测试终端XT800在4种特殊场景上网测试实际的话单都会比实施测试时间长大约10分钟。详细结果如下表所示：测试内容结果次数备注1.4.4 特殊场景上网计费准确性测试(WAP方式)正常31 异常3 XT800：记录时间约4分钟，但话单时间为13分钟（0713 16：06-16：10）酷派N92：时长相差较大华为C5600：时长相差较大无作计费验证5 1.4.5 特殊场景上网计费准确性测试(NET方式)正常21 异常3 XT800：记录时间约5分钟，但话单时间为15分钟（0713 16：19-16：24）酷派N92：时长相差较大华为C5600：时长相差较大无作计费验证15 1.4.6 特殊场景下载计费准确性测试(WAP方式)正常27 异常3