中国电信4G网络业务穿越性测试用例

中国电信4G网络业务穿越性测试测试用例中国电信集团公司2014年6月目 录1总体说明31.1测试目的31.2测试内容31.3测试表格填写说明42本地测试流程及用例42.1传统业务测试42.1.1语音业务42.1.2短信业务42.1.3彩信业务52.24G典型互联网业务测试62.2.1搜狐视频业务62.2.2易信业务62.2.3京东业务72.2.4淘宝业务72.2.5网易新闻业务82.2.6百度音乐业务82.34G/3G互操作体验测试92.3.1测试环境测试组网图测试环境的选取102.3.2测试项目LTE到eHRPD激活态切换测试eHRPD到LTE空闲态重选测试12316省4G用户国内漫游测试131 总体说明1.1 测试目的为保障2014年7月15日中国电信4G业务在16城市上市，对4G用户语音、短彩信、4G上网等大类业务及部分主流互联网业务和应用进行验证测试，开展即将上市的7款终端4G与3G互操作体验性测试。同时为全面掌握16城市4G网络质量，在前期已开展的DT/CQT测试基础上，16城市继续开展DT/CQT测试。1.2 测试内容1、 语音、短彩信、4G上网及主要互联网应用测试：本次4G用户语音、短彩信业务等传统业务测试包含4G用户间、与189号码、移动、联通等其他运营商的互拨及互发，测试要满足一定数量。4G网络典型APP应用体验性测试内容包括APP下载及安装，模拟基本典型使用场景，对测试结果进行详细记录。本次选取的业务为：1) 搜狐视频2) 易信3) 京东4) 淘宝5) 网易新闻6) 百度音乐2、 即将上市的7款终端4G与3G互操作体验性测试（部分省可选）由于3月份组织的4G网络穿越测试中我们已测试了全设备场景的4G/3G网络互操作性能，因此本次测试只针对新上市的7款终端与网络配合进行互操作的体验性测试，我们将组织个别省份进行测试，其他省可根据自身情况选做此项。3、 16城市DTCQT测试要求DT/CQT测试要求见附件3、中国电信LTE网络质量评估测试规范（试行稿）V1。1.3 测试要求及表格填写说明为方便后续体验性测试工作开展，领取测试终端后均需首先安装翼网测速软件6:9099/fourGTest/down/yispeedtest.apk。“测试结果”要求针对预期结果内容，填写附件1、中国电信4G网络传统业务结果汇总表、附件2、中国电信4G典型APP应用体验测试结果汇总表，16城市还需要根据路测结果填写附件4、DTCQT测试结果汇总表格。2 本地测试流程及用例2.1 传统业务测试2.1.1 语音业务测试编号4G_Trad_001测试日期测试项目语音业务测试目的验证4G用户语音业务使用情况测试预置条件1、4G号码已经正常放号；2、终端能够正常使用；3、能够附着成功并显示2G和4G信号。测试过程1、 与189号码互拨，重复主被叫10次，接通并能正常通话；如10次测试中发生失败情况，补充测试10次，若仍有失败则需要定位并解决问题；2、 两4G用户互拨，重复主被叫10次，接通并能正常通话；如10次测试中发生失败情况，补充测试10次，若仍有失败则需要定位并解决问题；3、 与移动号码互拨，重复主被叫10次，接通并能正常通话；如10次测试中发生失败情况，补充测试10次，若仍有失败则需要定位并解决问题；4、 与移动号码互拨，重复主被叫10次，接通并能正常通话；如10次测试中发生失败情况，补充测试10次，若仍有失败则需要定位并解决问题；预期结果1、 主叫正常听回铃音，接续时间正常，接通通话正常；2、 被叫正常振铃，主叫号码显示正常，接通通话正常；2.1.2 短信业务测试编号4G_Trad_002测试日期测试项目短信业务测试目的验证4G用户短信业务使用情况测试预置条件1、4G号码已经正常放号；2、终端能够正常使用；3、能够附着成功并显示2G和4G信号。测试过程1、 与189号码互发，发送6次，接收6次，其中三次正常短信，三次长短信；如测试中发生失败情况，补充测试6次，若仍有失败则需要定位并解决问题；2、 两4G用户互发，发送6次，接收6次，其中三次正常短信，三次长短信；如测试中发生失败情况，补充测试6次，若仍有失败则需要定位并解决问题；3、 与移动号码互发，发送6次，接收6次，其中三次正常短信，三次长短信；如测试中发生失败情况，补充测试6次，若仍有失败则需要定位并解决问题；4、 与移动号码互发，发送6次，接收6次，其中三次正常短信，三次长短信；如测试中发生失败情况，补充测试6次，若仍有失败则需要定位并解决问题；预期结果1、 短信发送正常，对端成功接收，长短信拼接正常；2、 短信接收正常，长短信拼接正常；3、 如长短信不能拼接，请在测试结果中记录终端型号；2.1.3 彩信业务测试编号4G_Trad_003测试日期测试项目彩信业务测试目的验证4G用户彩信业务使用情况测试预置条件1、4G号码已经正常放号；2、终端能够正常使用；3、能够附着成功并显示2G和4G信号。测试过程1、 与189号码互发，发送2次，接收2次，彩信内容包含不大于300K的图片及文字；如测试中发生失败情况，补充测试2次，若仍有失败则需要定位并解决问题；2、 两4G用户互发，发送2次，接收2次，彩信内容包含不大于300K的图片及文字；如测试中发生失败情况，补充测试2次，若仍有失败则需要定位并解决问题；3、 与移动号码互发，发送2次，接收2次，彩信内容包含不大于300K的图片及文字；如测试中发生失败情况，补充测试2次，若仍有失败则需要定位并解决问题；4、 与移动号码互发，发送2次，接收2次，彩信内容包含不大于300K的图片及文字；如测试中发生失败情况，补充测试2次，若仍有失败则需要定位并解决问题；预期结果1、 彩信正常发送及接收；2.2 4G典型互联网业务测试2.2.1 搜狐视频业务测试编号4G_App_001测试日期测试项目搜狐视频业务测试目的验证4G终端使用视频业务的情况测试预置条件1、4G号码已经正常放号；2、终端能够正常使用；3、能够附着成功，能够实现互联网访问。测试过程1、 在终端界面中，断开数据连接；2、 在终端界面中，重新打开数据连接；3、 使用常见APP store，下载搜狐视频app客户端软件，并安装。记录下载结果和下载所需时间4、 打开搜狐视频app软件，在线观看10分钟左右的在线视频。记录视频播放延时、视频播放是否流畅、视频播放是否停顿、停顿次数；5、 选取一个基站的近点、远点，使用即将上市的7款4G终端，按照步骤1-4，每款终端测试1次，记录测试结果；预期结果1、 能够正常下载对应APP客户端软件；2、 视频播放流畅，停顿次数少或者没有停顿2.2.2 易信业务测试编号4G_App_002测试日期测试项目即时消息业务验证测试目的验证4G终端即时通信业务的情况测试预置条件1、4G号码已经正常放号；2、终端能够正常使用；3、能够附着成功，能够实现互联网访问；注册一个测试用易信账号；测试过程1、 在终端界面中，断开数据连接；2、 在终端界面中，重新打开数据连接；3、 使用常见APP store，下载易信app客户端软件，并安装。记录下载结果和下载所需时间4、 打开易信app软件，给好友发送一条文字信息、一张照片、一段5秒对讲录音，好友圈发送一条信息(30个汉字外加一张图片)。记录发送结果；5、 选取一个基站的近点、远点，使用即将上市的7款4G终端，按照步骤1-4，每款终端测试1次，记录测试结果；预期结果1、 能够正常下载对应APP客户端软件；2、 文字、图片、音频信息发送成功，好友圈信息发送成功。3、 信息发送延时正常2.2.3 京东业务测试编号4G_App_003测试日期测试项目电子商务应用测试目的验证4G终端电子商务应用的情况测试预置条件1、4G号码已经正常放号；2、终端能够正常使用；3、能够附着成功，能够实现互联网访问；4、注册一个测试用京东账号；测试过程1、 在终端界面中，断开数据连接；2、 在终端界面中，重新打开数据连接；3、 使用常见APP store，下载京东app客户端软件，并安装。记录下载结果和下载所需时间4、 打开京东app软件，搜索商品，选中某个商品，点击购买(不用实际付款)，在已购买商品中查看该商品。记录测试结果5、 选取一个基站的近点、远点，使用即将上市的7款4G终端，按照步骤1-4，每款终端测试1次，记录测试结果；预期结果1、 能够正常下载对应APP客户端软件；2、 能够搜索所需商品，能够查看商品详情，购买成功，在已购商品中能够查看到购买结果。2.2.4 淘宝业务测试编号4G_App_004测试日期测试项目电子商务应用测试目的验证4G终端电子商务应用的情况测试预置条件1、4G号码已经正常放号；2、终端能够正常使用；3、能够附着成功，能够实现互联网访问。4、注册一个测试用淘宝账号测试过程1、 在终端界面中，断开数据连接；2、 在终端界面中，重新打开数据连接；3、 使用常见APP store，下载京东淘宝客户端软件，并安装。记录下载结果和下载所需时间4、 打开淘宝app软件，搜索商品，选中某个商品，点击购买(不用实际付款)，在已购买商品中查看该商品。记录测试结果5、 选取一个基站的近点、远点，使用即将上市的7款4G终端，按照步骤1-4，每款终端测试1次，记录测试结果；预期结果1、 能够正常下载对应APP客户端软件；2、 能够搜索所需商品，能够查看商品详情，购买成功，在已购商品中能够查看到购买结果。2.2.5 网易新闻业务测试编号4G_App_005测试日期测试项目网易新闻业务测试目的验证4G终端使用新闻推送内业务的情况测试预置条件1、4G号码已经正常放号；2、终端能够正常使用；3、能够附着成功，能够实现互联网访问。测试过程1、 在终端界面中，断开数据连接；2、 在终端界面中，重新打开数据连接；3、 使用常见APP store，下载网易新闻app客户端软件，并安装。记录下载结果和下载所需时间；4、 打开网易新闻app软件，查看头条列表，打开头条第一条新闻内容，并查看跟帖；返回头条，打开“每日轻松一刻”，快速滑动屏幕，滚动3-5屏；记录测试结果；5、 选取一个基站的近点、远点，使用即将上市的7款4G终端，按照步骤1-4，每款终端测试1次，记录测试结果；预期结果1、 能够正常下载对应APP客户端软件；2、 能够正常查看新闻头条，能够查看新闻详细内容并浏览相应跟帖内容，能够顺畅浏览包含大量图片的新闻内容。2.2.6 百度音乐业务测试编号4G_App_006测试日期测试项目百度音乐业务测试目的验证4G终端使用在线音乐的情况测试预置条件1、4G号码已经正常放号；2、终端能够正常使用；3、能够附着成功，能够实现互联网访问。测试过程1、 在终端界面中，断开数据连接；2、 在终端界面中，重新打开数据连接；3、 使用常见APP store，下载百度app客户端软件，并安装。记录下载结果和下载所需时间4、 打开百度音乐app软件，点击榜单，随意点击某一首歌曲在线播放，并下载该歌曲(选择超高品质)。记录播放情况和下载情况，记录下载所需时间。5、 选取一个基站的近点、远点，使用即将上市的7款4G终端，按照步骤1-4，每款终端测试1次，记录测试结果；预期结果1、 能够正常下载对应APP客户端软件；2、 在线音乐播放流畅，下载音乐流畅；2.3 4G/3G互操作体验测试通过模拟用户感知的进行C/L互操作测试，主要验证即将上市的7款4G手机终端的4G/3G互操作功能情况。现网测试人员可基于实际网络及工具条件，对测试门限、测试次数做适当调整，在不妨碍测试开展的前提下，尽量以用户感知的方式模拟测试C/L边界无线场景下的互操作性能。2.3.1 测试环境 测试组网图图1 基本功能测试组网图图2 后向兼容性测试组网图 测试环境的选取基于用户感知的CL互操作测试环境主要有两类（测试方式任选其一）：1、 场景一：室外DT测试，4G手机终端在FDD LTE与eHRPD覆盖边界区域来回移动，模拟用户乘车或步行情况下从FDD LTE下落eHRPD的业务感知，以及模拟从eHRPD空闲态返回FDD LTE的时延。2、 场景二：室内CQT测试，选取无FDD LTE覆盖但有eHRPD覆盖的室内场景，模拟用户从室外FDD LTE覆盖区域步行进入室内无FDD LTE覆盖区域下落eHRPD的业务感知，反向模拟从室内的eHRPD覆盖区空闲态进入室外FDD LTE覆盖区域的时延。2.3.2 测试项目 LTE到eHRPD激活态切换测试验证4G手机终端不做任何调整情况下，从LTE RRC激活态非优化切换到eHRPD的功能是否正常，并统计切换时延。测试项目编号4G_HO_01项目标题非优化激活切换测试目的1、 验证终端首次从LTE激活切换到eHRPD的性能（无eHRPD session、无HSGW 上下文）。2、 验证终端非首次从LTE激活切换到eHRPD的性能（有eHRPD session、有HSGW 上下文）。测试预置条件1、 4G手机终端已插上UICC卡。2、 用户在FDD LTE网络建立会话，并使用数据业务；3、 在PDN GW的操作管理客户端建立PMIP会话的信令跟踪；4、 LTE信号变弱，但eHRPD无线环境良好的区域。测试步骤1、 选取典型的场景一或场景二为测试场所2、 手机终端建立LTE的连接，并使用数据业务（视频业务或“翼网测速”的ping业务）不中断。3、 手机终端移动到只有eHRPD覆盖的区域，发生LTE到eHRPD激活态切换。4、 记录激活态切换时延：1) A、如手机终端未连接测试软件，则切换时延为：从手机终端屏幕显示4G信号图标消失开始，一直到屏幕显示3G信号图标且上下行箭头的数据连通图标在刷新为止，记录该时间段的时长。2) B、如果手机终端连接了测试软件，则通过信令分析，记录切换时延（业务中断时延），切换时延定义为：从手机终端收到rrcConnectionRelease，到第一个PDN的最后一个VSNCP configuration ACK（手机终端发出）之间的时长。5、 将手机关机再开机。6、 步骤1步骤5重复做3次，记录为4G到3G的首次切换性能。7、 步骤1步骤4重复做3次，记录为4G到3G的非首次切换性能。检查点1、 切换过程中，eNB向MME发送手机终端 Context Release Req手机终端st，其中Cause=Inter-RAT Redirection。2、 切换后，用户在eHRPD网络下能继续使用数据业务。3、 用户在切换前后，IP地址保持不变。数据分析1、 分析切换时延和切换成功率，切换时延要求包含主要消息（RRC release、UATI req手机终端st、Traffic channel complete、LCP req手机终端st、VSNCP Ack、DO Last Signal Before First 1X MSG、DO First Signal After Last 1X MSG）时间 eHRPD到LTE空闲态重选测试测试项目编号4G_HO_02项目标题eHRPD到LTE非优化空闲重选分项目标题空闲重选-标准方案测试目的1、 验证双模手机终端从eHRPD到LTE空闲重选（标准方案）功能2、 验证双模手机终端从eHRPD到LTE空闲重选时长和空闲重选成功率测试预置条件1、 4G手机终端已插上UICC卡。2、 网络设备正常3、 手机终端附着在eHRPD网络4、 手机终端的空闲重选定时器保持出厂原状不改5、 eHRPD信号良好，LTE信号逐步变强的区域测试步骤：1、 选取典型的场景一或场景二（2.2节）为测试场所2、 手机终端在eHRPD系统中附着，并使用数据业务（视频业务或“翼网测速”的ping业务）。3、 在LTE和eHRPD边界，保持手机终端使用eHRPD业务不中断，逐渐进入LTE覆盖区域。4、 当确认LTE信号足够良好时，停止手机终端正在使用的eHRPD业务，（在终端上进入“设置-应用程序-运行”，把后台所有正在运行的程序全部强行关闭），确保终端进入空闲态（终端屏幕的上下