短信回执测试两个重要指标的条件解决方案.doc

短信回执测试两个重要指标的条件解决方案省公司宁夏公司作者宁夏移动数据部、网管中心问题归类短信回执测试问题现象分类关机及收件箱满测试需人工干预问题原因分类短信中心及DCS 队列限制1. 问题在短信回执测试中，最令人头痛的指标就是“回执状态准确率接收方收件箱满时的回执准确率”及“接收方关机的回执准确率”两项指标，具体表现有下列情形：1、 经常出现给条件预设号码发送短信失败，即测试号码给条件手机MO失败；2、 不能触发收件箱满短信，现场看不到收件箱满手机被尝试提交短信，最终导致测试失败；2. 问题分析短信回执系统工作流程如下图：与传统的短信业务比较，短信回执业务引入了重要的网元DCS（Data Center for Short Message Service）短信业务数据中心，DCS保存用户主被叫业务的详细签约数据，完成主被叫业务的逻辑判断，和业务控制。在这里我们可以抽象地将SMSC与DCS看成一个实体，为完成短信回执的一个特殊的短信中心。对“回执状态准确率接收方收件箱满时的回执准确率”及“接收方关机的回执准确率”的问题进行追踪，发现造成测试失败的主要原因是SMSC或DCS的被叫短信队列溢出。由于自动拨测系统由各个厂商提供条件测试号码，在初期验收测试时，短信接收量不是很大，只要定期开机接收短信（对关机）或清除部分短信（对信箱满）即可进行正常拨测。但质量提升大会战要求每部手机的每个指标正式测试30次，另外选出22部手机进行考核测试，每部手机的每个指标测试10次。在这样的测试量下，原来测试条件机的短信队列就非常容易溢出，造成测试指标失败。在尝试对短信中心的队列进行调整后（由原来的30条调整到150条），溢出的情况还是继续存在，这是由于DCS也存在队列长度的限制问题，而且宁夏移动本省没有DCS，调整DCS队列的协调难度较大。而且通过调整存储队列是无法从根本上解决问题，在巨大的测试量下，队列最后还是会满。而且定期开机或删除短信的过程也会认为造成测试失败（自动拨测经常是24小时进行的）。所以，迫切需要寻求一种自动配合的机制，来满足“回执状态准确率接收方收件箱满时的回执准确率”及“接收方关机的回执准确率”的测试。3. 解决方案根据上述分析，“回执状态准确率接收方收件箱满时的回执准确率”及“接收方关机的回执准确率”测试的主要困难在于，自动拨测系统对条件手机不能感知和控制。如果将一部条件机加入自动拨测系统，并被自动拨测系统的电脑控制，完成删除短信甚至关机、开机的操作，那么“回执状态准确率接收方收件箱满时的回执准确率”及“接收方关机的回执准确率”就可以在不需要人工干预的情况下进行拨测，并且取得比较真实的拨测数据。首先，“回执状态准确率接收方收件箱满时的回执准确率”的条件机加入自动拨测系统是完全可能的。向一部手机的收件箱发送短，直到收件箱满的状态，将其接入自动拨测的系统中（目前，杭州友声、北京宽广、明讯三家系统可以支持一部电脑接入超过两部手机）。然后按以下流程进行测试：收件箱满测试流程从以上流程可以看出，可以利用测试电脑对两部手机的信息的了解和控制，删除收件满短信，总是在收到业务完成的短信收到后进行，不会对测试结果产生任何干扰，而且总是使得短信中心及DCS上的队列始终处于较低的水平。另外一个是关于“接收方关机的回执准确率”的测试条件机如何设计的问题，就目前的手机而言，电脑可以对手机进行关机操作，但对于开机操作就比较困难了。一般而言，是需要配置机械手之类的装置才能完成。在今年的劳动竞赛中，看到杭州友声科技12系列手机测试的装置。受此启发，应该可以用一款改造后的12系列手机进行关机测试条件机的配合。12系列机，在设计上不同于其他手机，电脑无法实施对其连接和控制，为此对整个手机进行了改造，只保留了主板部分（包括液晶显示器），按键、电池等外设已经去除，增加了一个控制模块、摄像头及电源模块，这样就可以对12系列的手机进行操控了。经过上述改造，12系列手机可通过电脑进行键盘操作，通过摄像头可以实时读取手机显示屏画面。这样电脑就可以按照智能机的拨测原理进行自动拨测脚本的编制，并进行测试。另外，改造后的12系列手机还具备了一个非常特别的功能，就是可以进行开关机操作。这样 “接收方关机的回执准确率”一个闭环的测试就成为可能。12系列手机改造示意图以下是基于可控制条件机开关机的“接收方关机的回执准确率”测试流程。在收到接收方关机的回执后，可以控制条件机开机接收短信（可以多做几次测试后再开关机），使得短信中心及DCS等待下发的短信队列可以被控制在预先设计好的数值内，保证测试结果