黑盒测试过程概述(1).ppt

GSM手机测试 黑盒测试过程概述 主要内容 n新手测试入门 n硬件测试过程 n软件测试过程 n测试改进方向 1、手机测试入门 n从学校毕业后，第一份工作就是手机测试。初到 公司我十分困惑，没有接受过系统的培训，对测 试一无所知，既不知道该测试什么，也不知道如 何开始测试。 n我想涉足手机测试行业的你们，一样会遇到当初 我遇到的过的问题，因此这次讲座就是给大家分 享我在手机测试行业的成长过程，将我在手机测 试过程中总结的一些经验介绍给大家。 n希望今天的讲解，能够给初涉手机测试的你带来 帮助。 1.1、测试准备工作 n测试工作开始，测试工程师应该搞清楚测试工作的目的是 什么。如果问项目经理，他往往会这样回答： “ 发现我们 产品里面的所有 BUG ，这就是你的工作目的 ” 。作为一 名测试新手，如何才能发现所有的 BUG ？如何开始测试 工作？面对项目，测试需要考虑的问题是方方面面的，包 括硬件、软件、产品相关的业务流程。该从何处下手呢？ 如何增加你相关的技能呢？ n像有经验的人学习； n阅读嵌入式测试的相关书籍； n走读缺陷跟踪库中的问题报告单； n走读相关产品的历史测试用例 ； n学习产品相关的业务知识； n尽量熟悉手机规格； n主动获取需求规格； n确认需求的优先级； 1.2、测试用例执行 n搭建软件测试环境，执行测试用例 n测试执行过程应注意的问题 ： n全方位的观察测试用例执行结果 n及时确认发现的问题 n与开发人员良好的沟通 n及时更新测试用例 n提交一份完美缺陷跟踪单 n缺陷单是很重要的。缺陷单最关键的就是 “ 问题详述 ” ，这是 开发人员重现问题，定位问题的依据。问题描述应该包括以下 几部分内容：操作步骤、预计结果、实际结果，当时输出设备 的相关输出信息，部分严重、致命问题日志信息因作为附件提 交到测试缺陷跟踪单中。 n书写一份全面的测试报告 1.3、测试报告的书写 n产品的最终目的是为了满足客户需求，我们以客户需求作 为评判产品质量的标准，认为缺陷的具体含义包括下面几 个因素： n产品未达到客户需求的功能和性能； n产品超出客户需求的范围； n产品出现客户需求不能容忍的错误； n产品的使用未能符合客户的习惯和工作环境。 n测试报告的内容应该包括以上内容，即总结缺陷；但表达 方式上，应根据不同读者对象做适当修改；体现重点，将 问题级别高的缺陷应列入测试报告中，并注意使用部分图 形，以便清晰表示，产品缺陷的演进过程，一边项目相关 人员查看。做到“一目了然” 1.4、软件测试的意义 n古语说得好， “ 不知道历史的人必然会重蹈覆辙 ” 。没有对测试结果进行认真的分析，我们就无 法了解缺陷发生的原因和应对措施，结果是我们 不得不耗费的大量的人力和物力来再次查找这些 缺陷。很可惜，目前大多测试团队都没有意识到 这一点，测试报告中缺乏测试结果分析这一环节 。 n n测试的目的单单是发现缺陷这么简单吗？测试的目的单单是发现缺陷这么简单吗？ n n如果是如果是 “ “ 是是 ” ” 的话，我敢保证，类似的产品缺陷的话，我敢保证，类似的产品缺陷 在下一次新项目的测试中还会发生。在下一次新项目的测试中还会发生。 1.5、测试结果分析 软件测试执行结束后，测试活动还没有结束。测试结果 分析是必不可少的重要环节， “ 编筐编篓，全在收口 ” ， 测试结果的分析对下一轮测试工作的开展有很大的借鉴意 义。前面的 “ 测试准备工作 ” 中，建议测试人员走读缺陷 跟踪库，查阅其他测试人员发现的软件缺陷。测试结束后 ，也应该分析自己发现的软件缺陷，对发现的缺陷分类， 你会发现自己提交的问题只有固定的几个类别；然后，再 把一起完成测试执行工作的其他测试人员发现的问题也汇 总起来，你会发现，你所提交问题的类别与他们有差异。 这很正常，人的思维是有局限性，在测试的过程中，每个 测试人员都有自己思考问题的盲区和测试执行的盲区，有 效的自我分析和分析其他测试人员，你会发现自己的盲区 ，有针对性的分析盲区，必定会在下一轮测试用避免盲区 。分析总结完成后要注意，修订测试用例，及相关测试报 告模板。 2、研发阶段硬件测试过程 nP1主板测试（硬件测试） n硬件物料测试（硬件测试） nP2主板测试（综合测试） n小批量试生产测试（综合测试） n大批量生产抽样测试（综合测试） 2.1、P1主板测试 n主要针对相关硬件功能测试，保证覆盖硬件测试 用例，确保硬件稳定，主要包括以下内容： n下载、校准、IMEI； n所有按键、马达、SBKER、RESVER、耳机、mi头； n液晶亮度调节、摄像头功能、闪光灯； nU盘使用、（外配）卡； n充电、基本射频测试，注意通话音质音量，确保通话 没有受到干扰； n电流测试（监控各状态使用电流）； n基本软件功能验证； n详细测试请阅读P1主板测试报告； 2.2、P1主板测试 nP1主板测试过程中或多或少的会遇到一些 问题例入： n资源问题；（积极协调索取测试资源） n软件配合问题；（挑选可进行测试项目测试） n硬件BUG；（及时修改升级、重复测试） 分析问题时需硬件人员协助，搭建测试问题分析 平台，以确定问题所在点；常见问题主要有， 功能异常、电流异常、需要切线、飞线、调试 元件参数、更换元件等。待问题解决后需重复 测试。 2.3、硬件物料测试 n外配器件测试： n耳机线； n充电器； n外配卡（兼容管理问题）； n电池； n数据线； n主板组要测试器件 n天线测试； nLCD； nSBKER； nRSEVER； nMI头； n摄像头； n马达； 2.4、P2投板测试 P2主板在P1基础上对存在问题做了全面 修改，因此测试内容因包括以下内容： n确认P1主板测试过程提出的缺陷单； n根据P1测试项目再次做全面测试； n天线耦合测试，确保天线匹配电路符合要求； n增加压力测试（100以上开关机、500以上呼叫 、4H以上通话、12H以上MP3等多媒体连续播 放） 2.5、小批量试生产测试 n临近大批量生产测试将需更加全面，因此本次测试因注意 全面把握，硬件、软件、结构、外配等所有相关测试，测 试人员应该把拿到的手机，当成公司已出货的手机进行测 试并提出各方面的问题； n天线耦合测试、硬件电流、通话质量、多媒体播放质量等； n软件功能； n震动测试，高低温测试，长时间待机测试； n结构；（1.5M自由跌落、耳机插拔1万次，翻盖划盖10万次，24小 时充电） n耳机、电池、数据线、充电器； n记录因生产工艺问题造成的缺陷，以便改进再次生产改进； n准备生产评审报告； 2.6、大批量生产抽样测试 n已经通过小批量的严格测试，软件版本已经稳定 ，大批量测试应该注重生产工艺、来料质量产品 一致性问题测试，测试因包括以下内容： n天线测试（保证天线来料，达到要求，且装配接触良 好） ； n电流测试；保证装配过程中，没有存在短路等原因引 起的电流过高问题； n多媒体音质、LCD色彩； n路测（确保通话质量） ； n出产品抽样测试报告； 3、软件测试过程 n单元测试 n根据各模块功能设计测试（软件人员完成），测试人 员需要根据模块设计编写相关测试用例； n集成测试 n根据集成顺序，测试集成模块各功能； n系统a版本测试 n根据版本及资源情况尽量执行测试用例； n系统版本测试 n全面执行测试用例 n验收测试 软件测试方法 n等价类和边界值分析等措施来进行实际的 软件测试； n认真的执行测试用例、及时修订测试用例 ，定期评审测试用例库； n安版本提交测试报告（反映软件版本发展 趋势，给研发形成压力） n重点测试用户常用功能（基本呼叫、短信 、电话本、充电省电） 测试过程改进 为了保证产品质量持续，提高，测试过 程的改进也需要持续不间断的进行下去： n测试用例库改进； n缺陷跟踪库的改进； n硬件、物料测试报告的改进； n自动测试的逐步建立； n白盒测试引进，全面启动单元测试； 测试用例等级 n根据需求重要性区分测试用例等级，测试执行阶 段可以根据测试用例等级安排测试任务，分为四 级： n冒烟测试:即版本确认测试，每个测试版本需通过所有 该级测试用例，否则拒绝继续测试； n关键路径测试:每个测试版本需执行该级测试用例，若 该级测试用例均通过，意味着软件功能趋于稳定； n可接受级测试:该级测试用例只要执行一次通过即可， 该级测试用例通过意味着可以准备发布了； n建议执行的用例:如果有时间，最好执行该级测试用例 ，但不作为发布的必要条件。 测试用例执行结果 n执行时填写，分为通过、失败、警告、阻塞、忽 略。 n阻塞（ Block ） - 一些外部条件 如缺少部分功能 将无法执行测试； n忽略（ Skip ） - 已经决定（或被告知）跳过这个测试