质量保证与测试策略.ppt

软件测试方法和技术 - Ch.3质量保证与测试策略,Zhu.K,朱少民 Kerry Zhu,第二章回顾,Zhu.K,软件质量就是客户的满意度 软件缺陷(Bug)是什么 软件测试的基本方法 - 白盒/黑盒，静态/动态，自动化/手工， 软件测试的分类和阶段 - 单元、集成、系统（性能、适用性、兼容性）、验收测试 软件测试的工作范畴 - 策略、计划、设计、执行、报告、评估,第三章 质量保证与测试策略,Zhu.K,3.1 软件质量保证 3.2 测试策略 3.3 测试计划 3.4 软件质量的可靠性评估,3.1 软件质量保证（SQA）,SQA 概述 SQA 活动 SQS 与软件测试的关系,Zhu.K,什么是 SQA ?,软件质量保证是通过对软件产品和活动有计划的进行评审和审计来验证软件是否合乎标准的系统工程活动.,Zhu.K,确保SQA活动要自始至有计划的进行 审查软件产品和活动是否遵守适用的标准、规程和要求并得到客观验证。 SQA的活动和结果要保证全员参与，沟通顺畅。 逐级解决不符合问题,SQA活动,技术方法的应用 正式技术评审的实施 软件测试 标准的执行 修改的控制 度量 质量记录和记录保存,Zhu.K,SQA活动的影响因素,知识结构：专业的技术，例如质量管理与控制知识、统计学知识等。 经验 依据：如果没有这些标准，就无法准确地判断开发活动中的问题，容易引发不必要的争论，因此组织应当建立文档化的开发标准和规程。 全员参与：全员参与至关重要，高层管理者必须重视软件质量保证活动。 把握重点：一定要抓住问题的重点与本质，尽可能避免陷入对细节的争论之中。,Zhu.K,SQA策略,SQA策略主要分三个阶段： 以检测为重：产品制成之后进行检测，只能判断产品质量，不能提高产品质量。 以过程管理为重：把质量的保证工作重点放在过程管理上，对制造过程中的每一道工序都要进行质量控制。 以新产品开发为重：在新产品的开发设计阶段，采取强有力的措施来消灭由于设计原因而产生的质量隐患。,Zhu.K,SQA与软件测试有什么关系和区别？,Zhu.K,SQA与软件测试的关系,SQA 是管理工作、审查对象是流程、强调以预防为主 测试是技术工作、测试对象是产品、主要是以事后检查 SQA指导测试、监控测试 测试为SQA提供依据,Zhu.K,测试策略的概念,测试策略通常是描述测试工程的总体方法和目标。描述目前在进行哪一阶段的测试（如单元测试、集成测试、系统测试）以及每个阶段内进行的测试种类（如功能测试、性能测试、压力测试等），以确定合理的测试方案使得测试更有效。,Zhu.K,影响测试策略的因素,1、测试完成的标准 标准的高低对策略确定有着重要的影响。比如该软件的应该用场合为军用，这将对软件的可靠性、安全性要求非常高，但如果是用于小型商场的收费系统由于是内部使用，主要考虑其计算的准确与精度及复杂统计与报表生成等方面准确性与易用性。 2、资源状况 参与测试的人、测试中所需要的软件平台（如操作系统甚至会涉及到第三方的一些应用软件）及测试可能用到的相关硬件设备（如计算机，网络硬件其它外设等）,Zhu.K,制定测试策略,全面细致地了解产品的项目信息:应用领域,测试范围,市场需求,产品的特点和主要功能,技术架构 基于模块、功能、整体、系统、版本、压力、性能、配置和安装等各个因素对产品的影响,公正客观地开展测试计划 根据程序的重要性和一旦发生故障将造成的损失,来确定它的测试等级和测试重点 认真研究测试策略,以便能使用尽可能少的有效测试用例,发现尽可能多的程序错误,因为一次完整的软件测试过后,如果程序中遗漏的错误过多并且很严重,则表明本次测试是失败的,是不足的;而测试不足意味着让用户承担隐藏错误带来的危险.同时反过来说,如果过度测试,则又会浪费许多宝贵的资源. 找到一个最佳平衡点。,Zhu.K,测试范围的确立,优先级最高的需求功能 新功能和编码改动较大(提高性能表现)的旧功能 运用有效的测试技术去提高测试效果 经常容易出现问题部分的功能 一些经常被用户使用的功能和配置,Zhu.K,测试持续阶段的确定,当测试任务明确后,测试计划将依赖于测试小组的人力资源而最终确定.,Task 1/1 1/8 1/15 1/20 1/29 2/5 2/12 2/20 2/28 需 求 分 析 - 设 计 审 查 - 测 试计划准备工作 - 设 计测试用例 - 功 能 测 试 - 集 成&系统测试 - 第一轮测试 - 第二轮测试 - 确 认 测 试 - 测 试 结 束 -,Zhu.K,通过/失败的标准,单个的测试通过/失败 测试用例 全部产品测试通过/失败 每个阶段的通过/失败,Zhu.K,测试周期,MRD/PRD/UI Sign-off,Eng. Plan Sign-off,Eng. Spec Sign-off,Test Plan Sign-off,Product Review,Code Freeze,Test Case Sign-off,Code Complete,验收测试,QA 创建 Test Plan,QA,QA创建 Test Cases,功能测试,写/审查Spec,系统测试,单元测试,PRD/UI审查,QA,Zhu.K,阶段通过/失败的标准,Zhu.K,风险评估,测试小组开始项目测试时,硬件资源没有按时配备或仍然不足 开始项目测试时, 软件产品编码没有按计划完成 开始项目测试时, 测试用例没有准备好 缺少按计划参加项目测试的测试人员 在项目测试过程中, 需求总是不停地改动 当项目测试进行时, 在设计说明书中被定义的功能总是不停地被修改,Zhu.K,测试评估,里程碑的定义和跟踪可以帮助项目管理者掌握项目的进行状态 里程碑 日期 测试计划完成 - 1/15 测试用例完成 - 1/29 功能验证完成器 - 2/5 代码冻结前完成系统测试 - 2/20 版本发布前完成确认测试 -2/28,Zhu.K,测试计划的创建和评审,Zhu.K,测试计划内容构成,测试计划制定的第一步就是将软件分解较小而且相对独立的功能模块，写成测试需求。 测试需求有很多分类方法，最普通的一种就是按照功能分类： 测试需求是测试设计和开发测试用例的基础，分解功能模块可以更好地进行设计； 详细的测试需求是用来衡量测试覆盖率的重要指标； 测试需求包括各种测试实际和开发以及所需资源。 一个测试计划应包括：产品基本情况、测试需求说明、测试策略和记录、测试资源配置、计划表、问题跟踪报告、测试计划的评审、结果等。,Zhu.K,测试计划标准格式 -1,16 components of Test Plan (IEEE,1983) Test plan identifier （测试计划标识) Instruction (引言） Test Items （定义或主题词) Features to be tested （需要被测试的功能) Features not to be tested (无需被测试的功能) Approach (方法和途径） Items pass/ fail criteria （测试通过、失败的标准) Suspension criteria and resumption requirements （延迟的标准和再恢复的要求) Test deliverables (测试交付的内容) Testing Tasks (测试任务,Zhu.K,测试计划标准格式 2,16 components of Test Plan (IEEE,1983) Environmental needs （必备的环境) Responsibilities (职责) Staffing and training needs (人员和必需的培训) Schedule (时间进度表) Risk and contingencies (风险和相关费用） Approvals （批准) 模板：中文 测试计划 和 英文,Zhu.K,3.4 软件质量的可靠性评估,3.4.1软件可靠性评估的概述 3.4.2软件可靠性模型 3.4.2可靠性评估过程,Zhu.K,软件可靠性评估的概述,软件可靠性评估（Software Reliability Assessment）指根据软件系统可靠性结构（单元与系统间可靠性关系）、寿命类型和各单元的可靠性试验信息，利用概率统计方法，评估出系统的可靠性特征量。 软件可靠性评估的要素 1）规定的时间 2）规定的环境条件 3）规定的功能,Zhu.K,软件可靠性模型,软件可靠性模型（Software reliability model）是指为预计或估算软件的可靠性所建立的可靠性结构和数学模型。建立可靠性模型是为了将复杂系统的可靠性逐级分解为简单系统的可靠性，以便于定量预计、分配、估算和评价复杂系统的可靠性。 1）可靠性结构模型，是依据系统结构逻辑关系，对系统的可靠性特征及其发展变化规律做出可靠性评价。 2）可靠性预计模型，是用来描述软件失效与软件缺陷的关系，借助这类模型，可以对软件的可靠性特征做出定量的预计或评估。依据软件缺陷与运行剖面数据，利用统计学原理建立二者之间的数学关系，获取开发过程中可靠性变化、软件在预定工作时间的可靠度、软件在任意时刻发生的失效数的平均值以及软件在规定时间间隔内发生失效次数的平均值。,Zhu.K,可靠性评估过程,可靠性数据收集 用时间定义的软件可靠性数据可以分为四类： 失效时间数据，记录发生一次失效所累积经历的时间； 失效间隔时间数据，记