软件测试管理办法.ppt

软件测试管理办法2011 07 目录 一 适用范围及评价维度定义 三 测试指标及评价规则 二 软件测试质量管理要求 1 适用范围及评价维度 1 1适用范围 胜利软件公司立项的软件开发类项目及产品的系统测试工作 结合公司目前软件测试现状 按照公司逐步加强软件测试工作的要求 本要求从测试类型 测试实施级别 测试范围三个维度明确了目前阶段软件测试的管理要求 1 2评价维度 从目前技术水平来看 已经具备进行功能测试 安全测试 性能测试的能力 功能测试 性能测试 安全测试 根据系统特征 操作描述和用户方案 测试软件各模块的功能 通过性能测试工具模拟异常负载条件来对系统的各项性能指标进行测试 检查系统对非法侵入的防范能力 通过安全测试工具模拟非法入侵场景进行测试 1 3相关定义 测试类型 1 适用范围及评价维度 根据测试工作执行的严格程度不同 测试级别划分为严格测试 一般测试 简单测试和页面检查 1 3相关定义 测试实施级别 1 适用范围及评价维度 根据执行测试的系统模块数量占全部系统模块数量的程度不同 测试范围划为全部测试 部分测试和少量测试 全部测试 执行测试的模块数量 所有模块数量 90 部分测试 50 执行测试的模块数量 所有模块数量 90 少量测试 30 执行测试的模块数量 所有模块数量 50 1 3相关定义 测试范围 1 适用范围及评价维度 分为应测项目测试覆盖率和全部项目测试覆盖率 应测项目测试覆盖率 已执行测试的上线项目数 应执行测试的上线项目总数应执行测试的上线项目特指符合功能测试要求 性能测试要求 安全测试要求中规定需要执行相应测试的上线项目全部项目测试覆盖率 已执行测试的上线项目数 部门全部上线项目数部门全部上线项目数指部门所有上线项目 1 3相关定义 测试覆盖率 1 适用范围及评价维度 本办法涉及的项目属性信息定义如下 1 3相关定义 项目属性信息 1 适用范围及评价维度 产品类项目 胜利油田信息中心部署项目 胜利油田以外客户项目 胜利软件公司立项时确定为产品的项目 指部署在胜利油田管理局信息中心的项目 指非胜利油田所属项目 测试外包项目 指项目的测试是由外包公司所做 目录 二 软件测试质量管理要求 一 适用范围及评价维度定义 三 测试指标及评价规则 所有项目上线前必须进行系统测试阶段的功能测试 问题记录纳入testdirector测试平台 否则 必须以文档形式提交到项目配置库中 文档格式按照 系统测试问题列表v1 1 模板整理 测试问题修改确认后方可进行上线部署工作 产品类项目 胜利油田信息中心部署项目 胜利油田以外的客户项目必须编写测试用例 按照 严格测试 实施级别进行测试 其它项目可根据项目的复用程度 功能成熟度确定不同的测试级别 部门全部项目严格测试覆盖率 已执行严格测试的上线项目数 部门全部上线项目数 不得少于30 2 软件测试质量管理要求 2 1功能测试要求 产品类项目 胜利油田信息中心部署项目 胜利油田以外的客户项目必须进行全面测试 其它项目部门可根据模块的重要性及成熟度确定不同的测试范围 部门全部项目全面测试覆盖率不少于30 部门部分测试以上测试范围的项目覆盖率不得少于50 一般测试以上测试级别的项目覆盖率不得少于50 2 软件测试质量管理要求 2 1功能测试要求 2 1功能测试要求 2 软件测试质量管理要求 以下情况项目必须进行性能测试 此外部门可根据项目架构的稳定性及复用程度确定项目是否进行性能测试 a 胜利信息中心部署系统的项目 胜利油田之外的客户方部署系统的项目必须进行性能测试 b 系统预置用户数大于150人的项目必须进行性能测试 c 产品类项目必须进行性能测试 2 2性能测试要求 2 软件测试质量管理要求 以下情况项目必须进行安全测试 此外部门可根据项目架构的成熟度及复用程度确定项目是否进行安全测试 a 胜利信息中心部署系统的web项目及胜利油田之外的客户方部署的web项目必须进行安全测试 b 有外网用户接入的web项目必须进行安全测试 2 3安全测试要求 2 软件测试质量管理要求 各部门可选择外包形式完成项目测试任务 但测试规范需按照公司测试规范执行 测试过程成果需达到以下要求 a 测试前制定测试计划 或测试方案 b 编写规范的测试用例 c 测试用例全部执行完成后完成测试报告 d 可接入公司testdirector测试平台的项目测试 问题记录必须纳入testdirector管理 否则 必须以文档形式提交到项目配置库中 文档必须包含问题描述 问题状态 问题严重程度 问题提交人 问题解决人 问题确认人等信息 2 4测试外包质量管理要求 2 软件测试质量管理要求 2 5测试管理流程 2 软件测试质量管理要求 1 建议立项时根据项目属性信息 按照本办法确定项目应测测试类型 测试范围和测试实施等级 2 项目功能测试 安全测试主要由各软件开发部门组织部门测试团队执行 3 项目功能测试必须至少满足以下条件方可进入测试 系统测试所需参考文档齐全 至少包含需求文档 设计文档 所测模块集成完毕 预测试通过 即不出现系统崩溃现象 2 5测试管理流程 2 软件测试质量管理要求 4 项目功能测试必须至少满足以下全部条件方可退出测试 对于未达到退出要求的项目 在测试退出时需有公司级分管领导批准 按照项目测试要求执行测试 测试范围 测试级别符合相关要求 测试文档齐全 按照系统测试计划完成了所有规定模块的系统测试 所有bug缺陷都关闭或确认遗留 遗留问题不存在a类缺陷 b c d类缺陷允许存在 但b类缺陷不得超过总缺陷2 c d缺陷类不超过总缺陷的10 2 5测试管理流程 2 软件测试质量管理要求 5 项目性能测试可申请到项目管理部测试团队执行 需提前4个工作周提交测试申请 6 各软件开发部门每月汇总上线项目的 项目测试信息表 提交至项目管理部确认存档 由项目管理部负责公司整体项目测试工作完成情况的统计分析 7 项目管理部每季度统计全部项目测试覆盖率 抽查上线项目测试文档质量 分析测试问题 发布胜利软件测试审计报告 提出各软件部门测试工作改进建议 目录 三 测试指标及评价规则 一 适用范围及评价维度定义 二 软件测试质量管理要求 3 测试指标及评价规则 测试文档数量符合度 部门测试文档符合度 3 1部门测试指标 功能测试项目覆盖率30 部门应测项目测试覆盖率 严格测试项目覆盖率25 全面测试项目覆盖率10 性能测试项目覆盖率25 安全测试项目覆盖率10 3 测试指标及评价规则 部门测试文档符合度 3 1部门测试指标 评定周期 每月统计上线项目的测试文档数量符合度 年度分数为累计最后月份上线项目的测试文档数量符合度 部门应测项目测试覆盖率 3 1部门测试指标 3 测试指标及评价规则 部门应测项目测试覆盖率 3 1部门测试指标 3 测试指标及评价规则 评定周期 每月统计上线项目执行测试的情况 当月测试项目覆盖率分数为累计到当月的分数值 年度分数为最后月份的测试项目覆盖率分数 计算方法 测试应测项目覆盖率分数 功能测试项目覆盖率分数 30 严格测试项目覆盖率分数 25 全面测试项目覆盖率分数 10 性能测试项目覆盖率分数 25 安全测试项目覆盖率分数 10 合同月报中项目测试情况 3 1部门测试指标 3 测试指标及评价规则 收集表 上线项目测试情况表 3 1部门测试指标 3 测试指标及评价规则 统计表 应测项目测试情况表 合同月报中项目测试情况 3 1部门测试指标 3 测试指标及评价规则 统计表 全部项目累计测试情况表 合同月报中项目测试情况 3 1部门测试指标 3 测试指标及评价规则 统计表 测试文档数量符合度 合同月报中项目测试情况 3 2项目测试指标 3 测试指标及评价规则 项目测试类型齐全率 功能测试分数 项目测试类型齐全率 项目的缺陷解决率分数 项目缺陷解决率 性能测试分数 安全测试分数 3 2项目测试指标 3 测试指标及评价规则 项目测试类型齐全率 项目测试类型齐全率 计算方法 项目测试类型齐全率分数 功能测试分数 性能测试分数 安全测试分数评定周期 每月统计上线项目执行测试的情况 当月上线项目测试类型齐全率分数为累计到当月的分数值 年度分数为最后月份的项目测试类型齐全率分数 3 2项目测试指标 3 测试指标及评价规则 项目测试类型齐全率 项目测试类型齐全率 3 2项目测试指标 3 测试指标及评价规则 项目测试类型齐全率 项目缺陷解决率 计算方法 项目的缺陷解决率分数 已关闭的缺陷 缺陷总数 100评定说明 以testdirector测试平台的数据或项目管理平台数据为准 项目的测试若是没有使用测试管理平台测试平台 需在上线后最终保存为cmmi