T0305能力验证计划作业指导书.doc

CNAL T0305软件功能性测试能力验证计划作业指导书组织机构：中国实验室国家认可委员会 实施机构：中国航天工程咨询中心（软件测评实验室） 2006 年 4 月组织机构中国实验室国家认可委员会能力验证负责人翟培军联系人葛曼丽联系地址（邮编）北京市朝阳区朝外大街甲10号中认大厦（100020）联系电41传施机构中国航天工程咨询中心（软件测评实验室）联系地址（邮编）北京市海淀区阜成路16号B座503房间 （100037）工作小组组成计划负责人姓名：张刚 杨桂枝联络地址：北京市海淀区阜成路16号B座503房间 （100037）技术专家姓名：吴铸成 王占武 何伟起 高林 支定镛 许胜 王欣 王瑞联络地址：北京市海淀区阜成路16号B座503房间 （100037）统计专家姓名：葛军 经小川 吴丹联络地址：北京市海淀区阜成路16号B座503房间 （100037）计划联络人姓名：杨桂枝 联络地址：北京市海淀区阜成路16号B座507房间 （100037）联系电话18传真E-mail： ； 实施机构银行帐户户名中国航天科技集团公司第七一研究所帐号0200001409014452694开户行工行北京百万庄支行目 录1.概述12.被测物品的说明12.1物品的制备12.2物品的编号12.3物品的均匀性、稳定性检验12.4物品的包装传递与保存条件23.测量内容的说明23.1测试内容23.2测试方法要求23.3软件测试环境24.报送结果的要求3附件1：CNAL T0305 被测物品接收状态确认表4附件2：CNAL T0305能力验证结果报告单5T0305能力验证计划作业指导书1. 概述当前的软件度量技术没有达到可以对软件测试能力进行严格的数值比对的水平，故本次能力验证计划采取已知值能力验证计划类型（已知被测软件中植入缺陷的个数）。T0305能力验证计划实施机构组织制备能力验证样品，并向各参加实验室发出样品及“能力验证计划作业指导书”。各实验室收到样品后，对该样品进行独立检测并出具检测报告，检测时间最长为十五个工作日（以收到样品的邮戳时间的下一个工作日，到寄出测试结果的邮戳时间计算）。统计专家根据各实验室的检测结果进行统计，按结果中检测出缺陷的个数及离群程度来评判实验室的检测能力。对于离群程度过大的实验室，技术专家将对其测试过程记录进行抽查。2. 被测物品的说明本次的能力验证样品为预先植入缺陷的可执行软件，附有格式满足GB/T8567要求的需求规格说明书作为用户文档。各参加实验室采用同一被测物品，该物品将刻录成光盘，送抵各参加实验室。2.1 物品的制备由中国航天工程咨询中心软件测评实验室组织制备预先植入缺陷的小型桌面软件，该软件的需求规格说明书格式满足GB/T8567要求。软件样品的制备与需求规格说明的编写均已通过技术专家的评审。此次测试为基于需求的测试，依据样品中的T0305能力验证样品软件需求规格说明书的明确需求对软件进行功能性测试。2.2 物品的编号刻录有该被测物品的光盘编号格式为T0305_N_m（m1,2）。其中，T0305为本次软件能力验证计划的编号；N为两位数字长度的发送顺序号，不同实验室的发送顺序号不同；对每个实验室均发送两张内容相同的光盘，两张光盘之间以m编号作为区分。2.3 物品的均匀性、稳定性检验鉴于软件的数字化和可复制性特点，我们将被测物品刻录成光盘，并经过实施机构的验证，保证刻录数据无误，以保证光盘中被测物品数据的一致性和稳定性。2.4 物品的包装传递与保存条件物品被封闭性刻录在只读光盘中，经包装后通过EMS方式发送给各参加实验室。该光盘可保存在常温、常湿环境中。能力验证计划实施机构发送物品的同时进行登记，登记内容包括样品 号、发送日期、发送人、收物人姓名及联系电话。各参加实验室应在收到物品后的24小时内填写附件1被测物品接收状态确认表，并传真到能力验证计划实施机构。3. 测量内容的说明3.1 测试内容按照本次能力验证计划的目标，各参加实验室仅根据GB/T 17544-1998 信息技术 软件包 质量要求和测试中3.3.1 功能性条款对物品进行测试，对物品的其他特性不做检测。要求实验室检测出软件样品中尽可能多的功能缺陷，并给出测试结果报告。3.2 测试方法要求此次的能力验证要求实验室按照GB/T 17544-1998进行功能性测试，并提交软件测试报告。3.3 软件测试环境对于本次软件测试能力验证的测试环境，有如下基本要求：PC机配置：本软件所需硬盘空间10M以上显示器分辨率：800*600以上软件环境：操作系统为MS Windows 2000 Professional（2003年6月的Service Pack 4）中文版MS Access 2000 中文版4. 报送结果的要求参加实验室在完成对能力验证计划被测物品的测试后，应将结果按附件2能力验证计划结果报告单的要求填写，并与实验室对该物品测试的主要过程文档，包括测试计划、用例、测试报告及测试记录一起报送至能力验证计划实施机构处。能力验证计划结果报告单的填写要与测试用例、记录和报告测试过程文档相一致，实施机构会根据能力验证计划结果报告单和其他记录一起确认缺陷。所有测试过程的文档格式可由各参加实验室自定。但测试用例必须包括唯一标识、与需求规格说明书的追踪关系、用例初始化、操作步骤、测试数据、期望结果、评判标准等基本内容，要求依据用例可复现测试结果。测试记录要足以满足结果判定需求，必要时要记录操作屏幕图象。所有报送文档要有电子和纸质两种介质，电子介质要求用光盘进行保存，与纸质文档一同送往（最好以EMS方式，以控制邮寄时间）实施机构。光盘上要加以标识，标识格式为“T0305测试结果_N”，N为样品发送顺序号（见样品光盘标识中的发送序号）。例如：样品光盘的标号为“T0305_27_1”或“T0305_27_2”，则测试结果光盘上的标识为“T0305测试结果_27”。其他测试过程的中间文档保存在参加实验室待查。6附件1：CNAL T0305 被测物品接收状态确认表CNAL T0305被测物品接收状态确认表本实验室已于 年 月 日收到 号制品。经检验，光盘数据能否正常读取？ （ 是 否 ）制品包含有如下文件：被测物品 T0305能力验证样品软件需求规格说明书.doc被测物品setup.exeT0305能力验证计划作业指导书.docT0305样品库.mdb关于“软件功能性”能力验证注意事项.doc实验室名称：实验室测试样品验收人员（签字）： 年 月 日填表说明：为了保证被测物品顺利送抵各参加CNAL T0305能力验证计划的实验室，保证能力验证的顺利进行，要求每个参加能力验证计划的实验室在收到被测物品时检验样品，并填写该表格，传真到杨桂枝 收。如被测物品在运送过程中损坏不能读取，我们在收到CNAL T0305被测物品接收状态确认表后将为您重新发送一份。附件2：CNAL T0305能力验证结果报告单CNAL T0305能力验证结果报告单实验室名称认可证书号联系人联系电话联系地址Email测试环境硬件环境：PC机软件环境：操作系统：Windows 2000 Professional（sp4）中文版其他相关软件：MS Access 2000中文版测试执行情况测试开始日期： 年 月 日，测试结束日期： 年 月 日。设计用例 个，实际执行用例 个，通过用例 个，未通过用例 个。测试人员（签字）：发