《测试与评估》PPT课件.ppt

测试与评估,4.1 测试与评估的缘起与定义 4.2 测试与评估的管理意义 4.3 测试与评估的工程内涵 4.4 测试与评估的进化与种类 4.5 测试与评估的组织机制设计 4.6 本章重点摘要 4.7 问题与讨论,测试与评估（Test and Evaluation, T&E）是产品获得生命周期（Product Acquisitions Life Cycle）过程中的一个管理作业活动，扮演产品开发项目全寿期的把关角色。,4.1 测试与评估的缘起与定义,一、测试与评估的缘起 测试与评估的概念，系缘起尝试与错误（Try and Error）的逻辑，因为凡事透过尝试，来发觉错误，作为更正的依据，是使事情的进展更为完善的逻辑方法。,1.一般传统产业的产品开发项目，由于产品科技含量不高，研制风险当然是在忍受范围之内，加上产品属于大量标准化的生产模式，且顾客的消费选择性也不甚明显的时候，使传统产业中测试与评估的功能发挥，相对的就较为简单不复杂，测评的范围不大，测试成本也都很少。,2.探讨测试评估在科技产业中兴起的原因，也可以从产品研发风险、研制成本、产品科技含量等构面，一窥测试评估的关键价值。科技性产品的研发就不是这么回事，当年微软（Microsoft）研发出第一代芯片，就花费了三千万美金，研制费用太高，当然不允许走回头路。其次，高科技产品的测试支持装备，有时也是另类的科技创新研究，花费之大也不在话下。,二、测试与评估的定义 测试与评估是两件不同的作业活动。测试系针对产品开发的系统、分系统、总成、零附件等性能与作战能力等项目，所执行的系列测试其研究发展的进度、研制目标进度等作业，来获取、核实与提供相关数据，做为研发项目的决策基础；而评估的定义，则是针对产品设计进度、性能、可靠度等研发阶段的目标，按照研发的需求与规范，对武器系统各个系统组件等，进行分析比较，最后再将通过测试后的比较结果，驴列为研发项目持续开发与否的决策参考依据。,依据此两者之定义，我们应该可以体会出测试与评估的管理面意涵，那就是测试与评估一方面具有测试的稽核功能，另一方面也具有决策的影响，而此二部分都是科技产业中，科技管理所着重的研讨议题 。 我们应该可以了解测试与评估是依据产品研发规格，透过系列测试作业活动，收集产品数据、技术性能参数等数据，提供管理部门研讨项目决策的依据。,三、测试与评估的成本意涵 科技产品日新月异，科技愈进步，产品就愈复杂，产品复杂的结果，无形中就提高了测试评估的难度与成本，所以进行产品测试与评估的工作，就必须满足较少人力（Less Manpower）、较低成本（Reduced Funding）与最短时程（Shorter Schedule ）等三个标准，否则一旦忽略测试成本也是产品成本结构的一部分的认知时，则过高的测试成本，当然会降低产品的竞争力。,（一）质量管理成本的观念 一般而言，我们为质量管理所付出的成本计有三种（Feigenbaum, 1951），第一种是预防成本，第二种是测试与评估成本（也可称为鉴定成本），第三种是失败成本。 （二）测试评估的成本意涵 文献中也有将测试评估的成本称之为鉴定成本，因为降低产品质量成本的根本之道，在于置重点于鉴定产品的质量是否达于标准，而透过测试与评估的预防作为，减少产品的预防成本与失败成本，达到产品质量成本经济有效使用的目标。,资料来源：取自杨庆忠，系统工程与管理，页3-7。 4-1 设计变更与成本的影响,4.2 测试与评估的管理意义,产品获得过程中，建立测试与评估的机制，主要的目的就是帮助解决产品工程与企业经营管理的问题，来保障产品的质量，确保客户需求的满足。以下四点为测试与评估机制，在企业组织中的管理功能，将分别予以详述其功能。,一、确认设计缺失与降低研制风险 测试与评估是研发工程技术人员，用来发觉问题与消除研发风险的手段，因为科技性的产品研发，往往涉及到庞大人力、物力与财力的投入，如果产品研发过程中没有发现问题缺陷，则产品一旦量产或进入市面之后，必然对企业的经营产生绝对的影响，很多高科技产业的案例可以说明此一严重性。,二、系统性能极限确认与控制获得成本 系统性能极限确认，以及控制与降低产品研制获得成本的功效，乃测试与评估在产品研发过程中的第二个管理意义。,Note：图中蓝色部份，表示药物开发过程的测试与评估 资料来源：本研究整理 图4-2 生物科技新药开发流程中的测试与评估,三、阶段目标规格确认与质量管理 产品重视质量，所以好的产品一定具备好的质量。但是如何在产品的开发过程中，注意产品的质量问题，就形成科技产业非常关键的一个问题。,四、评估项目决策与管理规划的依据 产品阶段性测试与评估的机制功能，最后扮演的一个角色，就是项目决策的审查点，也就是说，经由测试评估后所得到的数据数据，必须审慎的考虑，作为该产品系统日后改良及精进之依据（Blanchard, 1981, PP. 224-229），所以，测试与评估是产品研发项目是否持续进行的关键。,4.3 测试与评估的工程内涵,由于测试与评估是一项非常专业的工程属性作业，所以如何将工程属性的测试与评估作业活动，紧密的联系到科技企业的经营模式里，才是吾人研习科技管理中有关测试与评估的真正关键。 有关测试与评估的管理功能论述，必须要从企业组织的整体经营面来思考，而下述几点陈述，都是有关测试与评估是否成功执行的关键要项。,一、测试工程人员 以人为本是企业经营的核心价值，在强调知识经济的今日，科技产业中人所占的比重，更是型塑科技产业以人为经营核心的写照。所以在测试与评估作业进行的前期，掌握具有丰富经验的测试评估工程师，是测试与评估工作能否适当完成的第一个重要议题。,二、测试文件与流程设计 文件形成（Documentation）是科技产业的最终产出，任何一项科技产品的研发，最终都必须以明确的文件呈现，否则即便是再好的科技产品，再好的技术创新，最终都将功亏一篑。,三、测试的监控与报告 一般来说，发生在产品获得寿命周期中每一阶段的测试与评估，都是产品研发过程中的一个决策点，这类决策审查点在整个产品开发的周期里，总共有四次，审查结果的决策，大致可区分为：(1)测试验证合格，可以持续进行下一阶段的开发；(2)测试验证结果发生问题，不能进行下一阶段的开发；(3)测试验证结果的问题严重，必须回到前一阶段寻找问题；(4)测试验证结果的问题很严重，必须暂停研发项目的进行；(5)测试验证结果的问题非常严重，必须结束研发项目的进行等五类。,四、测试与评估的装备采购 测试与评估执行过程中的最后一道关键工作，就是必须具备仿真的测试环境，否则测试结果容易失去真实性。其中，测试装备的获得，为最关键的考虑。因为若没有测试装备，那么测试评估就不易进行，于是即便先前的准备工作做的再好，也于事无补。,1.美国半导体产业在美国的由盛而衰，最后又能在1990年代超越日本的最大原因，即在于美国产品开发小组，能够设计出功能齐全的测试设备，快速、大量、并精确的测试整个半导体的开发过程，所以才能使美国的试生产量远远高于日本与韩国（Iansiti, 1997）。,2.再者，以原子结构与DNA双股螺旋的科学发现为例，如果当时 没有加速器的技术发现，则核子科学家就不能进行许多重要核物理研究的实验，当然也无法将核能工业推向另一个高峰。,4.4 测试与评估的进化与种类,由于科技产品的获得，很类似人类的出生期、婴儿期、儿童期、少年期、青年期、中年期、老年期等成长进化的现象，所以，针对人类不同成长阶段的健康检查，以及所依据的检查项目与标准，也必须随着阶段进化的特性，进行符合当下阶段需求的健康检查。而此一模式，也正好可以套用在测试与评估在科技产品获得生命周期的进化概念上。,一、实验性模型测试评估（Experimental Prototype） 由于建立模型的目的是协助研发人员，经由模型的测试与评估，汇集研发、生产、营销等职能部门的不同意见，掌握产品复杂系统不同功能整合后的性能表现，建立各职能单位对产品设计的一致共识（Leonard-Barton, 1991）。此一逻辑则依产品获得的不同阶段，而相继的被重复执行。,二、阿尔发模型测试评估（Alpha Prototype） 阿尔发模型的测试评估，通常都是紧接着实验性模型测试与评估完成之后，所进行的第二阶段的测试作业。,三、贝它模型测试评估（Beta Prototype） 贝它模型的测试评估，是将完成阿尔发模型的测试评估结果，向前进入到生产组合阶段的测试评估作业。 四、生产前模型测试评估（Preproduction Prototype） 生产前模型的测试评估，是产品从研发阶段正式转型，进入量产前的一个关键性的验证作业。,4.5 测试与评估的组织机制设计,组织如何进行这个掌握项目生杀大权的机制？如何规划产品研发项目的测评？由谁来公正客观的执行？是谁才具有评估项目继续执行的决策权等问题？都是探讨测试与评估组织机制设计时，必须掌握的要点。,一、测试评估与企业组织的策略规划 测试与评估的作业，都是针对新产品研发项目的发生，而相继存在的一个管理稽核机制，因此，新产品研发项目的规划，必然是企业科技策略与经营策略的结合体，事关企业组织资源分配、策略规划的行动（Action Plan）与绩效考核（Performance Evaluation），所以将测试与评估的规划与稽核控制，结合到企业经营策略面的组织机制中，较能彰显组织高阶管理之指挥链路的决策权与稽核权。,二、测试评估的公正客观监督 由于科技性产品研发项目，涉及技术层面甚广，且管理机制的涵盖，更是工程、科学与企业职能管理的综合体，因此，造成测试与评估的执行时，会面临到许多不同的意见，若此时缺乏一个专业、公正、客观的监督机制，则许多不必要的争议，都很可能衍生出许多管理上的插曲，延误研发项目的期程，使工程背景的工程师疲于奔命。,三 测试评估的执行 测试与评估的执行，系为确保产品系统研究发展之顺利获得为诰的，所以测试与评估的规划与执行之良窳，实是产品系统性能与发展成败之重要关键。基于此一立论，则产品获得过称中的有关测试与评估的执行，就必须采取持续性与全面性之系统工程与管理，以分项、分段、及分批等不同的方式执行。万万不可仅局限在前述四类测试与评估的执行思维中，而必须以寿命周期的全系统概念中，建立测试与评估的执行观念。,4.6 本章重点摘要,测试与评估（Test and Evaluation, T&E）是产品获得生命周期过程中的一个管理作业活动，扮演产品开发项目全寿期的把关角色。在产品开发的过程里，对产品开发项目进行健康体检，也具有稽核与控制产品开发项目的决策权。检视这个在科技组织内兼具诊治与控制双重功能的机制，正足以说明测试与评估在科技企业中的关键性地位。以下是研习本章的几个重要关观念与重点，特摘录如下：,一、测试评估的知识性产业环境 测试与评估系缘起于一种以知识性、科技性为主导的产业环境，是强调利润递增的科技与知识性的产业环境，所以相较于高科技、高风险与少量多样的产品开发模式，就必须借助测试评估管理技术的发挥，确保产品开发风险低、费用合理的产品开发模式，满足管理需求的最好方法。,二、测试评估定义 测试与评估的定义是依据产品研发规格，透过系列测试作业活动，收集产品数据、技术性能参数等数据，提供管理部门研讨项目决策的依据。因此，从广义来讲，测试与评估系包括产品系统或分系统的研究发展、生产、使用等不同阶段的所有试验与相关分析，虽然美国国防部将测试与评估分开来定义 ，但事实上两者关系非常密切，都是在确保研发与生产的顺遂，为提升研发效率为目的。,三、测试评估的成本意涵 测试与评估的机制运作，能够降低产品研发的风险，使产品能够以较少的研发成本，成功的研发出具有成本、科技、上市时间短等优势的产品，保障企业的永续经营。如果没有办法掌握产品研究发展、量产、进入市场时的设计质量与可靠度性能等问题，则产品很可能发生缺失，而无谓增加庞大的额外成本，此为测试与评估在高科技产业中的成本意涵。,四、测试评估的管理意义 由于高科技产品的研发，涉及到的技术层面甚广，系统的组成也很复杂，稍有缺失，都很可能引发庞大的成本浪费。因此，从事高科技产品的研发工作，透过组织内测试与评估的机制，使管理者能够充分掌握产品开发的时程、质量、风险等变量，提升产品的研发效率，此即为测试与评估在产品获得生命周期过程中，所具备的主要管理意义。这些管理意义包括：确认设计缺失与降低研制风险、系统性能极限确认与控制获得成本、阶段目标规格确认与质量管理、评估项目决策与管理规划的依据等四项。,五、测试评估的执行 依据前述有关测试与评估的管理功能论述，则科技产业进行测试与评估的作业执行，就必须要从企业组织的整体经营面来思考，而测试工程人员、测试文件与流程设计、测试的监控与报告、测试与评估的装备采购等，都是有关测试与评估是否成功执行的关键要项。,六、测试评估的类型 测试与评估随产品开发的阶段，具有不同的测试评估类型，本篇以Ulrich的分类，提出实验性模型（Experimental Prototype ）、阿尔发模型（Al