评价与系统评价课件

1、评价与系统评价 一、评价与系统评价的概念一、评价与系统评价的概念 二、评价内容与步骤二、评价内容与步骤 三、系统评价方法三、系统评价方法 四、指标体系的建立四、指标体系的建立 本本 章章 主主 要要 内内 容容Safety System Engineering 教学参考书教学参考书1.曹庆贵：煤矿安全评价与安全信息管理，中国矿业大学出版社，1993年2.冯肇瑞主编：安全系统工程（第二版），冶金工业出版社，1993年3.陈晓剑、梁梁：系统评价方法及应用，中国科学技术大学出版社，1993年4.田丰泽、曹庆贵主编：煤矿现代安全管理方法的应用与发展，中国矿业大学 出版社，1999年 5.吴宗之等：工业

2、危险辨识与评价，气象出版社，2000年6.汪元辉主编：安全系统工程，天津大学出版社，1999年7.国家安全生产监督管理局：安全评价，煤炭工业出版社，2002年8.吴宗之、高进东、魏利军：危险评价方法及其应用，冶金工业出版社，2002年9.国家安全生产监督管理局：安全评价通则，2003年3月发布Safety Assessment1.1.1 评价与系统评价的概念评价与系统评价的概念1.1 评价与系统评价概念评价与系统评价概念评价：一般是指按照明确目标测定对象的属性，并把它变成主观效用（满足主体要求的程度）的行为，即明确价值的过程。 在实际生活中，评价、评估、评定、评鉴乃至测量等概念的使用比较混乱。

3、它们被当作同意语使用的情况屡见不鲜。即使在西方，理论界和实际工作者对这些术语的用法也并不规范，在英文中就有Evaluation，Assessment, Appraisal和Measurement等词。在我国文字中，评价显然意味着评判价值之意，这就是说，评价就是判断价值。 由于评价对象涉及的因素较多、复杂程度也较高，因此，若要评价按照严格、精确的方法进行还有不少困准。目前，主要的还是依靠定性与定量相结合、客观统计资料与主观描述资料并重的手段。 Safety Assessment1.1 评价与系统评价概念评价与系统评价概念 系统评价是系统工程中的一个基本处理方法，也是系统分析中的一个重要系统评价是

4、系统工程中的一个基本处理方法，也是系统分析中的一个重要环节。图环节。图1.1反映了评价与分析和综合的关系：把所研究的对象当作系统来分反映了评价与分析和综合的关系：把所研究的对象当作系统来分析，对分析结果加以综合后所产生的就是系统设计，然后再对这个系统进行析，对分析结果加以综合后所产生的就是系统设计，然后再对这个系统进行评价，这样反复进行，直到能有效地实现预定目的为止。评价，这样反复进行，直到能有效地实现预定目的为止。 如果我们对系统的要求作为图如果我们对系统的要求作为图1.1所示系统的输入，系统的设计作为输出，所示系统的输入，系统的设计作为输出，整个过程的进行可以用下面的框图中的具体项目来说明

5、。从图整个过程的进行可以用下面的框图中的具体项目来说明。从图1.2中可以看出，中可以看出，在每一个过程中都必需进行评价。在每一个过程中都必需进行评价。图1.1 系统评价的作用图1.2 系统评价的位置Safety Assessment1.1 评价与系统评价概念评价与系统评价概念 系统评价系统评价就是根据预定的系统目的，在系统调查和可行性研就是根据预定的系统目的，在系统调查和可行性研究的基础上，主要从技术和经济等方面，就各种系统设计的方究的基础上，主要从技术和经济等方面，就各种系统设计的方案所能满足需要的程度同消耗和占用的各种资源进行评审和选案所能满足需要的程度同消耗和占用的各种资源进行评审和选择

6、，并选择出技术上先进、经济上合理、实施上可行的最优或择，并选择出技术上先进、经济上合理、实施上可行的最优或满意的方案。满意的方案。Safety Assessment1.1.2 系统评价的指导思想系统评价的指导思想1.1 评价与系统评价概念评价与系统评价概念1. 1.追求单一目标的思想原则：追求单一目标的思想原则：在评价时，只注重系统的某一方面在评价时，只注重系统的某一方面目标的实现，而忽略其它目标，如对武器系统的早期评价，关键目标的实现，而忽略其它目标，如对武器系统的早期评价，关键是要求可靠性。早期的评价方法大多具有这种思想的痕迹。是要求可靠性。早期的评价方法大多具有这种思想的痕迹。2. 2.

7、经济利益思想原则：经济利益思想原则：只注重系统的投入和产出，希望以最小的只注重系统的投入和产出，希望以最小的投入取得最大的产出。这种思想至今仍在工程项目的决策评价中投入取得最大的产出。这种思想至今仍在工程项目的决策评价中起着重要作用。也属追求单一目标的思想。起着重要作用。也属追求单一目标的思想。3. 3.综合评价的思想原则：综合评价的思想原则：在评价时，不仅重视直接的效益和影响，在评价时，不仅重视直接的效益和影响，而且重视间接的影响；不仅重视近期效益，而且注重长远效益；而且重视间接的影响；不仅重视近期效益，而且注重长远效益；不仅重视定量指标（如投资、收益等）的评价，而且重视软指标不仅重视定量指

8、标（如投资、收益等）的评价，而且重视软指标的评价。的评价。 过去一直认为，人类的劳作都会给人类带来幸福。这种认识使人造系统越来越多、越来越大。然而，资源危机发生了，给人类敲响了警钟。于是又出现了“人类劳作并非都是理性的，人类知识的增加并非都是好事，所有发展都是人类自掘坟墓”的悲观论点。虽然过于悲观，但人们的确已看到或尝到不少因考虑不周而建造的工程系统所带来的危害和苦头。于是，人们开始注重对工程系统的全面评价，即从政治、经济、社会、技术、风险、自然与生态环境、组织和个人等多方面复杂系统问题进行综合评价。Safety Assessment1.1 评价与系统评价概念评价与系统评价概念4. 4.规划的

9、思想原则：规划的思想原则：为了减少盲目性，人们对工程建设等决策活为了减少盲目性，人们对工程建设等决策活动的事先评价越来越重视，不断地寻找能科学地、全面地、客观动的事先评价越来越重视，不断地寻找能科学地、全面地、客观地反映决策活动特征的评价指际体系，不仅重视项目自身的经济地反映决策活动特征的评价指际体系，不仅重视项目自身的经济效益、技术性能等的评价，而且把项目纳入国民经济大系统中进效益、技术性能等的评价，而且把项目纳入国民经济大系统中进行规划。行规划。Safety Assessment1.1 评价与系统评价概念评价与系统评价概念 系统评价的思想是利用控制论和系统工程的观点。对系统整系统评价的思想

10、是利用控制论和系统工程的观点。对系统整体进行评价。体进行评价。 无论是自然系统、还是事理系统，若形成一种闭环控制机制无论是自然系统、还是事理系统，若形成一种闭环控制机制（见图（见图1.31.3），就会具有很好的动态调节性能。），就会具有很好的动态调节性能。 Safety Assessment1.1 评价与系统评价概念评价与系统评价概念图1.3 闭环控制系统Safety Assessment1.1 评价与系统评价概念评价与系统评价概念图图1.31.3中的虚线为前反馈，即在环境影响或系统内部影响产生的中的虚线为前反馈，即在环境影响或系统内部影响产生的偏差还未影响到输出时，就对系统进行适时的调节。偏

11、差还未影响到输出时，就对系统进行适时的调节。启示：启示：要保证系统能长期稳定协调发展，取得最大的收益，在要保证系统能长期稳定协调发展，取得最大的收益，在决策之始就要注意形成这种良性的运行机制。换句话说，在决决策之始就要注意形成这种良性的运行机制。换句话说，在决策方案的评价过程中，要注意对图策方案的评价过程中，要注意对图1.31.3中各个方面进行评价，使中各个方面进行评价，使之形成一个有机整体。之形成一个有机整体。Safety Assessment1.1 评价与系统评价概念评价与系统评价概念 根据上述启示，要使系统长期和谐地发展，并充分发挥其应有功能，一是要求系统结构性能好；二是要求系统具有动态

12、调节性及其与环境的适应性；三是要有较高的输入输出转换能力。要满足这三方面的要求，在创建或改进、完善一个系统（方案设计和评价）时，应做好系统结构的分析和评价，以满足第一要求；还应做好输入一输出一反馈评价和系统一环境评价以满足第二、第三要求。结合图1.3所示的系统运行模型，我们可以提出图1.4所示的系统综合评价模型。这个模型比较全面地描述了系统的本质特征以及评价的基本内容。有利于全面、客观地评价系统，以保证其长期稳定地发展，并产生尽可能大的效益。Safety Assessment1.1 评价与系统评价概念评价与系统评价概念图1.4 系统评价模型Safety Assessment1.1.3 系统评价

13、的目标和任务系统评价的目标和任务1.1 评价与系统评价概念评价与系统评价概念 系统评价是对系统分析过程和结果的鉴定，其主要目的是判别设计系统评价是对系统分析过程和结果的鉴定，其主要目的是判别设计的系统是否达到了预定的各项技术经济指标，能否投入使用并提供决的系统是否达到了预定的各项技术经济指标，能否投入使用并提供决策所需要的信息。领导对于某系统进行决策时，应当全面地考虑系统策所需要的信息。领导对于某系统进行决策时，应当全面地考虑系统状态信息，并对依据这些信息所采取的策略以及执行这些策略可能产状态信息，并对依据这些信息所采取的策略以及执行这些策略可能产生的后果进行综合评价，按照评定的价值来判断各种

14、策略和方案的优生的后果进行综合评价，按照评定的价值来判断各种策略和方案的优劣，作出正确决策。劣，作出正确决策。 因此，评价的目的是为了决策。系统评价是方案优选和决策的基因此，评价的目的是为了决策。系统评价是方案优选和决策的基础，评价的好坏影响着决策的正确性。础，评价的好坏影响着决策的正确性。Safety Assessment1.1 评价与系统评价概念评价与系统评价概念 由上可知，评价的目标是为了决策。所以，评价在决策中负有很由上可知，评价的目标是为了决策。所以，评价在决策中负有很重要的任务，一般说有以下几方面。重要的任务，一般说有以下几方面。1.系统运行现状的评价系统运行现状的评价 决策机会无

15、外乎源于系统运行出了问题、或面临某种危机、或遇决策机会无外乎源于系统运行出了问题、或面临某种危机、或遇到新的发展机会。系统运行现状的分析与评价有利于弄清这些问题。到新的发展机会。系统运行现状的分析与评价有利于弄清这些问题。以便尽早发现决策机会、确定合适的决策方案。以便尽早发现决策机会、确定合适的决策方案。Safety Assessment1.1 评价与系统评价概念评价与系统评价概念2.方案可能产生的后果与影响的评价方案可能产生的后果与影响的评价 在决策最后拍板之前，必须对各方案实施后可能产生的后果和影在决策最后拍板之前，必须对各方案实施后可能产生的后果和影响有一个比较准确的把握，这就是预测的任

16、务。但如何估价这些后果响有一个比较准确的把握，这就是预测的任务。但如何估价这些后果及其产生的影响却是评价的任务。通常，对同一后果和影响，不同的及其产生的影响却是评价的任务。通常，对同一后果和影响，不同的人或同一人在不同的时间会得出不同的评价。然而决策的最终作出还人或同一人在不同的时间会得出不同的评价。然而决策的最终作出还必须依赖于这些评价。一般讲，方案后果和影响的评价涉及三个方面：必须依赖于这些评价。一般讲，方案后果和影响的评价涉及三个方面： （1）后果和影响本身的评价。）后果和影响本身的评价。 （2）后果和影响中各种不确定性的评价。）后果和影响中各种不确定性的评价。 （3）各方面后果和影响及

17、其不确定性的综合评价。）各方面后果和影响及其不确定性的综合评价。Safety Assessment1.1 评价与系统评价概念评价与系统评价概念3.方案开始实施后的跟踪评价及决策完成后的回顾评价方案开始实施后的跟踪评价及决策完成后的回顾评价 决策方案开始实施以后，为了及时发现问题，进一步完善、调整决策方案开始实施以后，为了及时发现问题，进一步完善、调整和控制，经常还需对实施过程和结果进行跟踪评价。和控制，经常还需对实施过程和结果进行跟踪评价。 此外，为了总结经验和深入学习，改进以后的决策，有时还需在此外，为了总结经验和深入学习，改进以后的决策，有时还需在决策实施完毕后进行总结和评价，如事后对某些

18、历史人物或历史事件决策实施完毕后进行总结和评价，如事后对某些历史人物或历史事件的评价等。的评价等。Safety Assessment1.2 评价内容与步骤评价内容与步骤1.2.1 系统评价的内容系统评价的内容 在系统评价过程中，首先要熟悉方案和确定评价指标。在系统评价过程中，首先要熟悉方案和确定评价指标。 评价指标评价指标是指评价条目和要求，是方案期望达到的指标，它包括是指评价条目和要求，是方案期望达到的指标，它包括政策指标、技术指标、经济指标和社会指标等。政策指标、技术指标、经济指标和社会指标等。 根据熟悉方案情况，结合评价指标，应用适当的方法，先进行单根据熟悉方案情况，结合评价指标，应用适

19、当的方法，先进行单项评价，再做综合评价，从而作出对方案优先顺序的结论。单项评价项评价，再做综合评价，从而作出对方案优先顺序的结论。单项评价一般指技术评价、经济评价和社会评价。一般指技术评价、经济评价和社会评价。Safety Assessment1.2 评价内容与步骤评价内容与步骤图1.5 系统评价的内容 系统评价的具体内容分为：系统评价的具体内容分为：系统结构评价、系统结构评价、“系统系统环境环境”影响评价、系统影响评价、系统“输入输入输出输出反馈反馈”评价、系统综合评价。评价、系统综合评价。 Safety Assessment1.2 评价内容与步骤评价内容与步骤一、系统结构评价一、系统结构评

20、价 系统的结构一般都是功能结构，即为了满足人们一定的目的而设系统的结构一般都是功能结构，即为了满足人们一定的目的而设计的。系统的计的。系统的经济性、功能性、动态适应性都与系统结构有很大关系。经济性、功能性、动态适应性都与系统结构有很大关系。可以说，系统结构和特性的评价是最本质的评价。系统结构的评价一可以说，系统结构和特性的评价是最本质的评价。系统结构的评价一般可按图般可按图1.61.6所示的内容来进行。所示的内容来进行。1. 1.系统结构分析系统结构分析 系统结构分析的目的是要弄清和理顺系统构成要素系统结构分析的目的是要弄清和理顺系统构成要素( (子系统子系统) )之间的之间的关系，以便进行分

21、析和评价。关系，以便进行分析和评价。Safety Assessment1.2 评价内容与步骤评价内容与步骤图1.6 系统结构评价模型Safety Assessment1.2 评价内容与步骤评价内容与步骤2. 2.系统标准结构系统标准结构 在不同方案下，系统的功能结构不完全相同。为了对系统结构的在不同方案下，系统的功能结构不完全相同。为了对系统结构的合理性进行评价，必须有一个评判标准，用来作为评价现实系统的参合理性进行评价，必须有一个评判标准，用来作为评价现实系统的参照系，然后对现实系统进行比较评价，从而得出各方案系统构成结构照系，然后对现实系统进行比较评价，从而得出各方案系统构成结构的优劣。然

22、而在现实中，一般不存在标准结构，我们常常只能用某种的优劣。然而在现实中，一般不存在标准结构，我们常常只能用某种理想结构作为准标准结构，如将方案集内各方案结构特性的最优参数理想结构作为准标准结构，如将方案集内各方案结构特性的最优参数构成理想结构。尽管该结构无法实现，但仍可作为我们评价方案集内构成理想结构。尽管该结构无法实现，但仍可作为我们评价方案集内各方案结构优劣的标难。各方案结构优劣的标难。Safety Assessment1.2 评价内容与步骤评价内容与步骤3. 3.系统结构稳定性评价系统结构稳定性评价 系统稳定性表示了系统在其寿命期内可靠地完成应有功能的能力。系统稳定性表示了系统在其寿命期

23、内可靠地完成应有功能的能力。任何系统都会受到来自环境的种种干扰，使系统运行状态发生变化。任何系统都会受到来自环境的种种干扰，使系统运行状态发生变化。在这种情况下，系统要发挥其功能，保持良好的结构及稳定的运行状在这种情况下，系统要发挥其功能，保持良好的结构及稳定的运行状态，就必须具有抗干扰的功能。因此，要使系统按照人们期望的行为态，就必须具有抗干扰的功能。因此，要使系统按照人们期望的行为运行，达到顶期效果，就必须重视系统结构稳定性评价。结构稳定性运行，达到顶期效果，就必须重视系统结构稳定性评价。结构稳定性评价可以从两方面入手：一是分析评价系统自身结构的合理性和稳定评价可以从两方面入手：一是分析评

24、价系统自身结构的合理性和稳定性，二是分析系统寿命周期内环境对系统可能产生的冲击及系统结构性，二是分析系统寿命周期内环境对系统可能产生的冲击及系统结构对这种冲击的弹性。然后，综合两方面评价，做出系统整体的结构稳对这种冲击的弹性。然后，综合两方面评价，做出系统整体的结构稳定性评价。定性评价。Safety Assessment1.2 评价内容与步骤评价内容与步骤4. 4. 系统结构合理性评价系统结构合理性评价 结构决定功能。结构的合理性评价方法有三种；一是利用系统动结构决定功能。结构的合理性评价方法有三种；一是利用系统动力学模型或其它模型进行模拟；二是试制出力学模型或其它模型进行模拟；二是试制出“产

25、品产品”进行试运行；三进行试运行；三是与标准结构进行对比分析。是与标准结构进行对比分析。Safety Assessment1.2 评价内容与步骤评价内容与步骤二、二、“系统系统环境环境”影响评价影响评价 任何系统的形成和运行都会受到其所处环境的影响和制约。系统任何系统的形成和运行都会受到其所处环境的影响和制约。系统本身条件的好坏、调控机制是否灵活，直接影响到系统的适应能力和本身条件的好坏、调控机制是否灵活，直接影响到系统的适应能力和生存能力。因此，生存能力。因此，“系统一环境系统一环境”影响的评价也涉及列系统结构的评影响的评价也涉及列系统结构的评价，可以与之结合进行，一般可分为两步：价，可以与

26、之结合进行，一般可分为两步：Safety Assessment1.2 评价内容与步骤评价内容与步骤1.“1.“系统系统环境环境”影响的识别影响的识别 罗列出所有罗列出所有“系统系统环境环境”影响关系，并分析清楚其主次关系，影响关系，并分析清楚其主次关系，弄清各种关系的轻重缓急程度及其影响的状况。例如，是明显的还是弄清各种关系的轻重缓急程度及其影响的状况。例如，是明显的还是潜在的，是眼下可以分析清楚的还是暂时无法分析清楚的，以便找出潜在的，是眼下可以分析清楚的还是暂时无法分析清楚的，以便找出主要的和关键的影响关系、分析系统在这些影响关系作用下的适应性主要的和关键的影响关系、分析系统在这些影响关系

27、作用下的适应性能。能。Safety Assessment1.2 评价内容与步骤评价内容与步骤2. 2. 系统的环境适应性评价系统的环境适应性评价 通过通过“系统系统环境环境”影响关系的识别，可以进一步认识系统与环影响关系的识别，可以进一步认识系统与环境的作用机制，在此基础上，可对各方案的环境适应性作出评价。系境的作用机制，在此基础上，可对各方案的环境适应性作出评价。系统的环境适应性是系统的运行特性之一，对其评价必须基于对环境发统的环境适应性是系统的运行特性之一，对其评价必须基于对环境发展趋势的把握和对系统结构性能的了解。一般，系统与环境的关系有展趋势的把握和对系统结构性能的了解。一般，系统与环

28、境的关系有以下几种情况：以下几种情况： （1 1）系统运行对环境具有改造性。系统保持良好运行状态，不但能）系统运行对环境具有改造性。系统保持良好运行状态，不但能适应环境的变化，而且对环境有良好的改造作用。这种关系可称为相适应环境的变化，而且对环境有良好的改造作用。这种关系可称为相生。生。Safety Assessment1.2 评价内容与步骤评价内容与步骤（2 2）系统能适应环境的变化。系统的建设和运行与环境的发展相辅）系统能适应环境的变化。系统的建设和运行与环境的发展相辅相成，协调一致，运行状态良好。这种关系可称为相适。相成，协调一致，运行状态良好。这种关系可称为相适。（3 3）系统对环境起

29、消极作用。系统的运行与环境的变化不协调，以）系统对环境起消极作用。系统的运行与环境的变化不协调，以致相互矛盾和制约。我们称这种关系为相克。致相互矛盾和制约。我们称这种关系为相克。（4 4）系统的运行不但不适应环境的变化，而且对环境起破坏作用。）系统的运行不但不适应环境的变化，而且对环境起破坏作用。它的运行加剧了环境的劣变。这种关系称之为相斥。它的运行加剧了环境的劣变。这种关系称之为相斥。Safety Assessment1.2 评价内容与步骤评价内容与步骤三、系统三、系统“输入一输出一反馈输入一输出一反馈”评价评价 1. 1. 系统的输入、输出指标评价系统的输入、输出指标评价 在现行的评价方法

30、中，一般都是按输入量与输出量之间的比值（或差值）在现行的评价方法中，一般都是按输入量与输出量之间的比值（或差值）来反映系统的转换机能，即系统的有效性。关于输入、输出评价方法本身似来反映系统的转换机能，即系统的有效性。关于输入、输出评价方法本身似乎争议不大。对同一问题产生不同评价结论的原因主要在于输入和输出流量乎争议不大。对同一问题产生不同评价结论的原因主要在于输入和输出流量（费用与效益）的划分以及对于动态性考虑的差异上。现有方法大多是以（费用与效益）的划分以及对于动态性考虑的差异上。现有方法大多是以折折现率和敏感性分析现率和敏感性分析来考虑系统的动态性能的。由于系统的输入和输出量发生来考虑系统

31、的动态性能的。由于系统的输入和输出量发生的时间不同，采用不同折现率必然出现不同的结论。但问题的关键还在于输的时间不同，采用不同折现率必然出现不同的结论。但问题的关键还在于输入、输出量的辨识和处理上。入、输出量的辨识和处理上。Safety Assessment1.2 评价内容与步骤评价内容与步骤 输入、输出流量的性质不外乎有三种：能准确定量计算；可输入、输出流量的性质不外乎有三种：能准确定量计算；可定量分析，但无法准确估算；无法定量计算。定量分析，但无法准确估算；无法定量计算。 对于能准确定量计算的指标，可认真收集资料进行计算；对对于能准确定量计算的指标，可认真收集资料进行计算；对第二种情形中的

32、指标可采用半定量或集值统计的方法进行评价；第二种情形中的指标可采用半定量或集值统计的方法进行评价；对无法定量计算的指标可采用专家咨询的方法进行分析，在必对无法定量计算的指标可采用专家咨询的方法进行分析，在必要时也可利用打分等方法进行半定量的估价。要时也可利用打分等方法进行半定量的估价。Safety Assessment1.2 评价内容与步骤评价内容与步骤2. 2. 系统反馈性能评价系统反馈性能评价 反馈是系统动态性能的一种具体表现，它影响系统的输入并通过系统转反馈是系统动态性能的一种具体表现，它影响系统的输入并通过系统转换机制影响到系统的输出。反馈机制不健全的系统，由于外部环境的某种变换机制影

33、响到系统的输出。反馈机制不健全的系统，由于外部环境的某种变化可能使系统运行状态恶化甚至崩溃；而反馈机制健全的系统，却具有较强化可能使系统运行状态恶化甚至崩溃；而反馈机制健全的系统，却具有较强的自适应性和稳定性，从而保证整个系统正常运转。因此，应重视反馈性能的自适应性和稳定性，从而保证整个系统正常运转。因此，应重视反馈性能的评价。的评价。 反馈性能评价、结构性能评价及环境适应性评价是相关的，应综合考虑。反馈性能评价、结构性能评价及环境适应性评价是相关的，应综合考虑。 Safety Assessment1.2 评价内容与步骤评价内容与步骤四、系统综合评价四、系统综合评价 综合评价所要解决的问题，是

34、如何把上述对系统各方面的综合评价所要解决的问题，是如何把上述对系统各方面的评价综合起来，向决策者提供清晰的评价结论。评价综合起来，向决策者提供清晰的评价结论。Safety Assessment1.2 评价内容与步骤评价内容与步骤1.2.2 系统评价的分类系统评价的分类 系统的评价可以分阶段进行，特别是对于复杂的大系统的开发，各系统的评价可以分阶段进行，特别是对于复杂的大系统的开发，各个重要环节都要作出评价工作。系统评价可以按以下几种方式分类。个重要环节都要作出评价工作。系统评价可以按以下几种方式分类。1. 1. 按评价项目分按评价项目分（1 1）目标评价。确定系统的目标后，要进行目标评价，以确

35、定目标是）目标评价。确定系统的目标后，要进行目标评价，以确定目标是否合理。否合理。（2 2）方案评价。制定决策方案之后，要进行方案评价，选择最忧方案。）方案评价。制定决策方案之后，要进行方案评价，选择最忧方案。（3 3）设计评价。）设计评价。 （4 4）计划评价。）计划评价。 （5 5）规划评价。）规划评价。Safety Assessment1.2 评价内容与步骤评价内容与步骤2. 2. 按评价的时间顺序分按评价的时间顺序分（1 1）事前评价。）事前评价。在着手系统开发之前进行的评价，是为了提高系统成在着手系统开发之前进行的评价，是为了提高系统成果而合理决定计划的有效方法。果而合理决定计划的有

36、效方法。（2 2）中间评价。）中间评价。在开发过程中进行的评价，是在系统研制途中用来判在开发过程中进行的评价，是在系统研制途中用来判断是否有必要变更目标和为及时采取对策而进行管理的有效手段。断是否有必要变更目标和为及时采取对策而进行管理的有效手段。（3 3）事后评价。）事后评价。在开发完成之后进行的评价，是在定量地掌握已经达在开发完成之后进行的评价，是在定量地掌握已经达到目标的成果同时，确认目标以外的成果的良好方法。到目标的成果同时，确认目标以外的成果的良好方法。（4 4）跟踪评价。）跟踪评价。是用来研究真实效果，对整个系统进行评价的一种方是用来研究真实效果，对整个系统进行评价的一种方法。法。

37、 Safety Assessment1.2 评价内容与步骤评价内容与步骤图1.7 评价的四阶段Safety Assessment1.2 评价内容与步骤评价内容与步骤3. 3. 按评价的内容分按评价的内容分（1 1）技术评价。）技术评价。技术评价是围绕系统功能来进行的，评定系统方案能技术评价是围绕系统功能来进行的，评定系统方案能否实现所需的功能及实现程度。否实现所需的功能及实现程度。（2 2）经济评价。）经济评价。是围绕经济效益进行的，内容主要是以成本为代表的是围绕经济效益进行的，内容主要是以成本为代表的经济可行性分析。经济可行性分析。（3 3）社会评价。）社会评价。是针对系统给社会带来的利益或

38、影响而进行的评价。是针对系统给社会带来的利益或影响而进行的评价。（4 4）综合评价。）综合评价。是在上述三个方面评价的基础上，对系统方案价值的是在上述三个方面评价的基础上，对系统方案价值的大小所做的综合评定。大小所做的综合评定。Safety Assessment1.2 评价内容与步骤评价内容与步骤1.2.3 系统评价的步骤系统评价的步骤一、系统评价的原则和范式一、系统评价的原则和范式1评价原则评价原则（1）要保证评价的客观性。）要保证评价的客观性。评价的目的是为了决策，而评价的评价的目的是为了决策，而评价的质量直接影响着决策的正确性。因此，要保证评价的客观性。质量直接影响着决策的正确性。因此，

39、要保证评价的客观性。必须注意评价资料的全面性、可靠性和正确性，防止评价人员必须注意评价资料的全面性、可靠性和正确性，防止评价人员的倾向性，评价人员的组成要具有代表性等等。的倾向性，评价人员的组成要具有代表性等等。 Safety Assessment1.2 评价内容与步骤评价内容与步骤（2）要保证方案的可比性。）要保证方案的可比性。替代方案在保证实现系统的基本功能上要替代方案在保证实现系统的基本功能上要有可比性。个别功能突出或方案内容新，只能说明其相关方面，不能有可比性。个别功能突出或方案内容新，只能说明其相关方面，不能代替其它方面。要进行综合评比，不能用代替其它方面。要进行综合评比，不能用“陪

40、衬陪衬”方案，从而失去评方案，从而失去评价的真意。价的真意。（3）评价指标要成系统。）评价指标要成系统。评价指标体系是由若干个单项评价指标（按评价指标体系是由若干个单项评价指标（按性质又划分为大类）组成的整体。它应当包括系统目标所涉及的一切性质又划分为大类）组成的整体。它应当包括系统目标所涉及的一切方面，而且对定性问题要有恰当的评价指标，以保证评价不出现片面方面，而且对定性问题要有恰当的评价指标，以保证评价不出现片面性。性。（4）评价指标必须与国家的方针、政策、法令的要求相一致。）评价指标必须与国家的方针、政策、法令的要求相一致。Safety Assessment1.2 评价内容与步骤评价内容

41、与步骤2. 评价范式评价范式 评价是一个比较的过程。在这个过程中，我们把要评价的事评价是一个比较的过程。在这个过程中，我们把要评价的事物与一定的对象进行比较，从而决定该事物的价值，或者说确物与一定的对象进行比较，从而决定该事物的价值，或者说确定其在事物系统之中的地位。因此，任何评价都可按照图定其在事物系统之中的地位。因此，任何评价都可按照图1.8所所示的范式进行，其中示的范式进行，其中x为被评价的对象（元素、系统）。为被评价的对象（元素、系统）。图1.8 评价的范式Safety Assessment1.2 评价内容与步骤评价内容与步骤二、系统评价的步骤二、系统评价的步骤 系统评价的步骤是有效地

42、进行评价的保证，它一般包括以下系统评价的步骤是有效地进行评价的保证，它一般包括以下几项：几项：1. 1. 明确系统目标，熟悉系统方案明确系统目标，熟悉系统方案 为了进行科学的定量评价，必须反复调查了解建立这个系统为了进行科学的定量评价，必须反复调查了解建立这个系统的目标，以及为完成系统目标所考虑的具体事项，熟悉系统方的目标，以及为完成系统目标所考虑的具体事项，熟悉系统方案，进一步分析和讨论已经考虑到的各个因素。案，进一步分析和讨论已经考虑到的各个因素。2. 2. 分析系统要素分析系统要素 根据评价的目标，集中收集有关的资料和数据，对组成系统根据评价的目标，集中收集有关的资料和数据，对组成系统的

43、各个要素及系统的性能特征进行全面分析，找出评价的项目。的各个要素及系统的性能特征进行全面分析，找出评价的项目。Safety Assessment1.2 评价内容与步骤评价内容与步骤3. 3. 确定评价指标体系确定评价指标体系 指标是衡量系统总体目标的具体标志。对于所评价的系统，指标是衡量系统总体目标的具体标志。对于所评价的系统，必须建立能对照和衡量各个方案的统一尺度，即评价指标体系。必须建立能对照和衡量各个方案的统一尺度，即评价指标体系。评价指标体系必须科学地、客观地、尽可能全面地考虑各种因评价指标体系必须科学地、客观地、尽可能全面地考虑各种因素，包括组成系统的主要因素及有关系统性能、费用、效

44、果等素，包括组成系统的主要因素及有关系统性能、费用、效果等方面，这样就可以明确地对各方案进行对比和评价，并对其缺方面，这样就可以明确地对各方案进行对比和评价，并对其缺陷筹划适当的对策。陷筹划适当的对策。Safety Assessment1.2 评价内容与步骤评价内容与步骤4. 4. 制定评价结构和评价准则制定评价结构和评价准则 要对所确定的指标进行定量化处理。有些指标本来就有定量的数要对所确定的指标进行定量化处理。有些指标本来就有定量的数字，有些原来只有定性的描述，这就要进行分析研究，制定和选择评字，有些原来只有定性的描述，这就要进行分析研究，制定和选择评价的定量依据。评分就是最常用的一种简单

45、方法，即按具体情况人为价的定量依据。评分就是最常用的一种简单方法，即按具体情况人为地分成若干等级、进行相对比较。地分成若干等级、进行相对比较。 每一个具体指标可能是几个指标的综合，这是由评价系统的特性每一个具体指标可能是几个指标的综合，这是由评价系统的特性和评价指标体系的结构所决定的。在评价时要制定评价结构。和评价指标体系的结构所决定的。在评价时要制定评价结构。 由于各指标的评价尺度不一样，对于不同的指标，很难在一起比由于各指标的评价尺度不一样，对于不同的指标，很难在一起比较。因此，必须将指标体系中的指标规范化，制定出评价准则，根据较。因此，必须将指标体系中的指标规范化，制定出评价准则，根据指

46、标所反映要素的状况，确定各指标的结构和权重。指标所反映要素的状况，确定各指标的结构和权重。 Safety Assessment1.2 评价内容与步骤评价内容与步骤5. 5. 评价方法的确定评价方法的确定 评价方法根据对象的具体要求不同而有所不同。总的来说，要按评价方法根据对象的具体要求不同而有所不同。总的来说，要按系统目标与系统分析结果、费用、效果的测定方法、成功可能性的讨系统目标与系统分析结果、费用、效果的测定方法、成功可能性的讨论方法以及评价准则等确定。论方法以及评价准则等确定。6. 6. 单项评价单项评价 单项评价是就系统的某一特殊方面进行详细地评价，以突出系统单项评价是就系统的某一特殊

47、方面进行详细地评价，以突出系统的特征。单项评价不能解决最优方案的判定问题，只有综合评价才能的特征。单项评价不能解决最优方案的判定问题，只有综合评价才能解决最优方案或方案优先顺序的确定问题。解决最优方案或方案优先顺序的确定问题。Safety Assessment1.2 评价内容与步骤评价内容与步骤图1.8 系统评价的步骤7. 7. 综合评价综合评价 按照评价标准，在单项评价的基础按照评价标准，在单项评价的基础上，从不同的观点和角度对系统进行全上，从不同的观点和角度对系统进行全面的评价。面的评价。 综合评价就是利用模型和各种资料，综合评价就是利用模型和各种资料，用技术经济的观点对比各种可行方案，用

48、技术经济的观点对比各种可行方案，考虑成本与效益的关系，权衡各方案的考虑成本与效益的关系，权衡各方案的利弊得失，从系统的整体观点出发，综利弊得失，从系统的整体观点出发，综合分析问题，选择适当而且可能实现的合分析问题，选择适当而且可能实现的优化方案。优化方案。 Safety Assessment1.2 评价内容与步骤评价内容与步骤三、指标体系的分类三、指标体系的分类评价指标体系通常可考虑如下几大类：评价指标体系通常可考虑如下几大类：（1）政策性指标）政策性指标。包括政府的方针、政策、法令，以及法律约束和发展规划。包括政府的方针、政策、法令，以及法律约束和发展规划等方面的要求，这对国防或国计民生方面

49、的重大项目或大型系统尤为重要。等方面的要求，这对国防或国计民生方面的重大项目或大型系统尤为重要。（2）技术性指标）技术性指标。包括产品的性能、寿命、可靠性、安全性等。包括产品的性能、寿命、可靠性、安全性等。（3）经济性指标）经济性指标。包括方案成本、效益、建设周期、回收期等。包括方案成本、效益、建设周期、回收期等。（4）社会性指标）社会性指标。包括社会福利、社会节约、综合发展、污染、生态环境等。包括社会福利、社会节约、综合发展、污染、生态环境等。（5）资源性指标）资源性指标。（6）时间性指标）时间性指标。 以上是考虑的大类指标，每一个指标又可以包含许多小类指标。每一个以上是考虑的大类指标，每一

50、个指标又可以包含许多小类指标。每一个具体指标可能由几个指标综合反映，这样形成了指标树，由这个指标树就构具体指标可能由几个指标综合反映，这样形成了指标树，由这个指标树就构成了系统评价指标体系。成了系统评价指标体系。 Safety Assessment1.2 评价内容与步骤评价内容与步骤四、指标体系的确定原则四、指标体系的确定原则（1）系统性原则。）系统性原则。指标体系应能全面地反映被评价对象的综合情况，指标体系应能全面地反映被评价对象的综合情况，从中抓住主要因素，既能反映直接效果，又要反映间接效果，以保证从中抓住主要因素，既能反映直接效果，又要反映间接效果，以保证综合评价的全面性和可信度。综合评

51、价的全面性和可信度。（2）可测性原则。）可测性原则。指标涵义明确，数据资料收集方便，计算简单，易指标涵义明确，数据资料收集方便，计算简单，易于掌握。于掌握。（3）定量指标与定性指标结合使用原则。）定量指标与定性指标结合使用原则。既可使评价具有客观性，便既可使评价具有客观性，便于数学模型处理，又可弥补单纯定量评价的不足及数据本身存在的某于数学模型处理，又可弥补单纯定量评价的不足及数据本身存在的某些缺陷。些缺陷。（4）绝对量指标与相对量指标结合使用原则。绝对量指标与相对量指标结合使用原则。绝对量指标反映总量及绝对量指标反映总量及规模水平，相对量指标反映在某些方面的强度（或密度）。规模水平，相对量指

52、标反映在某些方面的强度（或密度）。Safety Assessment1.2 评价内容与步骤评价内容与步骤四、指标体系的确定原则四、指标体系的确定原则（5）指标之间应尽可能避免显见的包含关系。）指标之间应尽可能避免显见的包含关系。对隐含的相关关系，要对隐含的相关关系，要在模型中以适当的方法消除。在模型中以适当的方法消除。（6）指标的选择要保持同趋势化，以保证可比性。）指标的选择要保持同趋势化，以保证可比性。（7）指标设置要有重点。）指标设置要有重点。重要方面的指标可设置得密些、细些，次要重要方面的指标可设置得密些、细些，次要方面的指标可设置得稀些、粗些，以简化工作。方面的指标可设置得稀些、粗些，

53、以简化工作。 （8）指标要有层次性。）指标要有层次性。这样，为衡量方案的效果和确定指标的权重提这样，为衡量方案的效果和确定指标的权重提供方便。供方便。Safety Assessment1.2 评价内容与步骤评价内容与步骤 这些原则，在具体应用中可能会出现一定的矛盾，一般可作如下处这些原则，在具体应用中可能会出现一定的矛盾，一般可作如下处理：理： （1）评价的有效性和评价的简便性相矛盾。）评价的有效性和评价的简便性相矛盾。应在满足有效性的前提应在满足有效性的前提下，尽可能使评价简便，而不是反而求之。下，尽可能使评价简便，而不是反而求之。 （2）指标的系统性与指标的可获得性相矛盾。）指标的系统性与

54、指标的可获得性相矛盾。在建立指标体系时，在建立指标体系时，对若干与评价关系甚大的指标，虽然目前尚无法获得数据，仍将其作对若干与评价关系甚大的指标，虽然目前尚无法获得数据，仍将其作为建议指标提出，以保证评价指标体系的系统性和科学性。为建议指标提出，以保证评价指标体系的系统性和科学性。 （3）指标的精确性与指标的可信度问题。）指标的精确性与指标的可信度问题。评价应尽可能精确，但有评价应尽可能精确，但有些指标目前不能做到很精确。与其为了追求精确而假设数据，或因得些指标目前不能做到很精确。与其为了追求精确而假设数据，或因得不到数据而将一些指标舍去，不如由专家根据经验做定性的描述，给不到数据而将一些指标

55、舍去，不如由专家根据经验做定性的描述，给某些指标以质的规定更为可信。某些指标以质的规定更为可信。Safety Assessment1.2 评价内容与步骤评价内容与步骤1.2.4 评价系统的进一步分析评价系统的进一步分析 评价工作是一种跨学科、跨层次的综合性工作，评价工作是一种跨学科、跨层次的综合性工作，它既要求社会科它既要求社会科学、经济学与自然科学的综合，又要求决策层、执行层与研究层的结学、经济学与自然科学的综合，又要求决策层、执行层与研究层的结合。另外，合。另外，系统评价本身也有许多固有的因难，即单项评价易，综合系统评价本身也有许多固有的因难，即单项评价易，综合评价难；定性评价易，定量评价

56、难；硬指标评价难；定性评价易，定量评价难；硬指标( (科技、生产、水平科技、生产、水平) )评价评价易，软指标易，软指标( (社会、经济、组织社会、经济、组织) )评价难。评价难。 为此，进一步对系统评价的理论开展深入研究，并结合社会经济为此，进一步对系统评价的理论开展深入研究，并结合社会经济发展的实际状况作出评价理论和方法的应用，还需要人们继续做出努发展的实际状况作出评价理论和方法的应用，还需要人们继续做出努力。力。 Safety Assessment1.3 系统评价方法系统评价方法 系统评价是一系列科学的定量的论证工作。目前国内外使用系统评价是一系列科学的定量的论证工作。目前国内外使用的的

57、评价方法评价方法很多，但大体上很多，但大体上可分成以下几类：可分成以下几类： 专家评价法，经济分析法，运筹学方法专家评价法，经济分析法，运筹学方法( (包括多目标决策方法包括多目标决策方法) ) 和其它数学方法。和其它数学方法。 其中每一类方法中又可分成许多具体的算法。其中每一类方法中又可分成许多具体的算法。Safety Assessment1.3 系统评价方法系统评价方法1.3.1 经济分析法简介经济分析法简介 经济分析法也可称为单项评价方法，主要指经济评价方法和技术评经济分析法也可称为单项评价方法，主要指经济评价方法和技术评价方法，就是利用经济理论和技术水平对系统的某个方面作出定量评价方法

58、，就是利用经济理论和技术水平对系统的某个方面作出定量评价的方法。价的方法。 经济评价方法主要有价值分析法、成本效益法、利润评价法等；技经济评价方法主要有价值分析法、成本效益法、利润评价法等；技术评价方法主要有可行性分析、可靠性评价等。术评价方法主要有可行性分析、可靠性评价等。Safety Assessment1.3 系统评价方法系统评价方法1.3.2 专家咨询法专家咨询法 专家咨询法就是在评价过程中收集有关专家的意见，通过规专家咨询法就是在评价过程中收集有关专家的意见，通过规范化程序，从中提取出最一致的信息，利用专家的知识、经验范化程序，从中提取出最一致的信息，利用专家的知识、经验来对系统进行

59、评价，也叫专家评估法。来对系统进行评价，也叫专家评估法。Safety Assessment1.3 系统评价方法系统评价方法一、逐步形成群的意见方法一、逐步形成群的意见方法 所谓群是指一组专家、一个团体中的成员组等。所谓群是指一组专家、一个团体中的成员组等。 逐步形成群的意见方法逐步形成群的意见方法简称为简称为NGTNGT（Nominal Group Nominal Group TechniqueTechnique）法，它是对一决策问题发动群的成员提意见，然后）法，它是对一决策问题发动群的成员提意见，然后按一定程序集结成员的意见，以作出群的判断的方法。按一定程序集结成员的意见，以作出群的判断的方

60、法。 这种方法适合规模较小的群，以这种方法适合规模较小的群，以5959个成员为宜；个成员为宜； 群的规模太大则收集意见和讨论问题都不方便。群的规模太大则收集意见和讨论问题都不方便。Safety Assessment1.3 系统评价方法系统评价方法实施实施NGT法的步骤有以下六步：法的步骤有以下六步：第一步第一步 每个成员在安静的环境下写出自己的意见；每个成员在安静的环境下写出自己的意见；第二步第二步 组织者不分先后地听取并记录这些意见；组织者不分先后地听取并记录这些意见；第三步第三步 集体逐条讨论这些意见，弄清楚它们的意义；集体逐条讨论这些意见，弄清楚它们的意义；第四步第四步 对归纳意见所形成