（技术经济及管理专业论文）系统评价方法的比较研究.pdf

河海大学硕士学位论文 摘要 评价的思想已经深入到社会的各方面，在经济管理活动中，系统评价方法 更是得到广泛的应用。评价方法在得到快速发展的同时，也遇到了一些问题，如 评价方法建立的原则模糊不清、缺少不同评价方法之间的综合研究、对不同评价 方法的适用性论述不够等等。评价方法应用时出现的这些问题，以及不断出现的 新的评价方法对评价理论的扩充，使得对系统评价做全面的系统性总结成为迫切 的需要，本文研究的出发点正是基于此。 文章对系统评价的指标体系理论、系统评价的权重理论、系统评价方法的分 类及特性、评价结果的敏感性等方面做了研究。论述了评价与价值的关系，指标 选取的原则和建立指标体系的方法；对评价中权重的选取与构造进行了探讨，对 常用评价方法的构造原理、各种评价方法的特点、评价方法的适用性进行了研究； 对不同的指标转换方式对评价模型的影响进行了分析，对系统评价方法进行了新 的归纳。 在研究过程中，针对各种评价方法在应用时出现的问题进行分析，同时归纳 对比各评价方法原理上的差异。通过对不同评价方法原理上的探讨，提出了选取 评价方法和判断评价合理性的一般准则。不同评价方法对同一事物进行评价时， 评价结果可能是不同的，这种不同并不说明评价方法和评价理论存在问题，而恰 恰是这种不同，反映了人的价值观念，反映了人的主观能动性。在对于不同评价 方法的选取上，只要评价系统的数据特征符合评价方法的要求，都可以用来进行 评价。评价方法的应用具有灵活性，不会局限于某一领域。 关键词：系统评价价值指标体系评价方法权重敏感性 河海大学硕士学位论文 a b s t r a c t t h et h o u g h to fa s s e s s m e n th a sa l r e a d yp e n e t r a t e di n t ot h ed i f f e r e n t f i e l d so f t h es o c i e t y i ne c o n o m i cm a r l a g e m e n ta c t i v i t y , s y s t e me v a l u a t i o n m e t h o di s w i d e l yu s e d w h i l ei tg e t sr a p i dd e v e l o p m e n t , a s s e s s m e n t m e t h o dh a v em e ts o m ec l u e s t i o n st o o s u c ha se v a l u a f i o np r i n c i p l et h a t m e t h o ds e t u pi l l e g i b l y , l a c ko fc o m p r e h e n s i v er e s e a r c ho nd i f f e r e n t m e t h o d s ，i n c o m p l e t ed i s c u s s i o nt ot h es u i t a b i l i t y o fd i f f e r e n ta p p r a i s a l m e t h o d s o m eq u e s f i o n sr o s eb yu s i n ga s s e s s m e n tm e t h o d ，a n dt h e e x p a n s i o nt o t h et h e o r yo ft h ee m e r g e n c eo fn e we v a l u a t i o nm e t h o d ， m a k ei t u r g e n tt os u m m a r i z et h ea s s e s s m e n tm e t h o dc o m p r e h e n s i v e l y t h e s t a r t i n gp o i n tt h a tt h i st o 越s t u d i e si si u s tb e c a u s eo f 廿1 i s t h e o r e t i c a lq u e s t i o nt ot h ei n d e xs y s t e mo ns y s t e ma p p r a i s a l 。w e i g h t t h e o r y , c l a s s i f i c a t i o n ，c h a r a c t e r i s t i c o f a p p r a i s em e t h o d ，a n d t h e s e n s i t i v e n e s st ot h er e s u l ti na s s e s s m e n ta r et h ed o m a i n ss t u d y i n gi nt h i s a r t i c l e i td i s c u s s e s 也ep r i n c i p l eo fc h o o s i n gi n d i c a t o r s y s t e m t h e m e t h o do f e s t a b l i s h i n g i n d e x s y s t e m a n dt h e r e l a t i o n s h i p b e t w e e n a s s e s s m e n ta n dv a l u e ；i nt h i sa r t i c l e ，w er e s e a r c ho nt h et e c t o n i cm e t h o d o ft h ew e i g h t ，t h et e c t o n i c p r i n c i p l e ，t h ec h a r a c t e r i s t i c s ，s u i t a b i l i t yo f v a r i o u sk i n d so fe v a l u a t i o nm e t h o d ；a n da n a l y z et h ei n f l u e n c et ot h e e v a l u a t i o nm o d e lw h i l eu s i n gd i f f e r e n ti n d e x e s ，t h e n g e t n e ws u m m i n g ；t o a p p r a i s em e t h o d i nt h ec o u r s eo fs t u d y i n g ，w ea n a l y z et h e p r o b l e m st h a tv a r i o u s k i n d so fa s s e s s m e n tm e t h o d sc a u s e da n dc o m p a r ew i t ht h ed i f f e r e n c e b e t w e e nt h ep r i n c i p l e so fm e t h o d sa tt h es a m et i m e b yd i s c u s s i n go n a s s e s s m e n t p r i n c i p l eo f d i f f e r e n tm e t h o d ，w e p u tf o r w a r dt h ec r i t e r i o nt o c h o o s em e t h o do f a p p r a i s i n ga n dt h es t a n d a r dt oj u d g et h er a f t o n a l i t yt o a s s e s s m e n tm e t h o d n l er e s u l t sm a yb ed i f f e r e n tw h e nw eu s ed i f f e r e n t m e t h o d st oa p p r a i s et h es a m et h i i l g b u ti td o e sn o t p r o v et h a tt h e r ei s s o m ep r o b l e mi nt h em e t h o da n dt h e p r i n c i p l e t 址s d i f f e r e n c eh a s e x a c t l yr e f l e c t e dp e o p l e sv a l u ea n ds u b j e c f i v ei n i t i m i v e o nc h o o s i n g a s s e s s m e n t m e t h o d ，s ol o n g a st h ed a t a p r o p e r t i e sb ec a t e r f o rt h ed e m a n d w h i c he v a i u a t i o nm e t h o dn e e d g a l l i tb eu s e dt o a p p r a i s e a s t h e a p p l i c a t i o no f e v a l u a t i o nm e t h o dh a sf l e x i b i l i t y , i tw i l ln o tb ec o n f i n e dt o ac e r t a i nf i e l d k e y w o r d ：s y s t e me v a l u a t i o n a s s e s s m e n t v a l u ei n d i c a t o r s y s t e m e v a l u a t i o n a s s e s s m e n tm e t h o d w e i g h t s e n s i t i v e n e s s 1 1 学位论文独创性声明： 本人所呈交的学位论文是我个人在导师指导下进行的研究工作 及取得的研究成果。尽我所知，除了文中特别加以标注和致谢的地方 外，论文中不包含其他人已经发表或撰写过的研究成果。与我一同工 作的同事对本研究所做的任何贡献均已在论文中作了明确的说明并 表示了谢意。如不实，本人负全部责任。 论文作者( 签名) ：i 鱼盘鲞2 0 0 5 年己月加日 学位论文使用授权说明 河海大学、中国科学技术信息研究所、国家图书馆、中国学术期 刊( 光盘版) 电子杂志社有权保留本人所送交学位论文的复印件或电 子文档，可以采用影印、缩印或其他复制手段保存论文。本人电子文 档的内容和纸质论文的内容相一致。除在保密期内的保密论文外，允 许论文被查阅和借阅。论文全部或部分内容的公布伯括刊登) 授权河 海大学研究生院办理。 论文作者( 签名) ： i 皇凸垒 2005r 年2 月扫日 ，自 河海大学硕士学位论文 1 1 研究的意义 第一章导言 评价已经广泛深入到社会的各个方面，从企业竞争力评价、人员素质评价、 高等院校学科建设评价、环境状况评价、项目实施效果评价，到综合国力评价、 经济发展水平评价，评价活动涉及到生产生活的方方面面。评价方法从单一属性、 单一指标评价，发展到多属性、多指标综合评价，从定性的判定与评价发展到定 量的、模型化评价，评价方法得到迅速的扩展。 评价方法有德尔菲法、层次分析法、主成分分析法、因子分析法、数据包络 分析法、技术经济分析法、模糊分析法、灰色系统分析法、神经网络分析法、小 波分析法等等，评价思想的广泛应用使得传统的评价方法得到发展，而新的评价 方法也不断的涌现。众多评价方法丰富了系统评价的适用性。使人们可以在更广 泛的范围内选择某种方法对系统做出分析和认识，但是，评价问题发展的无序， 对评价的效率和权威性提出了挑战，暴露出系统评价在方法论层面上缺少统一指 导准则这一现实。 邱东【l 】教授早在多年前就指出了评价理论研究与应用实践之间存在的一些 问题： ( 1 ) 在社会经济统计领域，多指标综合评价方法还没有得到足够的重视； ( 2 ) 在理论发展与实践之间还存在着空白： ( 3 ) 各学科往往是孤军作战，学科之间联系较少。 事物的复杂性决定了不可能构造出一个统一“尺度”的、通用的评价方法， 但也不能任由评价问题的无序演变，应该在一般意义上加强对评价问题应用基础 理论研究。通过对评价方法的科学分类，可以增强评价问题的逻辑性与可靠性， 加深对评价方法建立原理的认识，掌握评价方法建立的实质，也有利于进一步将 测度理论等引入评价问题，为更好地运用数学方法深入研究评价问题打下基础。 1 2 存在的问题 ( 1 ) 系统评价理论的研究，经过众多学者和实际应用者的同共努力，有了 长足的发展。但是评价工作者对评价原理方面的含糊，往往造成评价结论的不科 学。就拿应用广泛的层次分析法来说，在构造判断矩阵时，其标度并非是按照 1 - 9 标度方法设计的，而检验时却生搬硬套肋砂教授1 - 9 标度的r ，值进行一致 性检验，这种检验的结果并不能真正反映所构造判断矩阵的一致性问题。此外， 其它评价方法应用时存在的一些问题也没有引起评价工作者的足够重视。 河海大学硕士学位论文 ( 2 ) 评价方法的求新、复杂化越来越严重。新的评价方法的出现往往受到 人们的追捧，但是，新方法是否能够真正科学地评价系统的性能，其适用性如何， 都是必须要弄清楚的。人们普遍有这样的心理，认为越是新颖的、复杂的评价方 法，就越能代表评价结论的科学性。因此，像灰色评价方法、神经网络分析方法、 小波网络分析方法、熵值分析方法、遗传算法等评价方法近些年来大有愈演愈烈 的势头。然而，评价的目的在于揭示一种价值，进行人的价值判断。复杂的方法 是否就能揭示系统的价值所在，复杂的数学过程是否真正和人的思考模式一致， 各种评价方法之间的优劣如何判定，这些都需要有一个评价的原则。 ( 3 ) 在实际的应用中，指标体系的选取存在不科学的地方，缺少理论指导。 用不科学的指标体系进行评价，即使评价方法应用正确，评价结果也是不可信的， 产生的结果就是用科学的方法得出非科学的结论。 ( 4 ) 理论研究与实际应用之间存在一定的差距。从收集到的众多文献中可 以发现一个共性的现象：一方面是实际应用的繁荣，另方面是理论研究的欠缺。 许多学者在评价方法的研究上都遵循着一种思路，针对某类问题构造出一种新的 方法，然后用一个例子来说明其方法的有效性，并未深入地探究评价方法在理论 上的适用性，缺少总结性的研究。 ( 5 ) 系统评价方法缺少最新的系统性的总结，各个专业领域各自发展，彼 此自自关联性较差。包括统计学科领域、管理决策学科领域、系统工程学科领域对 评价方法都有研究，但各自的侧重点不同。由于专业背景及研究的出发点不同， 使得系统评价还处于一种零乱的分散状态，没有形成统一的学科体系和学科结 构，从而也无从建立真正意义上的评价学。 1 3 国内外研究现状 国内外对系统评价的研究，主要是集中在把新的评价思想和评价方法引入到 系统评价理论中。系统论、信息论、计算机技术、工程技术思想引入评价领域， 产生了一系列新的评价方法。同时，不同评价方法的综合和交叉也促进新方法和 新思想的产生。归纳起来大致有以下几种： 一、将人工神经网络技术引入评价中，主要是对a n n 算法的改进，如采用 累计误差的丑p 算法，采用提高网络收敛速度的方法，引进径基函数等。 二、模拟生物进化的遗传算法，通过模拟生物进化过程中的繁殖、交叉、突 变三种现象，对评价问题进行解释。 三、交互式多目标综合评价方法。交互式多目标综合评价方法是在智能化的 基础上进一步实现人机交互式对话，用以解决评价中主观性与客观性结合的问 题。主要有基于目标满意度的交互式评价方法和基于目标实际达到程度和目标满 意度的交互式评价方法。 四、基于粗糙集理论的评价方法。主要是利用粗糙集评价特定条件属性的重 2 河海大学硕士学位论文 要性，通过建立属性的约简，从决策表中去除冗余属性，从约简的决策表中产生 决策规则，利用这种规则对新对象进行评价。 六、系统模拟与仿真评价方法。以反馈控制理论为基础，引进动态时间的概 念，利用计算机技术进行模拟，对被评价系统进行过程分析与评价。 总体上来看，国内外对系统评价的研究中，对系统评价单一方法的研究比较 多，综合性的归纳与比较研究较少，对系统评价方法原理方面的研究比较欠缺， 系统评价亟需进一步的深化研究。 1 4 研究内容及思路 囿于资料的限制，本论文的形成过程参考的资料多数来源与国内。旨在通过 广泛收集、对比已有的资料，系统地归纳总结各种评价方法，对评价方法的原理 进行探究，对比分析不同评价方法的差异，提出一些建立系统评价方法的原则。 综合评价最常用的两种模型是儿= f - t ) ，嘞和m = n x 乒。从评价模型可以 ，1j 覃1 直观地得出这样的结论；指标值、权重以及它们之间的合成方式决定着评价的结 果。事实上，评价理论主要围绕着这三个方面展开的，本文就按照这个思路进行 研究。 指标值反映了评价对象要素的取值。由于对事物认识程度的不同，形成的指 标体系会存在多方面的问题。就系统评价而言，要求指标体系满足完各性、独立 性、代表性、可比性等，如何对指标体系进行处理和检验是第三章所着重论述的 内容。 在评价中，权重是最能反映人的价值取向的方面。权重的作用在于限定各指 标对评价目标的贡献率。权重选取常见的是定性权重的形式，因此评价时需要进 行定量化处理。根据标度理论，利用判断矩阵求解权重是定性处理最常用，也是 最有代表性的方法。在文章第四章中，对判断矩阵求解权重的原理进行了分析， 对判断矩阵修正及检验的方法进行了归纳。对不同的标度形式进行比较分析，提 出一些标度改进遵循的原则。 理解评价方法的原理，掌握评价方法的适用条件，是进行合理评价的基础。 各种评价方法，涉及不同的学科，适用性必然受其理论基础的限制。对不同评价 方法进行分类和特性分析是全面认识评价本质的基础性工作，这是本文第五章所 要完成的任务。 指标与权重的不同合成方式会产生不同的评价结果，指标转换的不同方法对 评价结果而言是敏感的，第六章中对这类问题进行初步的理论探讨，并通过实例 得出各种转换方法产生的评价结果，分析它们之间的差异。 河海大学硕士学位论文 1 5 完成的任务及创新点 本文内容共分为六章。 第一章是导言。论述了系统评价的意义、存在的问题、研究思路和内容、研 究、国内外研究现状、论文研究的创新点等。 第二章是系统评价总述，论述了评价与价值的关系，评价的功能、评价的类 型、评价的合理性及评价建立的原则等。通过分析价值与评价的关系，提出了判 定评价合理性的原则。从价值角度来看，统评价的目的是为了反映人对客观事物 的价值判断，因此，在评价过程中，盲目追求数据处理过程的“客观性”，特别 是权重生成过程的“自生成性”，抹去人的因素而谈评价是无意义的。 第三章是关于系统评价指标体系理论问题的研究，包括系统评价指标体系理 论研究的意义、所要关注的阃题、指标选取的过程、指标简化与优化的方法、指 标体系的检验方法、指标体系建立的原则和方法等。选取合理的评价指标体系是 评价过程的重要环节，并非所有与系统相关的因素都可以纳入指标体系中，指标 体系的建立不仅要关注指标间的数值关系，还要考虑指标间的联系、指标获得的 可行性以及指标对评价目标的贡献能力等。 第四章是系统评价中的权重理论问题。论述了权重的分类、判断矩阵求解权 熏的原则、检验判断矩阵一致性的方法、判断矩阵的修正方法、a h p 法中的标 度理论、标度建立的准则和常用的求解权重的方法等。本章主要完成对不同权重 处理方法的对比分析，重点研究主观权重的处理方法方法及利用标度理论对判断 矩阵合理性的检验。7 权重直接体现评价者的价值标准，权重在某种意义上决定了 评价结果。不同的构权方法，从指标数据的数值特征和评价者的心理方面反映系 统的特征。 第五章是关于系统评价方法分类及特性分析，对各种评价方法的原理和应用 特点进行归纳与对比，对不同评价方法的适用性进行归纳。包括模糊评价、主成 分分析法、因子分析法、聚类分析、判别分析、数据包络分析、灰色关联分析、 技术经济分析等。不同的评价方法，理论基础不同，从而决定了在应用某种方法 进行评价时，必须对它的原理和特点进行准确的把握。 第六章是评价结果的敏感性分析，不同指标类型的处理方法会对评价结果产 生深刻的影响。本章中，针对指标类型及无量纲化方法对评价结果的影响进行了 实例分析，提出处理的一般的原则。 本文对不同评价方法进行了对比分析，对构造评价方法的指标理论、权熏理 论进行了探讨。形成的创新内容主要有： ( 1 ) 论述了评价与价值的关系，提出检验评价方法合理性的原则： ( 2 ) 通过对比分析，提出建立指标体系和选取权重的原则； ( 3 ) 对系统评价方法进行新的总结，对评价方法进行了分类和特性分析。 河海大学硕士学位论文 第二章系统评价总述 2 1 系统的含义 2 1 1 系统的概念 人类对事物的认识是由简单到复杂、由局部到整体、由特殊到一般、由个性 到共性的过程。随着认识程度的加深，对局部的、个体的东西有了深入的了解以 后，通过对分散的、模糊的认识进行梳理、归纳，才能把构成整体的各个部分相 互联系起来，从而把握事物的整体特征。这种对事物整体的认识可以看作是对系 统的认识。 系统的概念来源于人类长期社会实践。一个群落是一个系统，一片水域、一 个家庭、一项工程、一项管理过程、一个社区、一个国家也是一个系统，系统是 客观世界存在的普遍形态。 美国韦氏( w e b s t e r ) 大词典中对系统的解释为：有组织的或被组织化的整 体；结合着的整体所形成的各种概念和原理的综合；由有规则的相互作用、相互 依存的形式组成的诸要素集合等。日本世界大百科年鉴中对系统的解释为： 系统通常是作用于一个共同目的的两个或两个以上要素的集合体，但它并不是单 纯几个要素的集合，而是从输入到输出的整个过程。辞海对系统的解释包含 两层含义：一、自成体系的组织，由相同或同类事物按一定的秩序和内部联系组 合而成的整体；二、在自然辩证法中，同“要素”相对应的概念，指由若干相互 联系和作用的要素组成的具有一定结构和功能的有机整体。日本的j i s 标准中， 系统被定义为：许多组成要素保持有机的秩序，向同一目的行动的集合体。一般 系统论的创始人l 矿贝塔朗菲( 上v b e r t a l a n f f y ) 把系统定义为：相互作用的诸要 素的综合体。美国著名学者阿柯夫( a c k o f f r l ) 认为：系统是由两个或两个以 上相互联系业务的任何种类的要素所构成的集合【2 】。 综合以上对系统的定义，可以得出：系统是指互相关联、相互制约、相互作 用的许多要素构成的具有某种特定功能的综合体。相互关联、制约、作用的部分 称为系统的结构，系统结构也可以是一个系统，称为原系统的子系统，而原系统 又可以是更大系统的一个组成部分口】。系统是由不同要素组成的整体，具有不可 分割性，系统的功能是组成系统的某部分要索所不具备的，割裂系统的整体性， 它将失去原有的功能。 河海大学硕士学位论文 2 1 2 系统的特征和分类 系统一般具有整体性、集合性、相关性、阶层性、目的性和适应性。 1 、整体性。整体性是指系统的功能是由所构成要素通过特定的协作方式完 成的，任何一个或一部分要素都不可能单独实现系统的功能。脱离了整体性，要 素的机能和要素间的作用就失去了在系统中存在的意义。整体性是系统最基本的 特性。 2 、集合性。集合性是指系统是由多个相互区别的要素所组成。 3 、相关性。相关性是指组成系统的要素之间是相互联系、相互作用的，彼 此间存在影响关系。 4 、阶层性。阶层性又称层次性，是指系统的可分性。一个系统不仅可以分 解成一系列的子系统，子系统又可以再分，子系统也具有一定的层次结构，而整 个系统又处在更大的系统之中。不同的层次结构之间存在物质流和信息流，构成 系统的运动特性。 5 、目的性。目的性指系统为某种目的而存在，由此形成的系统的功能是不 同系统间相互区分的重要标志。 6 、适应性。适应性是指系统处在外界的环境中，外因的变化必然引起系统 做出相应的变化，引起系统内部要素的改变，从而改变其结构和功能。 系统是一个集合的概念，任何一个复杂的事物都可以用系统的观点来分析。 系统可以分为物质系统( 如包括社会系统在内的“有生命”系统和包括物理、化 学、地质系统在内的、“无生命”系统) 与抽象系统( 如形式化逻辑系统) ，人工 系统( 如通信、运输、教育系统) 与天然系统( 太阳系、自然生态系统、人体系 统) ，动态系统与静态系统，封闭系统与开放系统等。 2 2 评价的特征 2 2 1 评价的含义 评价、评估、估价、评判、评定意义相近，在实际应用中经常不加区分，它 们共同的含义是参照某种价值标准形成价值判断。英语中e v a l u a t i o n ，a s s e s s m e n t ， a p p r a i s a l 和m e a s u r e m e n t 区分也不是很明显，在文献中混用现象比较多。从实际 应用情况来看，评价侧重于理论的探讨，如评价理论、评价学说、评价函数等， 评估侧重于实务，如项目评估、资产评估、教学评估等，但这种用法是不固定的， 换成另一种说法通常不会引起误解。侯定丕，王战军【4 j 在专著中把与评价相关的 称谓通称为评估，本文统用评价这个词表示与评佶、评判等相同的意思。 评价是指对管理对象应用确定的度量尺度，采用相应的评判方法，将所得到 6 河海大学硕士学位论文 的结果与事先预定的目标进行比较，得出结论的过程。这里所谓事先预定的目标 是由指标体系描述的。要进行系统评价，必须遵守一定的客观程序和规律，为此 必须深入开展针对评价理论和方法的研究，以便回答复杂系统的性能、效果以及 对社会的贡献等。 评价反映了人类活动的一个本质特点：合规律性与合目的性的统一p 】。人类 活动的理想方式是合规律性和合目的性的统一，要求在合规律的前提下进行合目 的性的选择，因此在这一过程中，大到对社会各子系统合理配置的评价与选择， 小到对每一个具体环节目标与手段的选择，无一能离开评价。 2 2 2 评价与价值的关系 哲学意义的价值是指价值主体与价值客体之间的一种关系，从现象形态上说 是客体满足主体需要的一种效应【6 】。经济学意义的价值通常指根据效用观点对对 象满足人的某种需求的认识，严格意义上说，不同时刻，不同空间，同一主客体 之间的价值关系是不同的。但从一般意义上来讲，价值被固化成一种符号表示， 在有限的时空里，它是一个可以被多数人接受的固定的值。由于此种特性的存在， 才使得公众对某种价值的认识稳定在某一范围，才存在公众认可的价值，使评价 成为可能。 评价中有个体主观因素的存在，因此不同个体对同一事物的价值判断就有所 差别，即使是同一评价者，在不同时间、地点对同一被评价对象的价值判断也会 不同，可以表现为权重的不同，指标值的不同，评价函数的选取不同等。所以， 在评价中抹掉主观的判断是无意义的，也是不可能的。如何使评价所得到的价值 判断具有公允的特征成为评价所必须解决的问题，这也是判断评价科学性的依 据。 评价的目的在于提示事物的价值，人类的一切活动都是为了发现价值、刨造 价值、实现价值和享用价值。正如爱因斯坦所说，人类所做和所想的一切都是关 系到要满足迫切的需要和减轻痛苦，评价就是人类发现价值、揭示价值的一种根 本的途径阴。 2 2 3 评价的功能 评价是管理决策过程中的一项重要活动，通过修正偏离价值标准的行为，使 其按预定的目标和方向进行。在一定意义上讲，管理即是在评价中不断修正与完 善的过程。评价的功能主要体现在以下方面： 1 、判断功能 判断包含鉴别与判定，主要是对评价对象的归属进行区分，用以判定对象的 某种属性对特定评价目标的从属程度。表现方式可以是评定、认定、评语等。 7 河海大学硕士学位论文 2 、选择功能 通过事物之间的对比，形成相对优劣程度的认识。进而选择价值最大的对象 作为最优的选择对象。 3 、导向功能 通过评价，找出评价对象的不足之处，引导事物向有利于目标实现的方向发 展，促使评价对象在今后不断的完善。 4 、调控功能 持续的评价可以形成对事物发展过程的跟踪认识，通过对事物发展过程偏离 目标程度的分析，进而对事物进行调控。 5 、激励功能 评价形成的定性与定量评价结论是对被评价对象实现目标程度的判定，通过 对比，可以鞭策后进，鼓励先进，起到对不同层次群体的激励。 6 、探索功能 入们对事物的认识总是由浅到深，由外及里的。评价过程对资料的收集与分 析，是对事物深层次再认识的过程。通过评价，可以逐步发现事物发展的规律， 进而形成科学的认识。 2 2 4 评价的合理性 评价是否合理，直接关系到评价结论的科学性与可信度。评价的合理性可以 从三方面分析：一是指标体系建立是否完整，能否全面反映评价目的的要求；二 是指标权重的选取是否合理，是否反映公认的价值准则；三是评价方法是否具有 逻辑上的缺陷，能否经得住检验。 评价的合理性必须包括三个层次：一、评价过程中对事实的把握必须是真实 和准确的；二、评价必须有自治性和和谐性，在逻辑上无矛盾性。三、评价必须 是合目的性的，评价的目的是引导一定的行为，为特定目的服务。 采用不同的评价方法，所得的结果可能会有所不同。但只要方法运用上没有 错误，即使不同的评价结果也并不说明评价本身有问题，不同的结果只是反映对 价值角度的认识不同。人们对事物的认识是多角度的。“横看成岭侧成峰”就是 一个很好的例子。 2 3 综合评价与系统评价 2 3 1 综合评价 综合评价是相对于单项评价而言的，它们之间的区别不在于评价个体的多 河海大学硕士学位论文 少，而在于评价指标体系的复杂程度。综合评价是对多元、多属性、多指标对象 的价值判断，一般来说，评价对象比较复杂，需要通过某种假定，利用某种方法， 对指标进行合成，得出一个组合后的评价值。评价方法是否科学合理，决定评价 结果的性质。单项评价可以看作是针对综合评价中的某种属性的评价。如在对学 生素质的评价中，学科成绩可以做为单项评价来看，而学生的身体状况、心理承 受能力、语言能力等多项指标的组合可以看做是对学生综合素质的评价。当然， 综合评价和单项评价并没有绝对的区分，在一定程度上是可以转化的。 2 3 2 系统评价 系统评价来源于对复杂事物的认识，事物处在比自身高一级的系统中，而事 物本身就是一个系统。形成对事物的全面认识必须把其看成一个整体，运用系统 分析的观点做出整体性的认识。系统是多属性的，因此系统评价的方法就是多属 性评价的方法，也就是多属性综合评价的方法。对系统评价的提法，多数的意思 “系统的评价”( 见文献 8 卜 1 0 】) ，这种称法本意就是运用综合评价的方法对 某一系统进行分析、评价。综合评价与系统评价无本质性的区别，只是从字意上 区分，系统评价比综合评价更为全面。本文所说的系统评价方法和综合评价方法 是相通的。 2 4 评价的建立 2 4 1 评价的类型 评价类型的划分可以有多种方法，根据评价的特性，可以做如下的划分： l 、绝对评价与相对评价 绝对评价与相对评价是根据评价标准和评价依据来划分的，也就是根据评价 的参照系不同来划分的。绝对评价是在被评价对象集合之外设立一个标准，被评 价的各对象与标准相比较，判定被评价对象到达标准的程度：相对评价是在被评 价对象集合之内找出一个对象作为基准，其余对象与这个基准相比较，形成相对 优劣程度的对比。绝对评价由于采用的是外部的评价准则，在选定评价标准后， 评价对比目标是唯一的；相对评价以总体内的某样本为评价基准，评价对比目标 是可变动的，评价结果呈现出不唯一性。 2 、历史评价与预测评价 历史评价与预测评价是根据评价对象的存在状态划分的。历史评价是对被评 价对象的历史状态进行分析，形成对事物已有实效的评价，目的是在于认识事物 的存在价值；预测评价是根据事物已有的发展趋势，利用拟合手段，寻求事物发 展规律，做出对事物未来可能状态的评价。 9 河海大学硕士学位论文 3 、静态评价与动态评价 静态评价与动态评价是根据评价的持续性来划分的。静态评价是指对具有时 序性发展态势的事物进行一次性、终结性的评价，反映事物在某一时刻的特征： 动态评价是指对具有时序性发展态势的事物进行持续、多次的评价，在评价过程 中加入事物新的要素，形成以时间序列为基础的对事物的认识，反映事物在不同 时刻的特征。 4 、定量评价与定性评价 定量评价与定性评价是根据评价要素和评价结果的表达方式来划分的。定量 评价是对被评价对象的要素进行量化赋值，利用组合评价的方式得到量化的结 果，它直观地反映事物的状态，有线性加权评价和非线性加权评价方法。定性评 价主要是对被评价对象的评语采取文字方式作出结论( 如优、良、中、差) ，反 映人们的价值认识，主要用于难以量化处理的情况，也常用于对事物的分级。定 量评价与定性评价在一定的条件下可以相互转化。 5 、分级评价与排序评价 分级评价与排序评价是根据评价目的来划分的。分级评价是指根据事物要素 间的相似程度，找出差异最小的归为一类，差异较大的分为其它类，分类的结果 有利于形成对事物规律性的认识。排序评价是依据给定的价值标准，对被评价对 象的优劣性进行对比分析，排序的结果作为判定事物先进性的依据。 根据评价内容的不同，可以划分为：对物理状态的评价，这类评价是指对客 观存在的实物的评价；对意识状态的评价和心理世界的评价，如心理素质，思维 模式的评价；对客观化了的心理世界和意识世界的评价，如书籍、音乐、艺术品 等：对人的行为的评价等。 2 4 2 评价建立的过程 从决定对事物进行评价到得出一个具体的评价结果，这一过程需要做许多具 体的工作，归纳起来大致有以下的步骤： 1 、明确评价目的 明确评价日的是进行评价的第一步，即要做到“有的放矢”。目标明确后， 才能有针对性地收集资料，获取与系统评价相关的信息。系统评价的目的反映了 评价者对系统的价值取向。 2 、系统构成要素分析 系统构成要素分析是为了形成从整体到部分、从部分到整体的认识过程。这 一过程需要完成对系统的全面认识，把握系统的特性，找出影响目标实现的各个 因素以及它们之间的关系。 3 、建立评价指标体系 指标是对系统构成要素的抽象认识，是衡量系统总体目标的具体标志，不同 1 0 河海大学硕士学位论文 指标反映系统的不同方面。指标体系建立的目的是为了对系统构成要素进行分 类，更为有效地对系统要素进行量化处理。 4 、确定评价准则 评价准则是针对指标重要性作出的定量认识，指标反映系统的不同方面，不 同指标对系统目标实现的重要程度不同，因而有不同的权重关系。建立评价准则 即是将指标体系中的指标规范化，采取同一尺度衡量对系统的影响程度。 5 、选定评价方法( 模型) 选定评价方法要综合考虑指标的特点、数据的特点以及实际评价的特点等多 方面因素。选择评价方法应能够合理地表现指标之间的关系，能够合理地推定各 要素对系统贡献。 6 、专家评价 评价需要有专业知识的人来完成，专家评价有利于形成评价结果的权威性， 也有利于发现评价过程中隐含存在的问题。 7 、对评价结果进行检验 评价结果的检验是为了验证评价方法、评价过程的科学性、合理性，是评价 过程的一个重要环节。评价的结果还可以包含通过周密思考和科学判断所得的见 解，并不局限于评价方法所得的结论。 8 、评价分析报告 评价分析报告是评价的最终成果，是形成对系统价值的认识。 系统评价过程的流程图见图2 1 。 确立评价目的 系统构成要素分析 建立评价指标体系 确立评价准则 l选择评价模型 + i专家评价 评价结果检验 评价分析报告 满足检验要求 图2 1 系统评价流程图 河海大学硕士学位论文 从严格意义上来讲，流程图只是一种工作的框架图，在实际评价过程中，评 价工作并非是严格按这种顺序进行的。一般而言，评价方法往往是在评价开始时 就已经确定了，系统评价的最重要的工作是放在建立指标体系与评价方法的选取 方面。 河海大学硕士学位论文 第三章系统评价指标体系理论问题研究 3 1 系统评价指标体系理论研究的意义 3 1 1 研究的意义 系统思想是现代管理思想的一个重要方面，在管理过程中，通常把管理对象 各要素作为一个系统整体来看待。就评价对象而言，构成系统的评价要素并非是 孤立的，各要素形成对系统性状的描述，要素闽通过某种特定的关系形成支撑系 统的体系。 指标体系描述系统的特征属性，是对系统主要性能的抽象，也是对要素特征 的抽象。指标体系建立是否正确，直接影响评价结果的性质。如何建立指标体系 是系统评价应首要解决的问题。指标体系选择是否合理恰当反映了评价者对问题 的认识程度。在现实评价活动中，由于对这一问题的认识不足，缺少相关的理论 指导，评价者在做出评价时经常会设计一些不合理的指标，导致出现形式上及逻 辑上的不合理。例如，在对农业项目进行社会评价时，“百元投资的效率”指标 出现了“森林吸收c o z 量”、“水土流失率”、“森林覆盖率”等非经济效率指标， “社会公平指标”中出现“农村保险率”指标f l ”。在对我国居民生活质量评价指 标设计时，资源与环境指标中出现“年均森林采伐率”这一指标，年均森林采伐 率只是一个描述森林利用状况的指标，森林是一种可再生的资源，年均森林采伐 率并不一定代表绿化程度就低，而应该用“森林覆盖率”来反映平均森林生态环 境的状况【1 2 1 。在设计现代农业园区评价指标时，科技水平指标中出现了“年度 新增固定资产总额”1 1 3 1 。 这种情况的出现，恰恰说明了理论指导指标体系建立的重要性。指标体系理 论研究的意义在于指标如何科学合理地建立指标体系，避免由于指标体系建立过 程出现的相关问题而影响评价的效率，影响评价结果的科学性。 3 1 2 需要关注的问题 并非所有对系统有影响的因素都可以纳入系统评价中，系统评价的指标体系 也不应该囊括所有的系统元素。只有与评价目的相关的、与设计指标体系含义相 符的因素才可以归入某一特定的指标中。不合理地选择系统评价的元素，不仅会 造成指标含义模糊不清，而且容易导致指标体系中指标的高度相关与重叠，影响 评价结果的科学性。理论来源于实践并高于实践，系统评价要发展成为- - 1 7 完善 河海大学硕士学位论文 的学科体系，就必须重视理论研究工作。运用相关的理论指导指标体系的建立是 十分必要的，也是评价实践所必须解决的问题。系统评价指标体系理论研究所要 关注的问题主要集中在： 1 、指标体系建立的原则 指标选择不具有随意性，选取的指标要为特定的评价目的服务。指标的内涵 与外延不能超出一定的范畴，这体现了评价为特定目的服务的主旨。 2 、指标体系建立的方法 合理地选择建立指标体系的方法，有助于确立指标间的数值关系，有利于定 量分析系统的特征，保证评价过程的科学性。 3 、指标体系的检验与优化 指标体系的检验关注的是指标之间的联系。指标之间存在多种联系，在描述 系统特征方面，可能存在重叠与相关，这些问题是系统评价所必须解决的。应用 存在重叠与相关的指标体系对系统进行评价时，若处理方法不当，不仅会夸大某 方面的作用，而且会造成评价的失真。指标的优化是在指标体系简化的基础上完 成的，优化是为了更进一步认识决定评价结果的主要因素，寻找主要成分，提高 评价的效率。 4 、指标的处理方法 系统的性状是由多种指标描述的，这些指标有不同的单位、量级和类型。在 进行综合评价时，最终的评价结果是一个合成后的值。单位、量级和类型处理方 法的不同，直接影响评价的结果。 3 2 指标选取的过程 理论上讲，指标体系的选取要经过初选、检验、简化与优化的过程。不同的 阶段对指标选取的要求不同。初选是为了获得与系统评价相关的指标，对系统属 性进行全面的认识。指标初选阶段只需对指标的含义有明确的区分即可，对指标 间内部联系不作过于详细的要求。检验要解决的是评价指标与评价目的的一致 性，验证指标体系建立的科学性。简化与优化是从指标重要性出发，通过定性与 定量的分析，选取适当的指标体系规模。 3 2 1 指标体系的初选 指标体系的初选在于全面反映与系统评价目的要求相关的指标，对指标是否 重复、指标构成的关系、指标的实际可操作性等方面并无要求。常用的初选方法 有综合法、分析法、交叉法、指标属性分组法等“4 7 。 1 、综合法 综合法是针对多个评价者提出的评价指标体系进行类比，通过归纳整理，找 1 4 河海大学硕士学位论文 出具有共同特性的评价指标，形成基于共同认识的综合体。这种方法有利于形成 对指标体系结构的全面认识。 2 、层次分析法 系统是一个复杂的组合体，系统的特性可以从不同的侧面反映出来。层次分 析法就是从反映系统不同特性的侧面入手，按照层次关系，推导出影响系统特性 的各个子系统、子项目。通过对影响子系统、子项目的指标体进行分解，得到整 个系统的指标体系。层次分析法初选指标体系的基本过程是： ( 1 ) 对评价问题的内涵与外延作出合理解释，划分概念的侧面结构，明确 评价的总目标与子目标。 ( 2 ) 对每一予目标或概念侧面进行细分解。越是复杂的多指标综合评价问 题，这种细分解就越重要。 ( 3 ) 重复对子目标和概念分解，直到每一个子目标或概念侧面都可以直接 用一个或几个明确的指标来反映为止。 ( 4 ) 设计每一个子层次的指标，用定量或定性的方式表示出来。 3 、交叉法 交叉法是针对生成新的指标而设计的方法。各分项指标可以看作评价指标系 统的维，不同指标的交叉形成二维或更高维数的指标。根据评价目标的不同，可 以合理地设计具有深层含义的指标。以二维交叉为例，“投入”与“产出”的交 叉形成的新指标为“经济效益”指标。经济效益指标可以明确地表现出资金的利 用情况，比单项的投入指标和产出指标更能反映问题的深度。用图表示为： 投入指标 盘 出 经济效益指标 指 ( 交叉点) 标 4 、指标属性分组法 严格来讲，指标属性分组是对指标属性的分类和认识，它适用于指标处理过 程。指标初选时的指标属性分组目的是从指标属性角度构思指标体系中的指标类 型。通过构造“绝对变量”、“相对变量”、“平均变量”、“静态变量”、“动态变量” 等形成完善的指标评价体系。 3 2 2 指标体系的检验 指标体系由多个单项指标构成，指标体系作为一个总体，其功能是完整的。 在进行指标体系的检验时，不仅要保证指标体系中的每一个单项指标的科学性和 合理性，而且还要保证整体上的科学性