（课程与教学论专业论文）教育装备效能综合评价研究.pdf

摘要 随着科学技术的发展与进步，在社会生活和生产等多方面各种硬件设施被大量丌发 并得到普遍应用，在当前的学校教学中，教育装备已经发展成为教育系统的必要组成部 分，它对于保证日常的教学，对于提高教学效率，对于改善教学效果具有举足轻重的作 用。近年来，教育领域在教育装备方面的投资大幅增加，建成或更新了许多硬件设施， 这一方面提高了学校的办学水平，另一方面也给教育装备的管理工作提出了更多要求， 造成了一定的压力。据了解，相当数量的教学单位教育装备的管理工作不到位，造成装 备效能的低下，这不仅闲置了设备和资金，更是不利于学校教学水平的提高。因此，本 题选择了教育装备管理工作中的重点内容作为研究对象，力图通过研究建立科学的教育 装备效能评价理论和方法，希望能够为学校开展教育装备效能评价，为提高教学水平提 供解决之道，也希望能够填补教育装备理论研究的不足。 本题设计了三段式的研究框架，即：文献综述与现状调查、理论建构以及实践与探 索三部分。首先，通过文献综述和调查研究，明了了当前教育部门丌展教育装备效能评 价的现状，阐明了教育装备效能评价的理论发展情况，并根据理论研究和实践发展的不 足，调查了相近领域效能评价的发展情况和研究成果，特别是总结了综合评价理论和方 法的研究成果，为开展教育装备效能评价的理论研究奠定了基础。其次，通过阐明教育 装备的相关概念，分析教育装备的效能，并借鉴军事装备效能评价理论以及综合评价理 论与方法研究的成果最终确定了开展教育装备效能评价的一般步骤与评价模型，完成了 教育装备效能评价的理论建构。最后，按照以上理论研究的成果，把评价模型具体化， 针对电子线路的实验教学系统开展了一次效能评价，然后根据评价结果阐明了该实验教 学系统的效能状况，并指出了影响效能的不良因素。通过这个效能评价的实践，检测了 理论研究的科学性，对其不足予以改善。 关键词：教育装备、效能、效能评价、综合评价 a b s t r a c t w i t ht h ed e v e l o p m e n to fs c i e n c e ，v a r i o u sh a r d w a r ef a c i l i t i e sw e r ed e v e l o p e da n dg o t u n i v e r s a la p p l i c a t i o ni ns o c i a ll i f ea n dp r o d u c t i o n t h ee d u c a t i o ne q u i p m e n th a sb e c o m e n e c e s s a r yt ot h ee d u c a t i o ni nt h ec u r r e n ts c h o o ls y s t e m i tp l a y sa ni m p o r t a n tr o l ei ng u a r a n t i n g t h ed a y t o - d a yt e a c h i n g ，a n de n h a n c i n gt h ee f f e c t i v e n e s so ft e a c h i n g i nf c c e n ty e a r s ，l o t so f m o n e yw a sp u ti n t ot h ef i e l do f e d u c a t i o ne q u i p m e n t ，a n dan u m b e ro f h a r d w a r ef a c i l i t i e sw e r e b u i l do ru p d a t e t h ee d u c a t i o nc o n d i t i o n sw a si m p r o v e d ，b u to nt h eo t h e rs i d e ，i tm e a n tm o r e p r e s s u r ea n dm o r ed e n a n d i n g sf u rt h em a n a g e m e n to fe d u c a t i o n a le q u i p m e n t i ti su n d e r s t a n d t h a tac o n s i d e r a b l en u m b e ro ft e a c h i n gu n i t sg e tab a dm a n a g e m e n to fe d u c a t i o n a le q u i p m e n t ， a n dap o o re q u i p m e n tp e r f o r m a n c e , t h i si sn o to n l yi d l ee q u i p m e n ta n df u n d s b u ta l s oi td o e s n o t h i n gt or a i s i n gt h el e v e lo ft e a c h i n g t h e r e f o r e ，w ef o c u so nt h ei s s u eo fm a n a g e m e n to f e d u c a t i o n a le q u i p m e n t t r y i n gt oe s t a b l i s has c i e n t i f i ce v a l u a t i o nt h e o r ya n dm e t h o d sf o r e d u c a t i o n a le q u i p m e n te f f e c t i v e n e s s ih o p et h i sw i l ld os o m e t h i n gf u rt h es c h o o l st oc a r r yo u t e v a l u a t i o no f t h ee f f e c t i v e n e s so f e d u c a t i o n a le q u i p m e n t ，a n dh e l p st oi m p r o v et h es t a n d a r do f t e a c h i n g , ia l s oh o p ei tw i l lf i n i s ht h et h e o r yo f e d u c a t i o n a le q u i p m e n t 而ef r a m e w o r ko ft h ep a p e rw a sd e s i g n e da st h r e ep a r t s ：l i t e r a t u r er e v i e wa n d i n v e s t i g a t i o n ，t h e o r yb u i l d i n g ，p r a c t i c ea n de x p l o r a t i o n f i r s t l y , l i t e r a t u r er e v i e wa n ds u r v e y r e s e a r c hh e l p st ou n d e r s t a n dt h ec u r r e n ts t a t u so fe d u c a t i o n a le q u i p m e n te f f e c t i v e n e s s e v a l u a t i o no f t h ee d u c a t i o ns e c t o r t h ed e v e l o p m e n to f t h et h e o r yw a ss t a t e d a n da c c o r d i n gt o t h ei n a d e q u a c i e so ft h e o r e t i c a ls t u d ya n dp r a c t i c e , li n s p e c t e dt h ed e v e l o p m e n ta n dr e s e a r c h r e s u l t so f s o m es i m i l a rf i e l d s ，a n ds u m m e du pt h er e s e a r c hr e s u l t so f t h et h e o r ya n dm e t h o d so f c o m p r e h e n s i v ee v a l u a t i o n ，s oig o tt h ef o u n d a t i o no ft h et h e o r yr e s e a r c hf u re v a l u a t i o no f e d u c a t i o n a le q u i p m e n te f f e c t i v e n e s s s e c o n d ，ic l a r i f i e ds o m ec o n c e p t so ft h ee d u c a t i o n a l e q u i p m e n t ，a n da n a l y z e dt h ee f f e c t i v e n e s so fe d u c a t i o n a le q u i p m e n t ，s olf o r m e dt h eg e n e r a l s t e p sa n dam o d e lf o rt h ee v a l u a t i o no fe d u c a t i o n a le q u i p m e n te f f e c t i v e n e s s f i n a l l y , i nt h e l i g h to ft h ea b o v et h e o r e t i c a lr e s e a r c hr e s u l t s ，t h ee v a l u a t i o nm o d e lw a ss p e c i f i e d ，a n da e f f e c t i v e n e s se v a l u a t i o nw a sc a r r i e do u t a g a i n s tt h ee x p e r i m e n tt e a c h i n gs y s t e mo ft h e e l e c t r o n i cc i r c u i t s t h ee f f e c t i v e n e s so ft h i ss y s t e mw a sc l a r i f y e dh a s c d0 1 1t h ee v a l u a t i o n r e s u l t ，a n dt h ea d v e r s ef a c t o r sw e r ea l s on o t e d t h r o u g ht h ee f f e c t i v e n e s se v a l u a t i o n ，t h et h e o r y w a st e s t e da n dt h ei n a d e q u a c i e sw e r ei m p r o v e d k e yw o r d s ： e d u c a t i o n a le q u i p m e n t e f 传c t i v e n e s s e f f e c t i v e n e s se v a l n a t i o n c o m p r e h e n s i v ee v a l u a t i o n 1 1 1 附表： 图表1 1 本文的写作框架4 图表3 1 评价研究要素之f b j 的关系l l 图表4 1 教育装备系统的结构2 2 图表5 1 典型的递阶层次结构3 8 图表6 1 实验教学系统的指标体系1 4 2 图表6 2 实验教学系统的指标体系2 4 3 附图： 表格i - 1 效能评价的频度7 表格1 - 2 效能评价的对象 表格1 - 3 效能评价的评价者 7 8 表格】4 效能评价的内容8 表格1 5 评价方法8 表格1 6 满意度8 表格5 1 判断矩阵标度及其含义3 4 表格5 2 效能评判矩阵3 4 表格6 1 效能评价的统计结果4 6 表格6 - 2 二级指标对评语的隶属度4 7 v 首都师范大学位论文原创性声明 本人郑重声明：所呈交的学位论文，是本人在导师的指导下，独立进行研究工作所 取得的成果。除文中已经注明引用的内容外，本论文= ：_ f i 含任何其他个人或集体己经发表 或撰写过的作品成果。对本文的研究做出重要贡献的个人和集体，均己在文中以明确方 式标明。本人完全意识到本声明的法律结果由本人承担。 学位论文作者签名 首都师范大学位论文授权使用声明 本人完全了解首都师范大学有关保留、使用学位论文的规定，学校有权保留学位论 文并向国家主管部门或其指定机构送交论文的电子版和纸质版。有权将学位论文用于非 赢利目的的少量复制并允许论文进入学校图书馆被查阅。有权将学位论文的内容编入有 关数据库进行检索。有权将学位论文的标题和摘要汇编出版。保密的学位论文在解密后 适用本规定。 学位论文作者签名： 辟箴孚 日期：2 0 0 7 年5 月2 8r 日嬲月u年昕加 期阿 翠 藏 净， 1 1 课题研究背景 第一章前言 从上世纪5 0 年代以来，大量的仪器设备应用到教育教学领域中，特别是广播、投 影、幻灯、电视等媒体的采用，促进了教育技术的萌芽和发展，不断革新教育教学的技 术手段，提高了教学效率。近十年来，我国投入到教育领域的资金大幅增长。教育部从 2 0 0 0 年开始，在中小学实施“校校通”工程。该工程用5 1 0 年时间，通过配备必要的 硬件设备，使全国9 0 左右的独立建制的中小学校能够上网，使中小学师生都能共享网 上教育资源，提高所有中小学的教育教学质量，使全体教师能普遍接受旨在提高实施素 质教育水平和能力的继续教育。2 0 0 3 年，由教育部、国家发展和改革委员会、财政部三 部委共同启动的“百亿工程 _ “农村中小学现代远程教育工程试点工作”，这个跨度为 5 年、整体采购量近百亿，成为近年来教育行业最大的招标采购项目，工程旨在为农村 中小学实现三种远程教育模式：教学光盘播放点、卫星教学收视点以及计算机教室。可 见，为了促进教育信息化的进程，提高教育水平，国家投入了大量的资会、人力和物力 进行教学环境的改造、硬件条件的建设。但是，另一方面，由于教育装备理论研究还不 够成熟，教育装备管理工作不到位，相当一部分教育装备的使用效率不高，教学效能低 下。因此，研究教育装备的评价方法，建立科学的教育装备效能评价模型，对于完善与 建设高效的教育装备系统是十分必要的，对于教育信息化的进展是一个迫在眉睫的问 题。 1 2 课题的来源与意义 1 2 1 课题来源 该课题是作为校级课题“教育硕士专业实验室建设模式与实践”的子课题开展的。 教育硕士专业实验室建设模式与实践这一课题主要通过考察相关案例，利用需求分析确 定实验室建设的模式，并在建成后对该实验室进行效能评价。本课题的主要任务是研究 l 效能评价的方法。建立效能评价的模型，为实验室建设提供阶段性评估和建成验收评价 的科学依据。 目前，教育装备作为一个学科还不够成熟，教育装备的相关理论建发还不完善，本 题所涉及的教育装备的效能就是一个方面。近年来，由于科技的发展和对教育投入的加 大，教育装备逐渐形成规模，学校中的教育装备制品品目繁多、资产庞大，涉及到教育 装备的需求论证、招标采购、验收、同常维护管理等一系列工作越来越繁重复杂。也正 是由于教育装备初具规模，多项帽关工作刚刚开展，针对教育装备效能的评价行为不够 规范，评价的方法不够科学，评价理论还巧i 够成熟。总之，舀丽的情况是：一方昕，教 育装备工作初具规模，但是教育装备评价的实践与理论研究却帽对落后，评价的婵沦与 方法亟待完善：另一方面，其它领域的评价理论与方法已发展成熟，囚此，适时地j f 展 教育装备的评价研究，把其它领域的评价理论与方法弓 入教育装备领域，从而歼创新技 术和理论在教育装备效能评估中的应用，促进教育装备工作的系统化和科学化，无疑是 具有重要意义的。因此，本课题的研究内容，突破了该课题的限制，并不限于实验室建 设过程中的评价，把研究内容扩展到了教育装备的效能评价，使研究成果具有推广的价 值，并希冀能够填补教育装备理论建设的空白。 本课题研究的目标在于通过调查研究了解目前教育装备效能评价的发展情况以及综 合评价方法的研究成果，在此基础上进行理论探索，建立适当的教育装备效能评价方 法。 1 2 2 课题研究的意义 1 、通过调研，阐明当前教育装备效能研究以及效能评价研究与实践的现状。 教育装备理论研究的成果，一般都通过出版书籍或登载期刊杂志公开发表。在本课 题的研究中，通过查阅相关文献，总结了教育装备效能研究的理论成果。利用问卷嘲查 和访谈的方法，了解了目前教育装备效能评价的实践现状，并通过分析阐明了实践工作 的缺陷。 2 、总结了综合评价方法的发展情况，并将之应用到教育装备效能评价中。 在社会科学和自然科学研究领域，人们发展了多种综合评价方法用于衡量事物的发 展状况或运行状态，综合评价方法已经成为一种得到广泛应用的科学方法在本题中， 介绍了综合评价方法的基本概念，总结了评价理论与方法的发展情况，详细介绍了几种 常用的综合评价方法和评价的一般步骤，最后在课题研究，把多种评价方法综合地应用 到实践中。 3 、分析了教育装备效能的内涵，建立教育装备效能评价的模型，并在实践中检 验。 研究教育装备的相关概念，并借鉴军事装备效能的概念，确定了教育装备效能的基 本内涵，为教育装备效能的评价奠定了理论基础。通过问卷调查，广泛收集意见，建立 效能评价的模型，然后，将之应用到某实验室系统的效能评价中。通过应用和调整，总 结经验，提出一般性的教育装备效能评价模型。 1 3 研究方法设计与论文结构 1 3 1 研究方法 根据课题的内容，在研究过程中主要采用了以下研究方法： 一、文献研究法。通过调查研究教育装备相关的书籍和论文，总结当前教育装备效 能评价研究的理论成果与实践现状；通过研究军事及其他领域的研究成果，总结综合评 价方法的基本概念、常用方法，并归纳了应用综合评价方法的一般步骤：研究教育装备 的相关概念并借鉴军事效能研究的成果提出教育装备效能的概念，为课题研究打下理论 基础。 二、专家调研法( d e l p h i 法) 。利用调查问卷，多轮次地咨询专家，根据专家意见 不断地修改和完善教育装备效能评价的指标体系。 三、个案研究法。本研究课题，设定了实践探索的内容，通过对某实验室系统进行 效能评价，检验并修币教育装备效能评价的模型。实践部分具体检测了本理论框架的适 用性和科学性，分析可能存在的问题，提高了可操作性。 在本课题研究中，除了以上研究方法之外，还综合应用了其他方法，如：访谈法， 统计分析法等，这里不再逐一列出，在后文叙述中将会逐步展开。 1 3 2 论文结构 根据研究的进程，本文的行文写作进行了如下安排： 文献综述理论建构 探索与总结 导 现状调研 相关概念与理 论基础 教育装备效能 实践与探索 评价的理论与 教育装备效能 实践现状 分析 评价方法概述 综合评价韵一 总结 般步骤与评价 模型 1 4 论文的创新点 图表1 1 本文的写作框架 教育装备是现代教育教学的重要手段，是改善学校的办学水平，提高教学效果和效 率的重要途径。本文所研究的教育装备效能评价方法是教育装备管理领域的重点内容， 选题对于教育装备的使用和管理具有重要的应用价值。论文的设计和研究具有以下三项 创新性内容： l 、在研究过程中，通过文献调研和问卷调查阐明了教育装备效能评价理论和实践 的发展水平。 2 、建立了教育装备系统和教育装备系统效能的基本概念。 论文研究了我国教育装备的发展历程，分析了教育装备的基本概念及其教育特征， 以系统论为思想基础提出了教育装备系统和教育装备系统效能的定义，并分析了教育装 备系统的内涵和基本结构。 3 、确定了教育装备效能评价的初步方法。 该评价方法是结合教育装备的特点对层次分析法进行改造，并借用了模糊数学的数 据处理技术形成的。论文阐明了进行教育装备效能评价的基本步骤。并确定了以过程性 指标做指标体系的思想，提出了对于教育装备效能评价的具有一般意义的一级指标。 4 第二章教育装备效能评价的现状调查 2 1 当前教育装备效能评价理论的发展水平 目盼，由于教育规模的扩大，在校学生数量的激增，使得现代教育教学手段成为教 育系统必不可少的组成部分，另一方面，从硬件上提高学校的办学水平，也是与社会经 济发展相结合的必然要求然而，提高教育机构的硬件水平。使教育装备发挥较高的效 能，不是仅仅通过购置高档的教育装备就可以实现的。教育装备效能的发挥受到多种因 素影响，必需通过科学、专业的管理工作，使各种因素能够统一于提高教学水平这一中 心才有利于发挥教育装备的效能。在教育装备的管理工作中，效能评价是其重点之一。 丌展效能评价，科学地衡量教育装备的实际效能，发现其中的不利因素并予以改善，是 提高教育装备效能的最重要的手段。 当前，教育装备还是一个比较新颖的概念，教育装备行业也只是在近年来取得了较 大进展，教育装备管理工作的专业性不强，行业内的理论研究也比较少，关于教育装备 效能的研究更是少见。目前，还没有出版任何关于教育装备效能的书籍，据作者了解， 当前开展教育装备理论研究的单位仅有首都师范大学教育技术系一家，教育装备的理论 框架还不完备，更没有丌展关于教育装备效能评价的专项研究。此外，国内有三份期 刊：教育技术装备、实验教学和仪器和中国现代教育装备，从名称上来 看，是关于教育装备的专业性期刊，但是，却少有关于教育装备理论研究与实践的内 容，涉及教育装备效能评价论文的更是风毛麟角。因此，为了从文献这一方面了解教育 装备效能相关的理论研究，作者通过两条途径扩大了检索范围，其一，提高检索词的冗 余度，并不限制具体的期刊或专著，扩大文章的来源；其二，检索相近领域的效能评价 研究成果，特剐是了解军事领域效能评价的发展情况和现状。科技期刊数据库是最全面 的学术文献来源，已经成为学者开展科学研究必不可少的工具，作者按题名分别在中国 期刊网、万方数据库、维普资讯冲文科技期刊数据库中，利用关键词“教育”或者“教 学”和“装备”或者4 设备”或“器材”或“教具”和“评价”或者“评估”检索学位 论文和期刊论文，结果未见任何关于教育装备效能评价的硕博学位论文发表，期刊文章 也只检索到以下六篇，分别是：重庆市垫江县将教育技术装备及实验教学工作纳入学 校综合评估范围、浅论评估对学校教育技术装备的作用、对医疗设备技术人员 继续教育实施三级评价系统的效果探讨、高校教学实验室仪器设备利用率评估初 探、化工原理一气液传质设备、教学仪器设备有偿r l 了用与使用汗估方案探 讨，与教育装备评价相关的文章只有4 篇，其中一篇为新闻性质，而没有文章论及教 育装备的效能这一概念。在万方数掘资源系统检索从1 9 7 7 年至2 0 0 6 年的教育装备评价 相关的硕博论文，没有匹配结果。山此可知：从数量与时间看，目f i i f 教育装备的评价工 作主要集中在最近三年左右，所做的研究工作少之又少；从研究内容看，只是涉及到教 育装备评价的作用、效能及管理中的个别方面，缺乏系统性，科学性也不商，评价理论 与方法亟待完善。 评价或评估工作由来己久，在一些行业和领域发展较为成熟，但是，在敦育界l j 于 教育装备初具规模，教育装备评价的理论和方法还不完善。考虑到教育装备的一些理论 借鉴了军事装备方面的研究结果，本人又考察了装备评价在其他领域特别是军事装备方 面的研究情况。利用“装备”与“评价”两个关键词在万方数据资源系统检索相关研究 得到8 项匹配的论文。该8 篇论文涉及剑军事装备、石油装备以及其他装备的产品效 益、企业竞争力、投资效益、科研成果以及科研项目的评价研究，从其研究内容看与教 育装备工程中的评价可比性不大。主要采用的评价方法有：专家评价法、经济分析法、 模糊综合评估方法以及层次分析法等。另外，在军事装备领域有评价相关的图书出版， 例如：国防工业出版社出版的装备效能评估概论与装备运筹学对装备的评价进 行了较为详尽的论述。目l j i 在军事装备、农业器械、医疗器械等领域评价工作丌展地较 为广泛，理论也相对成熟，尤其是军事装备的评价理论最为完善，评价工作有序进行并 逐步细化和深化，评价工程的系统化和科学性稳步发展。 2 。2 实践中的教育装备效能评价 2 2 1 教育装备效能评价实践的发展水平 在教育装备的管理工作中，开展效能评价是其常规的工作内容。为了了解教育装备 效能评价在实践中的发展水平，研究者特地编制了凋查问卷，发送到全国3 2 所学校， 每校一份，覆盖了北京、上海、广东、山东、山西、安徽，江苏以及内蒙8 个省市，收 到2 2 份，其中有效问卷1 9 份，覆盖北京、上海、广东、山东、安徽、江苏六省市，基 6 本可以体现国内教育装备效能评价的整体发展水平。问卷回收率6 8 8 、有效率 5 9 4 ，回收率及有效率都比较高，这是研究者通过联系熟悉的相关人员发放的结果。 通过分析问卷，可以发现绝大部分学校经常进行教育装备的效能评价，丌展效能评 价的单位占被调查单位的比例高达9 4 7 ，通过了解，研究者得知这项评价是上级教育 部门的硬性的要求，所以不能绝对地视为学校为改善教学而采取的主动行为。在r 丌展效 能评价的频度方面，多数学校一般是按照要求每年进行一次，只有很少的单位每学期开 展一次。一般来说，一门课程的总学时总是安排在一个学期内的，效能评价的目的在于 评估教育装备系统满足教学需要的程度，因此应该按照教学的进度丌展适当频度的效能 评价，每学期初期开展一次，在一门课程开始几个学时以后进行一次效能评价，了解系 统的效能的基本情况，以便及时发现并调整不良因素的影响，每学期期术开展一次，检 查教育装备系统最终的效能，找到提高其效能的途径，积累教学经验这样看来，被调 查单位所开展的效能评价在频度方面还是有所欠缺的，原因主要在于没有充分理解效能 评价的意义。 表格1 1 效能评价的频度 縻效能评价的频度溺经常进行 每学期1 2 次每学年一次 很少开展 隧鍪瀵一巍量，：鬟鬟鹱溺0 21 61 踽缫爹“t 豳r 霪囊鍪溯0 0 1 0 50 8 4 20 0 5 3 评价对象、评价指标体和评价者是构成评价的三要素，在对学校所玎展的效能评价 的调查中，这三者是其核心的内容，也最能反映学校效能评价发展的水平。在效能评价 的对象方面，多数被调查单位表现良好，但是，需要提高的一点就是应该加大对教学试 验室的效能评价，因为它是| 丌展教学试验的基本手段，是包含试验教学的某些课程的内 在要求。 表格1 - 2 效能评价的对象 黪效能评价的对象i 实验室单项教学设备 精密仪器其他 数量躺l o 61 5 6 隧黼上嘲溺黼0 5 2 6 o 3 1 60 7 8 9 o 3 1 6 在评价者方面，多数学校的表现不能让人满意。学生是教育装备的直接使用者，对 于教育装备效能的高低，学生也是最有发言权的。在教学过程中，教育装备与学生发生 直接的相互作用，学生在使用设备时对其优缺点有切身的体会，因此，研究者认为忽略 学生作为评价者的重要性是多数学校开展效能评价的一大缺陷。此外，从下表还可以发 现，相关领导作为评价者出现的频率相当高，这不是不利因素，但是相对来看，其他评 价者特别是学生参与评价的机会太低了，这浣明当前针对教育装备开展的效能评价的科 学性不高，不难理解，这是受我固计划经济思维的影响，忽略了效能评价的内在要求。 表格1 3 效能评价的评价者 黪爹箨徽自薯镶麟雾黪 相关领导学科教师实验教师学生其他人员 基：。、。的评魄卷。 黪。磐岛数塞i 譬黟“ 1 57 823 鬣薹蠡j ij 磁能，。藏鬣 0 7 8 90 3 6 8o 4 2 lo 1 0 5 o 1 5 7 建立评价指标体系足评价工作的最核心的内容，评价指标体系的科学性是评价客 观、公f 合理的重要傈证。被调奋学校的放能评价大多流于形式，把“良好状况”、 “故障情况”和“使用条例”作为评价的主要内容，很少涉及到与教育装笛的效能存在 更紧密关系的“学生成绩”、“学生念度”以及“试验教师的态度” 表格i - 4 效能评价的内客 效能评价l学生的 学生的实验教师良好故障使用其他 蠹的内寄l 成绩态度的态度状况情况条例 内容 戮器i 燃鬻鬻 2o21 91 7 1 44 黼磊磋溪缀 o 1 0 5oo 1 0 510 8 9 50 7 3 70 2 l l 在评价方法方面，集体讨论是一个经常出现的处理评价结果的方法，这是一种主观 性很强的方法，主要依靠评价者的意见和交流讨论形成评价结果，一般不会提取和处理 谨细的数据，因此，它的效果很容易受个别人特别是领导个人意见的影响。研究者在问 i 卷中特地设计了“其他评价方法”一栏，没有列出具体的评价方法是防止被调查者因误 解或其他原因而误选，目的在于调查是这些学校是否应用到了其他更为科学的评价方 法，但是统计结果很让人失望，1 9 所学校没有采用下表所列三种方法之外的任何一种。 表格1 5 评价方法 懋麟谖价方法鬻雾；溺 集体讨论投票表决打分统计其他评价方法 阌蘸= 豢冀i 二鬻蘸銎溯 1131 00 豳蘸霪蕤一磁饿：! 鋈鍪霪瀚0 5 7 9 o 1 5 80 5 2 6o 根据以上的统计结果，我们不难理解为什么被调查者对于其所在单位丌展的效能评 价的满意度如此之低了。 表格1 - 6 满意度 臻黔。一巍塞羼粼 完全赞同赞同但评价程序要改进没有必要丌展 豳冀鬟鬟嚣“薮霞一戮攀瀚 1 1 8o 落隧。b 毪伽t ：溺鏊鍪溷0 0 5 3 0 9 4 70 2 2 2 教育装备相关工作中所采用的评价方法的基本情况 当前，对于教育装备评价，教育装备的采购过程中经常利用评价方法为招标提供决 策支持。方法主要有两种，即：最低评标价法和综合因素法。最低评标价法是指按照经 评定的最低报价作为唯一依据的评标方法。这种方法在质量差别不明显的简易设备的采 购中较多采用，而不宜推广使用。在实际操作中，为了避免低廉设备带来的质量问题， 有时会抛弃头标，但其效果也未必尽如人意，归根结底是该评价方法的缺陷。 综合因素法是指价格加其他因素的一种评标方法。把包含价格在内的因素都列出 来，并说明各因素在评标中占的比例，各个评委独立打分，最后加总，实质上就是综合 评分法，总分最高的投标为最优标。 此外还有一种寿命周期成本法，它是指通过计算采购项目有效使用期自j 的基本成本 来确定最优标的一种方法。具体方法是在标书报价上加上一定年限内运行的各种费用， 再减去运行一定年限后的残值，寿命周期成本最低的投标为最优标。不过这种方法在教 育装备领域还较少使用。 总之，在当前的教育装备工作中，无论是设备的需求调研、招标采购、建成验收等 环节中其评价工作的科学性、规范性有待进一步加强。因此，必须完善评价的理论与方 法以指导教育装备实践。 第三章综合评价方法概述 3 1 评价理论与方法简述 3 1 1 评价的基本概念 评价，就是指依据明确的目标，按照定的标准，采用科学方法，测量对象的功 能、品质和属性，并对评价对象做出价值性的判断。评价研究的关键是要依据目标，利 用收集的资料做出价值性的判断。l i 】评价在各领域有着广泛的应用，对社会，生活和t 匕产 起着极大的作用，是人们认识和了解事物现状和发展情况的重要手段。在教育领域，有 多种形式的评价，各自发挥着不同的作用，它们是教育管理和决策的重要依据。 综合评价，就是对客观事物以不同侧面所得的数掘做出总的评价。各种形式的评价 中，综合评价是应用最为广泛的。决策是指先于实施的决定，它是人们从事各项活动时 普遍存在的一种择优手段。f 2 】在进行决策之前往往要丌展综合评价，以便为决策提供依 据。 3 1 2 评价的要素 一般来说，构成综合评价问题的要素有： l ，评价对象 对于教育装备的评价来说，评价对象是教育装各系统，一般组成因素包括：装备设 施、人员以及舰程。 2 、评价指标 评价指标是从一个侧面来反映评价对象所具有某种特征大小的度量，建立评价指标 是开展评价研究工作的重要内容，并且在实际工作中是碉绕评价指标进行资料的搜集、 整理、分析；同时、它又是评价判断的依据，依据它做出价值性的判断对于一个评 价对象，一般要从不同的方面建立多个评价指杯以便从整体上反映评价对象的运行或发 展状况。评价指标体系的建立，要围绕具体的评价对象和评价目的而定，一般来说，在 建立评价指标体系时，应遵循的原则是：( 1 ) 系统性、( 2 ) 科学性、( 3 ) 可比性、 0 ( 4 ) 可测取性( 可观测性) 、( 5 ) 相互独立性。建立评价指标有多种方法，但归根结 底，都是根据领域内的专家、一线工作人员以及其他相关人员的意见进行选择性判断和 对比形成的结果。 3 、权重系数 相对于某种评价目的来说，评价指标之问的相对重要性程度是不同的，为了合理地 反应不同评价指标对综合评价结果的贡献，可以对每一个评价指标赋予个权重系数以 体现各评价指标之i 日j 的帽对重要性。 4 、综合评价模型 所谓多指标综合评价，是通过一定的数学模型或算法将多个评价指标“合成”为一 个整体性的综合评价值。可用于“合成”的数学方法很多，关键在于如何根据评价目的 及被评价系统的特点选用合适的合成方法，也即确定合适的评价模型。 5 、评价者 评价者可以是某个人或团体，评价目的的给定、评价指标的建立、评价模型的选 择、权重系数的确定都与评价者有关。因此，评价者在评价过程中的作用是不可忽视 的。评价者因评价对象和评价内容而异，但一般包括组织领导机关、研究人员、专家、 同行等。 此外，也有人认为评价是由三种要素构成的，即评价对象、评价指标体系和评价 者，这种观点把评价指标、评价标准和指标权重统称为评价指标体系。例如，李克东在 教育技术学研究方法一书中就做了如此表述，并给出了三要素的关系图，如下所 刁x ： 3 1 3 评价的特征 1 、评价的目标性 目标分解 图表3 , - 1 评价研究要素之间的关系l 】 评价的特征表现在评价的目标性与价值性的判断。评价的目标性是指评价研究是一 项具有明确目的和目标的研究活动。评价的目的是指通过评价活动所期肇达到的结果， 通常有三种不同类型的期望结果。 ( 1 ) 、比较评等。这属于相对性评价，目的是通过对两个不同对象的评价，以其 对这两个对象的差异性做出判断。假如用a 和b 代表西个不同对象，比较评等就是要判 断是否存在a b 或a a o 。 ( 3 ) 、发展l i 匕较。这属于自我评价，是以自身的前后状况进行比较，通过对对象a 不同时期的评价研究，判断对象a 是否存在a 2 al 的判断。 评价目标是做出上述评价结论的依据。在研究中常用的评价依据是：条件水平、品 质水平、效果水平、管理水平。 2 ，评价的价值判断性 评价研究的价值判断性表现在评价的过程中，需要根据目标分解出若干评价要素 ( 项目) ，由评价者依据一定的标准，对评价对象的各种功能、品质和属性进行等级的 判断。在获得逐项的评价结果之后，还要根据各项目的重要程度制定权重，把各项目的 评判等级与权重综合，从而对总体做出等级比较、达到状况或发展程度的判断。【j 】 3 2 评价理论和方法的发展情况 评价方法是在社会生产中产生的，由简单到复杂逐渐发展最初较多使用的是价值 综合指标用来衡量事物的发展情况。利用价格作为评价不同事物的共同度量，可以综合 事物多方面的指标，使之具有相互之间的可比性。随着社会经济的进一步发展，管理的 重心由单纯地追求高产出而转向注重效益，即追求以尽量少的投入而得到较高的产出。 用价值综合指标进行评价就不能满足这一要求。为了从效益角度对事物进行综合评价， 就产生了指标体系方法，即用不同的指标对事物发展的多个方面分别予以反映。这种指 标体系法虽能全面反映某一事物的发展情况，但在不同事物赳比较时又遇到了困难。因 为各个指标的同时使用，经常会发生不同指标之间相互矛盾的情况，因而不能对被评价 事物作时问和空问上的整体对比。由于指标体系法的不足，人们又发展了多指标综合评 2 价方法，即把反映被评价事物的多个指标的信息综合起来，得到一个综合指标，由此来 反映被评价事物的整体情况，并可以进行横向和纵向的比较。 近年来，围绕着多指标综合评价，其他领域的相关知识不断渗入，使得多指杯综合 评价方法不断丰富，有关研究也不断深入。主要表现在以下几个方面： 第一，评价所用的指标是多种多样的，评价的问题也不是单一的，2 0 世纪6 0 年代 产生的模糊数学在综合评价中得到了较为成功的应用，产生了特别适合于对主观或定性 指标进行评价的模糊综合评价方法。 第二、多指标综合评价中比较难以解决的是综合时各指标闻信息的重复问题，近几 十年来迅速发展的多元统计分析为解决这一问题提供了可能性，因而产生了主成分、因 子评价法，另外判别分析、聚类分析也是较好的定量方法。 第三、由于评价对象的多样性及评价的决策作用，多目标决策方法也融入到综合评 价中来，比如功效系数法、a h p 法等，开阔了评价方法的思路。 第四、运筹学的新发展产生了将投入和产出指标分离开来评价部门间相对有效性的 数据包络分析方法，在对非单纯盈利部门进行评价时取得了很好的效果。 第五、信息论、灰色系统理论等也渗透到综合评价中来，产生了熵值法、灰色关联 度评价法等。 第六、多维标度分析及空间统计学的发展提高了统计分析技术上的整合能力，使多 目标综合评价方法的应用更加深入。 4 1 到目i i 为止，已经出现了多种的综合评价方法，但这并不意味着综合评价方法和理 论已十分完善，还有不少的问题正在不断研究和完善之中，或者还有待进一步的解决。 综合评价方法很多，我们在实际中如何选用? 针对同一问题，不同的方法会得到不同的 结果，如何解释? 如何辨别不同方法对不同问题的优劣? 如何衡量综台评价结果的客观 准确性? 等等问题还需要我们迸一步探索和研究，使综合评价方法和理论不断丰富和完 善。 在学者的著作中。我们可以考察评价理论和方法的具体发展情况。郭亚军教授在其 著作综合评价理论与方法一书中，对于综台评价展开了全面的论述，从评价的意 义、指标及其权重的确定、评价模型等方面，并结合实例进行了具体的实施，可以说， 该书代表了当前综合评价理论和方法的发展水平。此外还有其他学者在模糊综合评价理 论、综合评价方法等方面取得了很多成绩，为评价理论和方法的发展做出了巨大的贡 献。在军事装备的效能评价方面，郭齐胜等人编著的装备效能评估概论一书详细分 析了军事 能建立了 借鉴束进 意义的。 3 。3 目 装备的各单项效能的内涵，并给出了效能测量的指标，针对单项效能和综合效 评价模型，此外，还研究讨论了多种敲能评价的方法。这些研究成果都是可以 行教育装备效能评价的，对于建立教育装备效能评价理论和方法也是具有重要 前常用的几种评价方法 3 3 1 层次分析法概述 l 、层次分析法的产生背景 定量分析方法对于社会科学的发展产生了臣大的促进作用，因此越来越受到重税， 特剐是最优化模型，曾一度在决策问题中得到相当广泛的应用。但在应用过程中，也出 现了一些问题，主要体现在以下几个方面。 第一，社会问题的复杂性决定了难以构造合适的模型。即使构造出数学模型，有时 也难以准确说明问题或者难以执行。 第二，决策问题带有相当多的主观性，而这很难体现在最优化模型中。 第三，庞大的模型成本太大，难以理解。 由于存在上述问题，人们重新思考数量方法在社会科学中的作用，特别是对于决策 问题，如何既考虑数学分析的精确性，又考虑人类决策思维过程及思维规律，即定性与 定量相结合，j 下是在这种背景下，产生了层次分析法。【5 】 2 、层次分析法的发展 层次分析法( t h e a n a l y t i c h i e r a r c h y p r i c e s s ，简称a h p ) 是由美国运筹学家、匹兹 堡大学萨第( t l s a a t y ) 教授于本世纪7 0 年代提出的，他首先于1 9 7 1 年在为美国国防 部研究“应急计划”时运用了a h p ，又于1 9 7 7 年在国际数学建模会议上发表了无结 构决策问题的建模一层次分析法一文，此后a h p 在决策问题的许多领域得到应用， 同时a h p 的理论也得到不断深入和发展。目前每年都有不少a h p 的相关论文发表，以 a h p 为基本方法的决策分析系统一“专家选择系统”软件也已早推向市场，并同益成 熟。 a h p 于1 9 8 2 年传入我国。在当年召丌的中美能源、资源、环境会议上萨第教授的 学生高兰尼柴( h 。g h o l a n m e z h a d ) 向中国学者介绍了这一新的决策方法。随后，许树柏 等发表了国内第一篇介绍a h p 的文章“层次分析法一决策的一种实用方法”( 1 9 8 2 1 4 年) 。此后，a h p 在我国得到迅速发展，1 9 8 7 年9 月我因召丌了第一届a h p 学术讨论 会，1 9 8 8 年在我国召丌了第届国际a h p 学术会议，目前a h p 在应用和理论方面得到 不断发展与完善。 随着国内第一篇介绍a h p 的文章的发表，国内对a h p