（技术经济及管理专业论文）科研团队绩效评价系统研究.pdf

浙江t 业人学坝i 学位论义 科研团队绩效计价系统州究 科研团队绩效评价系统研究 摘要 我国科技人员及r & d 经费的投入是巨大的，但科研产出却不是很理想。这与 我国还未建立起有效的科研绩效评价机制有关。科研活动作为一项既分工又合作 的系统工程，评价团队的绩效比评价个人的作用更具有意义。在信息高速发展的 今天，建立一个基于管理流程的科研团队评价信息系统，对提高工作效率和科研 管理水平都具有重要的意义。 本文采用数据包络分析方法( d e a ) 对科研团队的绩效进行评价。通过以科 研团队的科技人员数、经费总支出数、仪器设备金额作为投入指标，成果数量、 经济效益、人才成长作为产出指标进行有效性分析，以三年为一周期进行评价， 。确定各科研团队丌展的科研活动是否有效。7 设计的科研团队绩效评价系统从分析系统角色及用例出发，以项目及成果管 理为中心，实现包括项目申报、项目执行管理、成果申请、成果登记、成果转化、 科技统计、报表管理等多项信息的管理职能，达到了对团队的自动评价的效果。 本文采用农科院部分科研团队的数据，分别用农科院现正使用的管理办法以 及本文所论述的d e a 方法进行比较评价，认为采用d e a 方法更有利于提高资源的 利用率。文章最后认为科研单位现有固定资产的管理模式存在不足之处，同时还 应该加强在职人员的继续再教育工作。 关键字：科研团队绩效评价d e a 管理信息系统 浙江t 业人学顿1 ：学位论文科利团队绩效评价系统研究 p e r f o r m a n c ea p p r a is a ls y s t e mo f s c i e n t i f i cr e s e a r c ht e a m a b s t r a c t t h ei n p u tf o rr e s e a r c hs t a f fa n dr & di sn u m e r o u sw h i l et h eo u t c o m ei sn o t s a t i s f a c t o r y ，w h i c hi sp a r t l yo w i n gt ot h ea b s e n c eo fe f f e c t i v er e s e a r c ho u t c o m e e v a l u a t i o nm e c h a n i s m s i n c et h er e s e a r c ha c t i v i t i e sa r es y s t e m a t i ca n di n v o l v e d i v i s i o no fl a b o ra n dc o o p e r a t i o n ，t h ee v a l u a t i o no ft h et e a mi so fm o r e s i g n i f i c a n c et h a nt h a to fi n d i v i d u a l s a n dt h ee s t a b l i s h m e n to far e s e a r c ht e a m e v a l u a t i o ns y s t e mi sv e r y i m p o r t a n tf o ri m p r o v i n ge f f i c i e n c y a sw e l la s m a n a g e m e n tc a p a c i t y t h i sd i s s e r t a t i o na d o p t sd e ai nt h ee v a l u a t i o no ft e a mp e r f o r m a n c e w i t h t h en u m b e ro fr e s e a r c hs t a f f , f u n de x p e n d i t u r e sa n de q u i p m e n t sv a l u ea st h e i n p u ti n d e xa n dt h en u m b e ro fo u t c o m e ，b e n e f i ta n dt a l e n tc u l t i v a t i o na so u t p u t ， t h i sm e t h o dw i l lr e v i e wt h ee f f e c t i v e n e s so f s c i e n t i f i ca c t i v i t i e se v e r yt h r e ey e a r s t h i sp e r f o r m a n c ee v a l u a t i o ns y s t e m a n a l y z e st h er o l e sa n dc a s e s ，a n di s o r i e n t e dt o w a r d s p r o j e c t s a n do u t c o m e m a n a g e m e n t t h r o u g hp r o j e c t a p p l i c a t i o n ，p r o j e c te x e c u t i o nm a n a g e m e n t ，o u t c o m ea p p l i c a t i o n ，o u t c o m e r e g i s t r a t i o n ，o u t c o m ei n d u s t r i a l i z a t i o n ，s t a t i s t i c sa n dr e p o r tf o r m sm a n a g e m e n t ， e t c t h i ss y s t e mm a k e ss a t i s f a c t o r ye v a l u a t i o no ft h er e s e a r c ht e a m t h i sp a p e ra d o p t sd a t ao fs o m er e s e a r c ht e a m so fz a a s ，a n dm a k e s e v a l u a t i o nb ym e a n so fc u r r e n t l yu s e dm e t h o d o l o g ya n dd e ar e s p e c t i v e l y t h e r e s u l ts h o w st h a td e ai sb e t t e ri ut e r m so fe n h a n c er e s o u r c e su t i l i z a t i o nr a t i o a t t h ee n do ft h ed i s s e r t a t i o n ，t h ea u t h o rp o i n t so u tt h ed e f i c i e n c yo fc u r r e n t m a n a g e m e n tm e c h a n i s m ，a n dt h en e c e s s i t yo fs t r e n g t h e n i n gt h er e e d u c a t i o no f t h ei n - s e r v i c ee m p l o y e e s 塑垩二些叁兰塑! ：兰竺堡兰 ! 型! 堕坠竺竺鲨竺墨竺竺! ! k e yw o r d s ：s c i e n t i f i cr e s e a r c ht e a m ：p e r f o r m a n c ea p p r a i s a ls y s t e m ；d e a m i s i i 浙江工业大学 学位论文原创性声明 本人郑重声明：所提交的学位论文是本人在导师的指导下，独立进行 研究工作所取得的研究成果。除文中已经加以标注引用的内容外，本论文 不包含其他个人或集体已经发表或撰写过的研究成果，也不含为获得浙 江工业大学或其它教育机构的学位证书而使用过的材料。对本文的研究作 出重要贡献的个人和集体，均己在文中以明确方式标明。本人承担本声明 的法律责任。 作者签名： 臼五莩日期：狐缉i l 月旷日 学位论文版权使用授权书 本学位论文作者完全了解学校有关保留、使用学位论文的规定，同意 学校保留并向国家有关部门或机构送交论文的复印件和电子版，允许论文 被查阅和借阅。本人授权浙江工业大学可以将本学位论文的全部或部分内 容编入有关数据库进行检索，可以采用影印、缩印或扫描等复制手段保存 和汇编本学位论文。 本学位论文属于 l 、保密口，在年解密后适用本授权书。 2 、不保密日。 ( 请在以上相应方框内打“4 ”) 作者签名：诌t 4 - 导师签名： 纠7 钆 日期：扒辞f l 月旷日 日期：渤l 年旺月；d e t 浙江t 业人学硕士学位论文科研团队绩效计价系统 i j 究 1 绪论 1 1 研究背景 近年来，我国科学技术发展迅速，科学技术投入稳步增加。中国科技统计网 统计数掘显示，2 0 0 3 年我国的研究与试验发展( r d ) 经费支出总额达到1 8 6 亿 美元，继续保持世界第六位。而近两年的投入增速更是惊人，2 0 0 4 年全社会科 学研究与试验发展经费总支出为1 9 6 6 3 亿元人民币，比上年增长2 7 7 ，与 当年国内生产总值( g d p ) 之比为1 2 3 ，按科学研究与试验发展人员计算的人 均经费支出为1 7 1 万元人民币；2 0 0 5 年，r & d 经费总支出为2 4 5 0 亿元人民币， 比上年增长2 4 6 ，与当年国内生产总值之比为1 3 4 。按研究与试验发展人员 计算的人均经费支出为1 8 万元人民币。 另从中国科协第七次全国代表大会上获悉2 ，至2 0 0 5 年底我国科技工作者总 数己达2 1 7 4 万人，居世界第一位。其中，研发人员总数达1 2 02 - 人年，居世界 第二位。 世界知识产权组织公布的2 0 0 5 年全球专利报告显示3 ，中国申请的专利排全 世界第十位，占全部的1 8 。依据中华人民共和固国家知识产权局提供的专利授 权数量统计信息，1 9 8 5 年4 月1 同至2 0 0 5 年1 月3 1r 的国内申请人和国外申 请人的发明、实用新型、外观设计的中国专利授权情况如表i 1 ： 表i 1 国内外申请人的中国专利授权情况 国内申请人国外申请人 专利授权类别小计 1 j 1 ：数 比例 什数 比例 发明6 8 4 0 43 6 o 1 2 1 7 9 06 4o 1 9 0 1 9 4 实j j 新挚 6 5 5 0 5 99 9 4 4 1 2 40 6 6 5 9 1 8 3 外观设计 3 8 6 9 4 39 06 4 0 1 2 094 4 2 7 0 6 3 总计1 1 1 0 4 0 6 8 7 0 1 6 6 0 3 41 3 0 1 2 7 6 4 4 0 从表中可以看出，国外申请人发明专利授权量接近于国内申请人的2 倍，国 1 2 0 0 5 年全国科技经费投入统计公报h t t p ：m s t s o r g c n t j b g t j g b d o c u m e n t 2 0 0 5 2 0 0 6 0 9 2 2 h t m ，2 0 0 6 年9 月1 4 日 2 邹卢文下敏丽我国科技人员总数世界第一h t t p ：n e w s s i n a c o m c n c 2 0 0 6 0 5 2 5 0 9 1 1 9 0 2 1 2 8 4 s s h t m l ，2 0 0 6 年0 5 月2 5 日 3 2 0 0 5 年中国中请专利2 4 5 2 项全球排名第十h t t p ：w w w s n w e bc o m g b m a r k e td a i l y 2 0 0 6 0 2 2 7 0 2 2 7 p 0 0 5 d 0 0 1 p h p ，市场报( 2 0 0 6 0 2 2 7 第5 版) 4 中国科学院综合计划局中国科学院专利分析报告h t t p ：w w w n i p s o o n g n w z s c q z l x x i p z l y j b g p 0 2 0 0 5 1 2 2 0 4 7 0 2 2 9 6 8 8 3 5 3 d o c i 浙江丁业人学坝i 学位论义 ：团队绩设计价系统圳究 外更多的是发明专利抢滩中国。 表1 22 0 0 0 年部分国家r ? c d 经费和人员总数与中请专利数之比 加拿 意大 指标中国美国开本德国英国 法国 大利 总经费 8 9 o6 91 0 54 o5 o9 31 0 51 1 3 ( 百力j 美元项) 总人数 1 5 9 2 63 3 19 5 43 8 4 2 9 89 1 o 1 0 3 01 1 0 9 ( 人年项) 注：数据米渊丁中国科技统计网：总经费根据各国购炙力平价折算成美元计算，l 美元 = 1 7 4 元人比币。 从表1 2 的数据可以看出，中国取得每件专利所花的平均时问和经费成本都 是比较高的。中国r d 活动总投入的经费总数与发明专利数目之比为8 8 9 1 ，而 效率最高的德国为4 0 3 ，我国研究一项专利所花费的成本是德国的2 2 倍；同样， 研究一项专利所用的平均时阳j 为英国的5 3 倍。 从以上几组数据的来分析，我国r & d 经费的投入是巨大的，增长也是明显的， 从事科研的科技工作者也是最多的，但其产出结果是不理想的。究其原因有很多 方面，但我认为这与我国还未建立起有效的科研绩效评价机制有很大关系。 二战以来，研究与开发活动的组织管理有两种典型模式：前苏联的计划任 务制和美国的项目课题制。任务制即依掘计划体制和行政手段来调配和管理资 源，这一模式有利于集中资源实现一些近期和急需解决的目标，但实践证明这一 模式不能与市场紧密结合，难以适应研究与发展活动对创新和提高效率的更高要 求：而美国的项目课题制更符合科学技术的发展规律和市场经济的要求，更有利 于创新和效率的提高，但它需要较完善的市场经济体制和法律体系，以及更科学 的科研组织管理程序，如对科研执行效果的评价等。 我国科研管理体制最仍采用的是静苏联的“计划任务制”。在这种政府主导 型的科研制度下，科研活动往往是为了科研而科研，不注重市场的需求，不注重 绩效评价。随着科技体制改革的不断深入，原有的管理制度己经不适应科技发展 的需要。2 0 0 2 年，我国国务院办公厅转发了由科技部、财政部、国家计委、国家 经贸共同研究制定的关于国家科研计划实施课题制管理的规定。由此，我国 科研项目丌始全面实行课题制管理。“课题制”成为我图科研管理体制发展的主 流趋势，作为课题制管理重要一个环节的科研绩效评价越来越受到重视。 科研评价按其评价的对象不同可分为科技政策评价、科技计划评价、科技项 目评价、科技机构评价、科技人员评价等”1 。目前，国内外对科研评价的研究很 多，但主要都是围绕科技人员、科研机构( 组织) 、科技项目的评价o ”1 ，而对 2 浙江t 业人学磺仁学位论文 科研团队绒效评价系统珂f 究 科研团队的评价研究还比较少。而对评价不同的科研单位( 组织) 时，由于不同 的机构所享受的政策因素、行业特性、地区发展水平等环境因素影响较大，评价 会失去公平性。从这点上来说，同一组织内不同的科研团队受环境因素不同的影 响就少些，其绩效的评价更具可比性。 现代科研活动是一项既精细分工又密切合作的系统工程。随着时代的发展， 科学问题的研究越来越社会化，科学研究与发展活动的最重要特征成为“社会化 集体协作”。“社会化集体协作”对科研活动的组织与协调提出了更高的要求。 在课题制模式的研发活动过程中，除了课题组内部各个方面、各个环节需要组织 安排和协调之外，还需要协调课题组与外部社会大系统各个方面的关系。在这些 组织、安排与协调活动即科研管理日益繁重和重要的今天。只靠课题组中某个人 的智慧而没有其他成员的积极参与，只靠提高成员的个人能力而没有有效的团结 协作是难以应对竞争日趋激烈的动态环境。而团队管理作为西方管理界极力支持 的一种新型管理思想，强调组织内部成员之问建立良好的人际关系对组织目标的 实现具有重要作用。从这方面来说，强调团队的作用比重视某个人的能力更有 价值，科研团队的共同努力远比个人的能力更具有创造力，因此，评价团队的绩 效远比评价个人的绩效要有意义。 目前，我国科研管理工作，总的来说还处在计划经济体制模式下。从管理思 想、管理方法、管理工具和手段，都无法适应知识经济社会对科研管理工作提出 的要求，无法迎接知识经济带来的种种挑战”“o “1 。从管理思想和管理方法上看， 是缺乏有效的科研评价工具，缺乏权威、全面、客观的科研评价指标体系。国内 有些科技管理部门不能有效采用客观、科学的、适合自身发展的定量方法去评价 自己( 如科学院、研究所、大学等) 的科研工作水平以及科学家、工程师的科研贡 献，因而不能很好地激发我国科研工作的竞争机制和科技人才科研热情。当今时 代是信息化的时代，随着i n t e r n e t i n t r a n e t 管理信息系统等以计算机和通信技 术为核心的现代信息管理技术的迅猛发展，各个管理领域丌展信息化管理成为可 能和必然。现代企业信息化管理己经由m i s 、m r p ，m r p i i 发展到e r p 、价值链管 理、客户关系管理等，己经从以前的摸索、试验、推广阶段发展到现在的较为成 熟阶段。各级政府部门也都建立了相应的网上办公系统、政务公开系统、办公自 动化系统等。相对来说科研单位对信息系统的应用起步较晚，不少科研单位( 特 别是地方科研单位) 至今未建立起信息系统，而且即使建立，其科研管理信息系 统多采用c s 模式的体系结构，且功能单一，虽然曾经协助和支持过单位科技管 理人员同常业务处理工作，减轻了科技处工作人员和科研人员的工作。但由于不 是以创新的流程为基础，与科研管理业务结合的不好，系统的运作往往和实际的 管理相脱节：系统还只处在单纯的业务处理层面，无法系统化地处理和利用信息、 提供交流的渠道o 。 浙江t 业人学倾 学位论文科删f 团队锁效计价系统研究 1 2 研究目的和意义 随着我国政府在科学研究领域投入的急剧增长，科研评价已经不只是科学系 统自身关注的重要问题，而成为政府和社会共同关注的重要问题。合理有效的科 研评价机制对于优化科研资源的配置、激发研究人员的创新潜力、营造科技创新 环境以及推进国家科技创新体系的建立和发展都具有重要的意义。科学研究领域 的评价活动依赖于合理规范的评价环境和机制，更需要与科学研究的特点相适应 的评价方法。科学合理的科研评价理论和方法有利于科技管理者准确公f 地掌握 科研单位的绩效信息。有利于科研单位正确评价自己在同行中的科技地位，从而 便于找差距、挖潜力。也有利于合理激励科研团队的科研积极性，让他们以更大 的努力投入到科研工作中去。对科研团队科学合理的评价则可以有效地激发被评 价者的积极性，增加他们的成就感和荣誉感，对于管理者来说可以充分体现公平 竞争的原则，激励与约束机制得以很好地实现。 本文探讨的“科研团队绩效评价系统”是指在科研单位内部，围绕科学研究 和成果转化这一主要过程，采用合理的投入产出指标和权重，评价团队几年来丌 展科研活动中投入与产出的相对效率，其整个过程由计算机自动完成。科研团队 绩效评价系统作为一个新型的管理信息系统，是一个能进行管理信息收集、传输、 储存、加工、维护和使用的系统。 科研团队绩效评价系统是科技管理走向信息化、科学化、制度化和动态化， 实现及时准确地评估科研团队绩效水平的重要手段。科研团队绩效评价系统应用 于科研管理领域，对合理利用新时期迅速膨胀的科研信息，促进科研与生产等的 丌展，帮助各级领导及管理人员对科研活动做出合理决策和控制等方而均有深远 的意义。科研绩效评价系统将极大地提高科研管理的科学性、预见性，提高整个 研究系统的工作效率和客观性，大幅度提高研究工作和管理工作的能力，促进各 学科建设和发展，加快出成果、出人才和成果转化的速度，最终全面提高科研的 水平和效率。 1 3 论文的组织及主要研究内容 第一章也即本章，对科研团队绩效评价的有关研究背景以及系统建立的意 义进行了阐述，指出建立科研团队绩效评价系统具有重要的意义。 第二章本文所要讨论的科研团队绩效评价系统涉及的一些理论综述，对科 研团队的绩效评价以及目前应用的科研评价方法等作了论述。 第三章对d e a 方法作了论述，提出了d e a 方法的指标选取以及评价过程。 第四章科研团队绩效评价系统的分析设计。包括单位业务需求分析、对业 务活动的建模分析以及系统的网络，实现计算机的自动化评价。 第五章实例分析，运用浙江省农科院部分团队数据，分别用浙江省农科院 4 浙江t 业大学硕士学位论文科研团队缬效评价系统研究 现有评价方法以及d e a 方法评价，对两种结果进行对比，并提出了意见。 第六章本文的总结及今后发展的一些建议。 浙江t 业人学硕。卜学位论文科研团队绩效评价系统研究 2 科研团队绩效评价的有关理论综述 2 1 科研团队 随着科学技术的发展，科学问题的研究越来越社会化，科学技术研究不再是 手工作坊式的个体研究，而是具有一定规模的集体研究。科研人员的工作不再是 分散、封闭的形式，而是强调协作、开放的形式。科学创造不再是个人英雄主义 的模式，而更多的是集体智慧的结晶。科学研究的集体性、丌放性给科研管理带 来了挑战，以往的研究小组的组织形式难于适应新的变化和挑战，而强调集体智 慧的团队运作适应了科学研究的变化和要求。 所谓团队”“，就是由少数有互补技能，愿意为了共同的目的、业绩目标和 方法而相互承担责任的人组成的群体。团队运作的理念在于培育对人的尊重与共 同的信念。斯蒂芬罗宾斯认为，团队是指一种为了实现某一目标而由相互协作的 个体所组成的正式群体。这一定义突出了团队与群体不同，所有的团队都是群体， 但是只有f 式群体才能是团队。并且正式群体分为命令群体、交叉功能团队、自 我管理团队和任务小组。他对团队与普通群体的区别做了深入研究，得出四个结 论：一是群体强调信息共享，团队则强调集体绩效；二是群体的作用是中性的( 有 时消极) ，而团队的作用往往是积极的；三是群体责任是个体化，而团队的责任 既可能是个体的，也可能是共同的；四是群体的技能是随机的或不同的，而团队 的技能是互补的。 而科研团队是以科学技术研究与开发为内容，由为数不多的技能互补、愿意 为共同的科研目的、科研目标和工作方法而相互承担责任的科研人员组成的群 体。科研团队罩的科研人员应该能自我管理并且愿意为共同的目标而相互承担责 任。科研团队罩的权力办即影响力主要来源于专业的影响力，决策力掌握在拥有 专门知识的成员罩。在我国的科研体制管理上，课题组织、管理和研究活动多以 课题组为基本活动单位进行的，因此，科研团队在某种程度上可以看成为课题组 或学科1 。 科研团队与非团队运作的科研群体的区别在于相互依赖的程度和有多少共 性。相互依赖程度不高，个人目标与组织目标不一致或者组织目标不能凌驾于个 人目标之上的科研群体不是科研团队；只有具有相当的依赖程度并且群体目标凌 驾于个人目标之上而达成共识的才。称得上科研团队“”1 。 科研团队必须关注的六个关键基本因素：人数不多、互补的技能、有意义的 目的、有吸引力的目标、达成共识的共同方法、相互承担责任。这六个关键因素 中，第一层次是目标导向，包括形成有意义的目的和有吸引力的目标；第二层次 是团队组建的内在要求，包括人数不多和拥有互补技能；第互层次是运作层次， 包括捌有共同方法和相互间承担责任。 6 浙江t 业人学硕l 学位论文 科研团队绩敛订价系统研究 2 2 绩效评价 2 2 1 绩效 人们对绩效概念的认识仍然存在分歧，目前对绩效( p e r f o r m a n c e ) 的界定主 要有几种观点： 1 、绩效是结果。这种观点以b e r n d i n 和k a n e 等人为代表，他们认为绩效应 该定义为工作的结果，因为这些工作结果与组织的战略目标、顾客满意度及所投 资金的关系最为密切。 2 、绩效是行为。这种观点是以m u r p h y 和c o m p b e l l 等为代表，他们认为绩 效是与一个人在其中工作的组织或组织单元的目标有关的一组行为，它应该与结 果区分丌，因为结果会受系统因素的影响。 3 、绩效是结果与过程( 行为) 的统一体。这种观点认为： 结果( 做什么) + 行为( 如何做) = 高绩效 从实际运用来看，这种定义是很有意义的，它不仅能更好地解释实际现象， 而且更易被大家所接受。 2 2 2 绩效评价 绩效评价又称绩效考核、绩效评估或考核，是对职工工作绩效进行管理的主 要手段，也是管理人员承担的一项重要管理活动。绩效评价是指考评主体对照工 作目标或绩效标准，采用科学的考评方法。评定职工的工作任务完成情况，职工 的工作职责履行程度和职工的发展情况，并且将评定结果反馈给职工的过程。 对于绩效考核，不同的人有不同的定义，主要有以下几种描述： 1 、对组织中成员的贡献进行排序； 2 、为客观制定职工的能力、工作状态和适应性，对职工的个性，资质、习 惯和态度以及对组织的相对价值进行有组织的实事求是的考评，它是考评的程 序、规范、方法的总和： 3 、对职工现任职务状况的出色程度以及担任更高一级职务的潜力，进行有 组织的定期的并且是尽可能客观的考评： 4 ，人事管理系统的组成部分，由考核者对被考核者的同常职务行为进行观 察、记录，并在事实的基础上，按照一定的目的进行的考评，达到培养、开发和 利用组织成员能力的目的； 5 、定期考评和和考察个人或工作小组工作业绩的一种丁f 式制度。 归纳起来看，绩效考核包括三个层面的含义： l 、绩效考核是从企业经营目标出发对职工工作进行考评，并使考评结果与 7 浙江丁业人学硕i 。学位论文 科研团趴缋效计价系统州究 其他人力资源管理职能相结合，推动企业经营r 标的实现： 2 、绩效考核是人力资源管理系统的组成部分，它运用一套系统的和一贯的 制度性规范、程序和方法进行考评； 3 、绩效考核是对组织成员在同常工作中所表现的能力态度和业绩，进行以 事实为依掘的评价。 2 3 科研评价 2 3 1 科研评价的基本概念 科学研究活动是人类探索自然奥秘、认识自然的理性活动，是人类实践活动 的种特殊形式。一般认为，科研评价是指存在于科学研究活动中的各种有关评 价的活动，也就是人们把握有关科学研究的政策、计划、研究过程、以及所取得 成果的意义或价值的一种认识性活动。科研领域中的各种评价活动，有时也被人 们称为评估或评审，在此我们把它称为评价“3 “川“”。评价是一种特殊的人类认识 活动，它不是创造价值，而是对已经存在的价值作出判断。评价是对价值的判断， 显然，不同的客体所具有的价值是不同的，而不同的主体对价值的感觉和取舍也 是不同的。 科技评价是对科学技术活动及其产出和影响的价值进行判断的认识活动。必 须强调的是，科技评价是科学共同体运行的内在机制，同时，科技评价也是科技 管理的工具，是对科学技术活动进行监测、调控、管理的手段”。 科技评价伴随着科学技术活动而存在，只要科学技术活动在进行，就会有科 技评价活动。科学技术活动的形式是多种多样的，既有不同层次的科技活动， 也有不同学科领域的科技活动和不同类型的科技活动。与科学技术活动有关的社 会主体也是多元的，既包括从事科技活动的科学家，也包括从事科技活动的工程 技术人员、设计人员、科技管理人员和科技辅助人员，也包括采用科学知识和技 术的社会组织和人群，还包括以科学技术及其对社会影响为对象的各学科研究人 员和社会中介组织。科学技术的产出形式同样是多样的，既有论文著作，也有专 利技术和非专利技术，既有知识形态的产出，也有实物形态的产出。科学技术产 出的影响也是多元的，既包括对科学技术自身发展的影响，也包括对社会进步、 经济发展、国家安全等各方面的影响。因此，科学技术评价的内容和形式也是多 样的，例如论文引用、命名、科技奖励、院士评选、职称评定、项目评审、成果 鉴定等。 浙江丁业人学硕上学位论文科研团队绩效评价系统研究 2 3 2 科研评价的基本功能 与其他类型的评价活动一样，科研评价具有四种基本功能j ： 1 、判断功能 评价的基本功能是判断，也就是判断客体所具有的价值及其对主体的满足程 度。在评价中，判断主要表现为两种类型，一是要作出是否有价值的判断，二是 要作出价值的大小和满足程度的判断。 2 、选择功能 选择的功能主要表现为要根据主体要求，对若干个客体所具有的价值在满足 主体要求的程度进行比较、排出顺序或选择出满足程度最高者。在一些竞争性评 选( 如院士评选、科技奖励、科技项目招标等) 中，评价的选择功能表现得尤为 突出。 3 、预测功能 预测功能即通过评价活动预测经过某种努力可能获得的价值。例如在科技计 划与项目的管理的过程中，都需要利用评价的预测功能，在立项前要预测根据计 划中的投资、技术路线、研究团队、研究条件、应用前景等估计，预测原定目标 是否能够实现，在过程评估中也要根据项目已经完成的情况和外部因素变化情 况，对项目目标能否实现作出预测。 4 、导向功能 评价是一种管理工具，评价活动的目的不仅仅是描述和判断实践活动的价 值，而且也是对被评价者的一种引导，使之向着符合价值主体目标的方向发展。 在实践中，管理者常常通过评价活动本身，通过在评价中使用的指标、指标的增 删及其权重的选择，向被评价者发出引导性信号。因此，导向功能也是评价活动 的最基本、最重要的功能之一。 2 3 3 科研评价的基本要素 科研评价活动设计时必须认真分析四个问题，也就是科技评价设计的四个基 本要素。这四个基本要素也是构成科技评价体系的基本要素。 l 、主体系统 主要包括价值主体和评价主体。其中价值主体是主体系统的核心，不同的评 价活动有不同的价值主体。为国家开展的评价活动必然要以国家目标和国家利益 为基本价值取向，国家就是这次评价的价值主体。同理，科技评价的价值主体还 有地区、组织、个人、学科、部门、不同利益集团。评价主体是具体一次评价活 5 国家科技评估中心h t t p ：w w w n c s t e o r g 9 浙江下业人学硕 擘位论文科训团队锁效评价系统m 究 动的实施者，不同的评价活动可以选择不同的评价主体。例如对于学术论文的价 值判断主要依靠科学共同体，特别是应当通过本学科的同行专家对该论文的引用 状况作出判断，那么科学共同体就是这类评价活动的评价主体。同理，不同的科 技评价活动中，政府、企业、研究机构、社会公众、中立的评估机构等都可以成 为科技评价的主体。 2 、客体系统 主要包括评价客体和价值客体。评价客体也就是在评价活动中的被评价的对 象，在科技评价活动中，常见的评价客体包括科技项目、研究机构、科技人爿等。 而价值客体则是反映在客体上的具有主体所需的价值属性，一般以相应的科技指 标体系来描述。 3 、目标系统 评价体系中，目标系统具有决定性的作用，目标系统决定了各种评价活动要 达到的目的和所依据的价值标准。不同的评价目标需要不同的评价方法，决定了 价值主体的需要和价值所在，决定了由评价客体所反映的不同的价值客体的内涵 和描述方式，决定了需要选择什么样的评价主体。科技评价实践中出现的最多的 问题，并不是人们所感觉的评价方法问题( 例如选择什么指标和权重的问题) ， 而是评价的目标不明确，也就是说不知道为什么要丌展某项评价活动，以及不明 确所开展的评价活动的基本属性。例如，战略评价就和一般的业绩评价有很大差 异，又如，对一批单位的排序性评价和对单个单位的诊断性评价虽然都是以科研 单位为基础的评价，但在主体选择、客体属性、价值标准和评价方法等方面都有 很大区别。 4 、参照系统 当主体、客体和目标都已经确定了以后，还需要对价值主体的价值需求分析、 价值客体的价值表达描述、评价目标的分解等得出信息进行进一步的细化，进行 价值描述并且实施指标化操作，即选择能够最贴切地和最大程度地反映价值描述 的指标，形成指标体系，确定各指标的数据来源，确定各种数据的类型，选择最 恰当的信息处理方法。 2 3 4 我国科研评价的发展过程 在我国科学事业的发展进程中，人们一直在探讨如何进行准确的科研评价。 从评价方法方面来说，同前我国的科研评价大约经历了四个发展阶段。 1 、行政评价阶段 新中国建立后，国家通过计划行政手段建立了一系列科研机构，并与当时的 行政级别挂钩，形成了部级研究机构、局级研究机构、处级研究机构等构成的研 究机构行政体系。这一时期对研究机构和研究人员的评价基本是以行政手段进 o 浙江t 业人学硕：l 学位论文科研团队绩效评价系统研究 行。评价结果也以行政级别的形式体现出来，按相应行政级别享有国家的投入和 待遇。但随着科研事业的发展，这种行政评价及相应的管理模式的固有缺点就显 露出来，科研脱离实际、机构臃肿，长官意志等弊端丛生。 2 、同行评议阶段 鉴于行政评价的弊端，我国科研机构借鉴和采用西方科学界早己通行的、更 符合科研特点的同行评议方法。旨在科研评价中利用科学家群体的集体智慧形成 正确判断。各科研机构相继建立学术委员会，赋予学术委员会评议权力，不同程 度实行专家治院治所。在各类基会课题申请立项、优秀成果奖励、优秀人爿。选拔、 职称评审中，同行专家评议发挥了越来越重要的作用。它的优点是可行性、可操 作性强，适合某些科研的定量困难的特点，同行专家对学科发展、研究力量等比 较了解等；但在科研评价实践中，同行评议的局限逐渐显现。由于评价活动缺乏 公认的评价标准，加上受诸多学术和非学术因素的影响，例如专家知识结构、学 术视野、学术偏好、人情关系以及长官意志残留等因素的干扰，甚至因评议时间 仓促，而使同行评议拘泥于形式，致使同行评议的科学性科研机构生产效率评价 研究和公正性受到越来越多的质疑。其缺点是有一定的局限性，例如关系网、人 情票、外行评内行、少数人评多数人，难以做到公平、公正、合理，不利于打破 学术垄断和创新等。 3 、指标量化评价阶段 根据定性和定量、科学性和可行性、模糊与精确相结合的原则，人们针对不 同的评价对象制定不同的评价指标，赋予不同的权重，由同行专家评价打分，最 后的得分作为同行评议的重要参考。指标量化评价为科研评价提供了更为有益的 评价方法；同时，它将量化的数学方法引入质量评估，带来了人们评价观念的变 革，为人们继续探讨更为科学技术评价方法作了观念上和方法上的准备。但由于 这一评价方法仍然依靠人来打分评价，不可避免的仍带有前述同行评议的一些缺 点。 4 、科研计量评价阶段 科研计量评价是当前广受关注的国际潮流的评价方式，也是今后一个时期科 研评价的发展方向。其方法是，根据发表科学论著的数量和引证次数，根据不同 的评价要求采用对应的细化指标，运用综合集成的方法求得分值，用以衡量科研 机构和科学家的科研贡献和学术水平所达到程度。科研计量评价是将丁f 在兴起的 科学计量学方法引入同行评议，为专家评议提供公正客观的计量统计分析数扼， 是科学计量学与同行评议的有机结合。2 0 世纪8 0 年代以来，随着科学计量学的 兴起和科研计量评价共识的增加，越来越多的科研机构和管理部门将科学计量学 方法引入科研评价和科学家绩效评价，并作为科学决策的重要依据。 浙江t 业人学侦士学位论文科研团队绩效计价系统川究 2 3 5 科研评价方法的分类 在科研评价研究方法的分类方面，不同的学者有着不尽相同的观点，但一般 认为研究方法主要包括定性评估方法、定量评估方法和定性定量相结合的方法。 定性方法包括同行评议、回溯分析和相关分析等。定量评估方法最重要的是科学 计量学、文献计量学、经济计量学这些新兴学科所提供的理论和方法，还包括这 些学科的理论和方法与数学模型相结合的定量分析评价方法，如财务分析方法、 成本效益分析法、生产函数法、技术经济方法、层次分析法( a r p ) 、多指标综合 评价法、效用函数法、模糊综合评判、运筹学方法、神经网络模型和数据包络分 析( d e a ) 等。此外，科研评价方法还包括调查法、案例研究等。按照美国科学、 工程与公共政策委员会的观点，可以把科研评价细分为以下几种方法：文献计量 分析、经济回报率测算、同行评议，案例研究、回溯分析和定标比超六种方法。 从被评价对象上上分，科研评价又分为对科研机构的评估、对学科发展的评 估和对专项活动的评估。科研机构包括研究所、研究室、一个系、研究小组等， 大学也通常被当成一个科研机构来评价其科技创新能力。对学科的评估包括对如 数学、物理等学科在近几年的发展或是为了评估各个不同国家在同一个学科的发 展水平进行比较时所进行的评估：还包括为评估大学的一级学科的水平与质量所 进行的评估科研评估还按评估主体与评估对象的关系分为内部评估与外部评 估。所谓内部评估是指某个研究机构对自己内部的研究人员进行评估，外部评估 是指某个研究机构邀请本机构以外的同行来对其进行评估。另外，对科研项目的 评估按评价时间，又可分为阶段性评估、事后评估、实时评估和追溯评估。 2 4 我国科研绩效评价常见形式 2 4 1 专家评审法 专家评审法也称同行评议法“7 “”1 ，它不仅早已成为科学界的一个惯例， 而且始终处于科学检查和科学评审过程的中心地位。同行评议法最早可追溯到 1 4 1 6 年威尼斯共和国的专利审查办法。二十世纪三十年代以来，美国的一些研究 资助机构丌始采用同行评议法资助大学的科学研究。但是大量实践表明，同行评 议法是一个主观过程，主要依赖于评价者的主观看法和过去的经验，因而总是不 可避免地受到人为因素的影响，偏见、利益冲突或评价不充分等现象。因此，同 行评议结果的公正性、可靠性、富有预见性和创新性、高质量性经常受到社会各 界的怀疑或批评。另外，近些年来争取科研资助的竞争同趋激烈，数量巨大的申 请书、报告书的评议评审对同行评议的要求越来越高，任务量越来越犬，同行评 议不堪重负。而且同行评议主要适用于单个项目的评估，带有典型的“小科学” 1 2 浙江t 业人学倾j 学位论义科州团队绩效计价系统纠f 究 色彩，即主要适用于项目评估或微观层次的评估，而较难适用于国家、地区或整 个学科等宏观层次上科研绩效评估的特点。此外，随着科学向纵深发展以及科学 对经济和社会的影响，同行的内涵在扩展，选择同行成为同行评议的难点，且现 行的同行评议方法受传统学科分类约束，不利于交叉学科或跨学科研究的孕育和 发展。同行评议法评价适用于单个项目的评价比较多“”。 2 4 2 德尔菲法 作为一种主观，定性的方法，德尔菲法在科研评价工作中也有广泛的应用。 德尔菲法可以用于科研计划、研究项目和科研成果等的评价，也可以用于各种评 价指标体系指标权重的设置”o 。”纠。 德尔菲法是种背对背的征询专家意见的调研方法，采用匿名发表意见的方 式，针对特定问题采用多轮专家调查，专家之间不得互相讨论，不发生横向联系， 只能与调套人员发生关系，通过多轮次调查专家对问卷所提问题的看法，经过反 复征询、反馈、修改和归纳，最后汇总成专家基本一致的看法，作为专家调查的 结果。德尔菲法可以有效地消除成员间的相互影响，可以充分发挥专家们的智慧、 知识和经验，最后能得出一个较好反映群体意志的判断结果。德尔菲法的提出克 服了一般的专家讨论中存在的屈从于权威或盲目服从多数的缺陷。 德尔菲法同常见的召集专家开会或通过集体讨论得出一致预测意见的专家 会议法既有联系又有区别。德尔菲法能发挥专家会议法的优点，充分发挥各位专 家的作用，并能把各位专家意见的分歧点表达出来。同时，德尔菲法又能避免专 家会议法的某些缺点：如权威人士的意见影响他人的意见、有些专家不愿意发表 与其他人不同的意见、出于自尊心而不愿意修改自己原来不全面的意见等。 德尔菲法的主要缺点是过程比较复杂，征询意见的时间较长。以一般的四轮 调查为例，每一轮从给专家发函、专家填写调查表、调查表回收、统计处理直到 发出下一轮的调查函，时间至少需要一个月，四轮下来至少需要四个月的时间。 从这一点来看，德尔菲法更适合周期较长的大型评价项目的咨询，而很难满足 些评价周期较短、需要较快得出判断结论的科研评价活动的要求。 2 4 3 文献计量方法 科学文献是人类知识的客观记录，是科学技术存在和表现的主要形式。科学 文献是科研工作者研究成果受到承认、知识产权得到保护、知识得以传承的先决 条件。文献计量学是以文献体系和文献计量特征为研究对象，采用数学、统计学 等计量方法，研究文献情报的分布结构、数量关系、变化规律和定量管理，并进 而探讨科学技术的某些结构、特征和规律的一门学科。当文献计量学被应用于考 察科学活动特征时，它通常被称为科学计量学( s c i e n t o m e t r i c s ) ；当文献计量学 浙江下业人学硕士学位论文科研团队绌效计价系统 卅究 的方法被用于量化处理更为广泛的信息源和信息传播过程时，它又被称为信息计 量学或者情报计量学( i n f o m e t r i c s ) ”“。 文献计量方法是指利用出版物、专利、引文等科技绩效指标进行科研评价的 一种定量评价方法。出版物和专利是衡量产出能力的尺度，引文数则是衡量其工 作结果影响力的尺度。论文和引文是较为常用的计量指标，这两项指标易于统计 和核实，因而受到了研究者和科研管理部门的普遍青睐。经过几十年的发展和完 善，文献计量学方法已经被学术界和科研管理部门所广泛认同，应用也越来越广 泛。文献计量方法当之无愧的受欢迎程度在学术文献和像i s i 和c h i 这样的机构 开展的商业应用中也得到了证实。 文献计量方法是科研机构、科研项目绩效评估的重要手段和工具。出于科学 文献几乎是整个科学产出的载体，是科学共同体对研究工作的客观评价的反映， 是衡量科研工作质量的重要途径，因而科学文献产出的测度也是科研机构、科研 项目绩效评估的重要指标。文献计量结合定性分析可以显示科学主体是如何进化 和演变的，以及学科研究范式的变化是如何产生的。通过论文统计和引文分析， 可以跟踪追溯一个组织和一个学科内学术研究兴奋点的变迁，显示和预测学科研 究热点和发展趋势，并在此基础上确定学科优先发展领域和重点资助领域。 浙江t 业人学硕 ：学位论文 科研团队绩效计价系统研究 3 基于d e a 的科研团队绩效评