高校自然科学类论文绩效评价模型研究.pdf

科技管 研究 S cie n ce a n d rr e t h no lo g y Ma n a g e me n t Re s e a r ch 文章编号 1 0 0 0 7 6 9 5 2 0 1 1 1 2 0 0 2 4 0 3 高校 自然科学类论文绩效评价模型研究 原明亭 丁军航 青岛大学 1 科研处 2 自 动化工程学院 山东青岛2 6 6 0 7 1 摘要 科研量化是一般普通高校进行科研考核及奖励的行之有效的方法 论文依从定性和定量原则 对综合性 高校 自然科 学类论文量化 进行研 究 利 用归一化 方法 形 成期刊相 对影响 因子 建 立量化模 型 从 学校层 面体 现量化模型的协调性 统一性 克服不同学科 同一学科下不同分学科影响因子值差异带来的量化影响 具有 一 定 的 可行 性 关键词 绩 效评价 归一化 影响 因子 科技期刊 中图分类号 C 9 3 1 1 文献标识码 A St ud ie s o n Pe r f or m a n ce Ev a lu a t io n M o de l o f Univ e r s i t i e s Na t ur a l S cie nce s Th e s e s YU AN Mi n g t i n g DI NG J u n h a n g Q in g d a o U n iv e r s it y Q in g d a o 2 6 6 0 7 1 C h i n a Ab s t r a ct Q u a n t i f i ca t i o n o f s ci e n t i f i c r e s e a r ch p r o d u ct i o n i S a g e n e r a l a n d e f f e ct i v e m e t h o d f o r a s s e s s m e n t a n d r e w a r d s i n u n iv e r s it ie s T h is p a p e r s t u d ie s t h e me t h o d o f t h e s e s q u a n t ifi ca t io n a c co r d in g t o q u al it a t iv e a n d q u a n t it a t iv e p ri n cip le s U s in g t h e n o r ma liz a t io n me t h o d p e r io d ica l r e la t iv e f a ct o r s a r e f o r me d a n d a q u a n t it a t iv e mo d e l iS e s t a b lis h e d I t co n q u e r s t h e b a d e 盯 e C t w h i ch i s b r o u g h t b y t h e v a l u e d i f f e r e n ce o f i n flu e n t f a ct o r s e x i s t i n g i n d i f f e r e n t s u b j e ct s a n d d i fie r e n t e m b r anch m e n t s u n d e r t h e s a n l e s u b j e ct S O i t h a s ce r t a in f e a s i b i li t y Ke y wo r d s p e r f o rma n ce e v a lu a t i o n n o rma li z e d i mp a ct f a ct o r t e ch n o lo g y j o u r n a l 对科研工作者的论文进行评价 主要应用在以 下几个方面 一是用于学校年度科研奖励 在每个 科研年度 学校按照一定规则对上一年度完成 的纵 横项项 目 成果 政府科技奖励等进行评价 满足 一 定要求的给与资金奖励 以促进学 校科 研发展 推动学科建设和服务社会 的能力 二是在学校人才 工程如校特聘教授工程及每年的职称评定 中给出一 个量化分值 便于 比较分析 而论 文是科研成果的 大头 因学科差异 基础研究和应用研究 的差异等 多种因素 是评价中最复杂 最困难的一项工作 而科研政策具有很强 的引导作用 所以制定合 理的符合校情 的论文评价模型显得尤 为重要 本文 是对 自然科学 类论文绩 效评价模 型所进行 的一些 探索 1 绩效评价原则 1 合理性原则 在由教学为主型大学向教学 研究型大学迈进的关键时期 科研起着举足轻重的 作用 在高校的科研管理中 必须制定科学合理的 符合学校实际的科研管理政策 以形成有效的激励 机制和竞争机制 2 协调性原则 一是科研管理及评价要与学 校相关业务 的激励措施相协调 如教学 学术 资源 等 以免挫伤教师从事教学 学科建设 重点基地 建设的积极性 全校应协调一致 量化时应平等待 遇 不能只顾部门利益 3 可操作性 易于理解 易于计算 易于提 高评价手段 4 定性 与定量相 结合原则 在学校层 面上 科研管理量化不是对论文的学术水平进行同行专家 评议 而是确定 出论文对学校发展的重要性 结合 论文所发期刊的评价指标 建立量化模型 进行量 化处理 2 绩效评价模型 论文量化后分值由基本分值 影响因子分值 他引次数分值三部分组成 2 1 论文定性及基本分值确定 评价量化时 根据学校情况 按论文在评估与 建设时的重要性 将论文划分为六类 即被 s ci 收录的论文 被 E I 收录论文 在中国科技期刊 引证报告 C J C R 来源期刊上发表且按期刊当年度 收稿 日期 2 0 1 0 0 5 1 3 修 回日期 2 0 1 1一o 2一l8 基金项目 山东省研究生教育创新计划项 目 自然科学类学位授权点科研评价体系研究 S D Y C 0 8 0 4 6 原明亭等 离饺 自然科学类沦文绩效评价模型研究 2 5 影响因子大于本学科领域平 均影 响因子的论文与小 于等于本学科领域平均影响因子的论文 被 I S T P 收录的论文 在其它正式出版的学术 刊物上发表的 学术论文 在许多评估场合 如重点研究基地评估 重点学科评估 学位点 申报等 没有将 S C I E l 收 录论文细化 为核心 收录或光盘收录 扩展收录 所 以在评价时也不再做具体 细化 以减轻审核的工作 量 提高可操作性 论文按上述方法确定 出所 在类别 给出基本分 值 以体现定性原则 基本分值的确定为 S C I 收 录论文每篇 1 5 0 0分 E I 收录论文每篇 1 0 0 0分 大 于本学科领域平均影 响因子 的论文每篇 7 0 0分 小 于等于本学科领域平均影 响因子的论文 3 0 0分 I S T P收录论文每篇 3 0 0分 其他类论文每篇 5 0分 如表 2所示 2 2影 响 因子 分值 2 2 1 影响因子的理解 影 响因子是美 国 S C I 创始 人 E G a r fie ld提 出的一 项期刊计量 指标 其通用 的 公式为 髟晌网罩一 煎 生 塑 垄 盐当生 生 麴 查塑 前 2年期刊论文数之和 其本质含义为在一定 时域 内期刊论文的平均被 引率 在一定程度上表 明了该期刊在科研人 员中的 影响力和期刊的整体水平 影响因子值受诸如作者 引文动机及引文 习惯 统计 时段选择 学科性质 期刊性质等多种因素影响 不 同学科 甚至同一学 科下的分学科所属 的期刊 其影 响因子都是有差别 的 对综合 性大学 涉及 的学 科很广 差 异很 大 单纯使用期刊的影响因子进行论文评估会失去公正 性 同时应该看到 学科 入围期 刊的平均影响 因子 反映了学科期刊整体的情况 从学校科研管理出发 有必要对不 同学科 的影响因子进行归一化处理 2 2 2 C J C R期刊论文影响 因子分值模型设计 表 1 是部分 C J C R收录期刊 2 0 0 6年 的影响因子情况 从 表中数据可以看 出 1 学科内影响因子差别很大 如动力与 电力 工程学科 影响因子最高值为 2 8 5 7 但学科平均影 响因子只有 0 4 5 9 再如护理学 影响因子最高值为 1 8 6 1 影响因子次高值仅为 1 0 5 仅为最高影响因 子的5 6 4 都反应出学科内影响因子的差异 2 学科问的影响 因子差别也很大 如动力与 电力工程学科影响因子最高值为2 8 5 7 学科平均影 响因子为0 4 5 9 但数学学科影响因子最高值仅为 0 4 4 8 还不及动力与电力工程学科的平均值 其学 科平均影响因子仅为 0 2 3 4 所以设计 C J C R期刊论文 影响 因子分值模 型时 应考虑学科间 学科 内的影响因子的差别 定义 权重影响因子 0 8 本学科最高影响因 子 0 2 本学科平均影响因子 学科相对影响因子 期刊影响因子 权重影响 因子 学科相对影 响因子是一个无量纲的数据 反应 期刊在本学科的相对位置 可在一定程 度上消除不 同学科 的期刊影响因子的差异对量化的影响 比单 纯使用影响 因子具有更好的合理性 对 C J C R类 论 文 其量化分值模型为 口 c R 论 文 影 响 因 子 分 值 50 0 x 6 乖 丽 警 号 手 孚 稃 平 王 面 再 表 1 2 0 0 6年度部分学科数据 平均影 最高 次高 权重 最高影响因子 学科期刊 期刊的相对 响因子 影响因子 影响因子 影响因子 影响 因子 数学学科 0 2 3 4 O 4 4 8 0 4 0 8 0 4 0 5 1 I O 6 妇产 儿科学科 0 5 2 6 1 6 5 2 1 1 0 1 1 4 2 7 1 1 5 8 护理学科 n 7 1 5 1 8 6 l 1 O 5 1 6 3 2 1 1 4 0 口腔医学学科 0 3 7 3 0 9 7 3 0 5 3 3 0 8 5 3 1 1 4 1 内科学学科 0 6 3 2 I 3 0 8 1 2 8 3 1 1 7 3 1 I 1 5 仪器仪表学科 n 3 2 O 9 O 2 O 5 6 5 0 7 8 6 1 1 4 8 动力与电力工程学科 0 4 5 9 2 8 5 7 2 5 3 7 2 3 7 7 1 2 0 2 表 1第 5列 是经过 计算得 出的权重影 响因子 第 6 列是最高影响因子期刊的归一化处理后的值 数据反应出相对影 响因子具有很好 的同一性 大大 减小了离散性对评价的影响 2 2 3 收录论文影响因子分值模 型设计 对 S C I 收 录论文 基本分值比较高 对其影响因子小于等于 1的收录论 文不再进行影 响因子量化 对影 响因子 大于 1的 S C I 收录论文影响因子分值 5 0 0 影响 因子 一1 对 E I 收录论文 在 C J C R收录期刊发表的论文 按 C J C R 影 响 因 子 分 值 模 型 计 算 总 体 如 表 2 所 示 2 3他 引分值 论文被引用次数多少表明论文影响力大小 被 引次数越多 其影响力越大 是定量评价公正 客 观的一种依据 所以在评价时应予适当考虑 但论 文 的被引用次数情况复杂 有 自引 他引 正引 反引 并受学科 期刊数 从事人员多少 创新被 认知程度等多种因素影响 也有 圈内人互相打招呼 造成 的 人为 被 引 给评价识 别造 成 困难 为 尽可能避免人为因素影响 在评价时 只考虑他引 次数 以 C N K I 中国引文数据库 以及 S C I 数据库被 引用次数为准 其分值为 5 0 他引次数 如表 2 所示 3 结 论 作为综合性院校 在科研论文量化方面 因学 科的差异 确实面临很大的困难 所以在量化时 下转第 4 4页 4 4 父水卡 技术进步 与高技术产业 产 i J K的互推效应 基于北京高技术产业的文 E 分析 8 6 无时滞时的技术转化效率也在 8 0 以上 其 中 航空航天制造业的技术转化效率最高 达 9 5 以上 而电子及通信设备制造业的转化效率最低 无时滞时 的转化效率不足 5 0 参考文献 1 S C H U M I E T E R J O S E P I I C a p i t a li s m M L o n d o n G e o r g e 1 9 4 3 2 A R R O W K T I l e e co n o m i c h n p l i e a t i o n s o f L e a r n in g b i D o in g J R e v i e w s o f E o n o mi e S t u d i e s 1 9 6 2 2 9 1 5 4 1 7 4 3 U Z AWA I I I R O F U MI O p i n mn t e ch n i cal te ch n i ca l ch a n g e i n a n a g g r e g a t i v e n m d e l o f e co n o mi c g r o w t h J 1 t e rna t i n al E co n i mi c R e v i e w 1 9 6 5 6 1 8 3 1 4 R O S E N B E R G N A T H A N T h e P o s i t i v e S u m S t r a te g y t f a me s s i n g T e ch n o lo g y f o r E co n o m i c G ro w t h M Wa s h i n g t o n D C N a t i o n a l Aca d e my P r e s s 1 9 8 6 1 7 3 2 5 L U C A S R O B E R T B Wh y d o e s n t ca p i t a l flo w f r o m rich t o p o o r e o u a t r i e s J A m e rica n E co n i mi c R e v i e w 1 9 9 0 8 0 2 9 2 9 6 6 R O M E R P A U L M I n cr e a s i n g r e t u rns a n d l o n g r tl n g r o w t h J J o u rna l o f P o li t i ca l E co n o my 1 9 8 6 9 4 5 1 0 0 2 1 0 3 7 7 R O ME R P A U L M E n d o g e n o u s t e ch n o l o g ical ch a n g e J J o u rna l o f P o l i t i cal E co n o m y 1 9 9 0 9 8 5 7 1 1 0 2 8 G R O S S M AN G E N E H E L P MA N E I n n o v a t i o n a n d G r o w t h i n t h e G l o b al E co n o m y M C a m b rid g e M A M I T P re s s 1 9 9 1 l9 J S C HE R E R F M N o r d h a u s s t h e o r y o f o p t i ma l p a t e n t l i f e A g e o me t r i o r e i n t e r p r e t a t o i n I J T h e A m e r i ca n E co n o mi c R e v i e w 1 9 7 2 6 2 3 4 2 2 4 2 7 l l O N E L S O N R P H E I P S E I n v e s t m e n t i n h u m a n s t e ch n o l o g ical d i f f u s i o n a n d e e o n o n fie g r o w t h J A m e rica n E co n o mi e R e v i e w 1 9 6 6 5 6 2 6 9 7 6 l 1 1 l J O N E S L MA N U E L L I R A A co n v e x m o d e l o f e q u i l i b r i u m g r o wth t h e o r y a n d p o l i cy i m p l i ca t i o n s J J o u rn a l o f P o li t i ca l E e o n o my 1 9 9 0 9 8 lO 0 8 1 0 3 8 1 2 杨先卫 阎理 刘利华 科技进步与经济增长的场理论探讨 J 统计与决策 2 0 0 5 8 2 0 2 2 1 3 张磊 科技进步与经济增长的互动性 J 科技管理研究 2 0 0 8 8 6 8 7 0 1 4 赵镇 市场经济下科技进步与经济发展互动综合评价研究 J 商业 研究 2 0 0 9 1 4 1 4 5 1 5 T I M O T H Y J C O E L L I D S P R A S D A R A O C H R I S T O P H E R J 0 DONNE LL e t a 1 An I n t r o d u ct io n t o Ef fici e n cy a n d P r o d u ct iv it y A n a l y s i s M P r in g e r S ci e n ce 2 0 0 5 7 1 7 2 作者简介 吴永林 1 9 6 o 一 男 北方工 业大 学经 济管 理学 院院 长 高技术企业发展研究中心主任 博士 教授 北京市学术创新 团队学术科研带头人 主要研究方 向为产业组 织与竞 争战略 高技 术企业成长 李立委 1 9 8 6 一 男 山东人 经 济学 硕士 研究方 向为经济系统分析 上接第 2 5页 定性的分值应高一些 以取得共识 通过学科相对 影响因子归一化处理 弱化 了学科对量化分值的影 响 一定程度上体现了评价方法的公平公正及合理 通过量化体现 出论文水平的层次 起到较好 的引导 作用 在实践中收到较好效果 表 2 自然 科学论文绩效评价模型 类 别 分值计算模 型 1 5 0 0 5 0 0 S C I影响 因子 一1 5 0 S C 1 他引次数 C J C R他 引次数 影响因子 1