基于SCI的科研机构学术成果评估与实证研究

基于SCI的科研机构学术成果评估与实证研究江南大学社科基金项目江南大学社科基金项目(2007SKZ021)研究成果。彭奇志彭奇志:男,彭奇志:男,1969年生，硕士,江南大学图书馆副研究馆员。公开发表论文30余篇,主编及参编著作7部。江南大学(“211”教育部重点大学)图书馆摘要：科研机构所产出的SCI论文的数量和质量，是衡量其学术科研水平的重要指标之一。建立了基于SCI的学术成果评估模型。构建正确的检索策略，确保数据的准确性，是评估的首要条件。以江南大学为例进行了评估探讨。关键词：SCI学术科研评估模型实证研究分类号：G353.1ResearchontheInstitutionsAcademicAchievementsEvaluationandtheInstanceBasedonSCIPengQizhiJiangnanUnivesityLibrary,Wuxi,P.R.China214122Abstract:ThequantityandqualityofpapersindexedSCI,whichdeliveredfromthescientificresearchinstitutions,isoneoftheimportantcriterionsscalingitsacademicresearchlevel.BasedonSCI,amodeloftheinstitutionsacademicachievementsevaluationhasbeenestablished.Itistheprimaryevaluationconditionthatthecorrectretrievalstrategyisconstructedfortheaccuratedata.AnexampleforevaluatingacademicresearchlevelofJiangnanUnivesityisdissussedinthispaper.Keywords:SCI;academicresearch;evaluationmodel;Instanceresearch利用引文数据分析科研机构的科研学术水平，为本机构领导和专家提供决策情报服务，是当前图书情报部门深化信息服务工作的重要内容之一。在总结前人研究和我们实践工作的基础上，基于SCI引文检索和数据分析，提出了科研机构学术研究水平评估模型，并通过2001-2007年SCI收录江南大学论文进行了实证分析。1.SCI简介SCI是世界第一个用于引文检索的检索工具。它创立于1961年，经过40多年的发展，SCI及WebofScience数据库的作用和影响已享誉全球。SCI提供全面覆盖世界最重要、最有影响的学术研究成果,它所收录的科技期刊与论文集中了世界上基础学科高质量优秀论文的精萃。目前它不仅已成为世界极具权威性的检索工具，可以作为一种评估研究者之间的关系及研究著作质量的有效工具，而且一个国家、地区、机构所产出的SCI论文的数量和质量，是衡量其科研活动水平的一个很好的指标[1]。2.基于SCI的科研机构学术评估模型采用引文分析法、信息检索方法、信息处理和动态发布技术，对科研院所、高校或其他机构的SCI论文和引文等进行统计分析，可以较好地揭示该机构的学术科研特征和内在规律。基于SCI引文分析的机构科研评估模型如图1所示。该模型的三个基本元素是研究对象、评估方法和实证评估。研究对象主要包括来源期刊、引用文献、引用次数(TimesCited)、参考文献(References)和著者等。评估方法主要采用信息处理技术和引文分析法，包括采用Office2003及制图等软件，例如用Excel将下载的SCI文本格式的数据转换为XLS格式，并导入ACCESS、进行数据整序、生成各种图表等。采用图论、模糊集合、数理统计等数学方法，以及比较、归纳、抽象、概括等逻辑方法对研究对象进行统计分析等。实证研究主要包括机构科研发展轨迹、学科专业状况、科研论文质量、核心载文期刊以及人才评价等。最后，采用ASP.net、PHP或JSP等Web信息技术实现数据和图表的网上动态发布。数据转换数据转换信息技术检索技术数理统计发布技术接口技术数据整序集合论图论逻辑方法生成图表数学方法比较归纳抽象概括检索策略可视化评估方法源期刊IF引用文献参考文献著者科研发展轨迹学科专业状况科研学术质量核心载文期刊学科带头人实证评估研究对象数据采集Web动态发布数据源数据库图1基于SCI的学术科研评估模型3.构建正确的检索策略确保数据的准确性利用SCI引文对科研机构的学术研究质量进行评估，首要的是完整地采集到该机构的数据,而构建准确的检索策略，才能确保该机构SCI论文收录和引用数据的查全率和查准率。3.1掌握关键的检索技术检索技术是指用户需求表达转换及其与计算机检索系统的交流技术，主要是提问构造技术在网络数据库的应用，核心是检索表达式的构建。SCI网络数据库关键的检索技术有：①词组或短语检索应放置于引号””内。②优先运算应放置于括号()内。③支持布尔逻辑运算。包括逻辑与(AND)、逻辑或(OR)和逻辑非(NOT)。④SAME：该算符连接的关键词必须在同一句话内，但关键词前后顺序不限。⑤截词符(*)：如gene*可以检索gene、gentics、generation；通配符($)：代替0-1个字符；通配符(?)：代替1个字符[2]。3.2如果某机构包含多个下级机构，或名称曾变更，或机构合并，或者同时使用两个或两个以上机构名称，则检索式必须整合所有名称。例如检索SCI收录中国科学院的论文，应该整合中国科学院以及所属的多个位于全国各省市的研究院所的名称。3.3在SCI数据库中检索某一机构的数据，必须使用机构的英文缩略名。SCI对机构名称和姓名的标引采用了一套英文缩略词表，如大学(university)的缩略词“univ”。除此以外，还要注意检索字段、数据收录时间的限定。4基于SCI数据的实证分析4.1从SCI论文数量分析机构科研发展轨迹从一定时间范围内SCI收录某机构论文的数量，可以知道该机构学术科研的发展情况,依此制定本机构未来的科研发展战略。例如，2001-2007年SCI收录江南大学论文（含合著）共1276篇，其中通信作者单位为江南大学的论文1007篇，本文以后者进行分析。分年度论文数量如图1所示，其中2007年收录论文最多，达345篇；与前一年相比，2005年的增幅最大，为151.35%，2004年也达到94.74%，2001-2007年年均增幅为64.71%。这与“十·五”和“十一·五”期间学校承担的各类科研课题数量增多、承担国家重要研究课题能力显著提高、学校科研水平和实力整体快速发展是密切相关的。也说明了江南大学学术研究近年进入了快速发展时期。图2江南大学2001-2007年间产出的SCI论文4.2从各学科论文数量测定学科的影响和重要性从科研机构各学科专业SCI论文数量的分布，可以掌握各学科专业的学术科研总体发展情况,确立发展和培育重心；针对竞争对手,制定学科发展和突破方向以及竞争策略；另外可以给学子报考某学科专业提供参考情报。例如江南大学各主要学院产生的SCI论文数量如图3所示，其中食品学院论文最多达311篇，其次是生物工程学院205篇，处于第一集团；化工学院175篇，信控学院152篇，属于第二集团；其次是信息学院54篇，纺服学院45篇，理学院43篇，机械工程学院17篇，其他院所5篇。图3江南大学各主要学院产生的SCI论文数量4.3从SCI源刊的影响因子分析科研论文的质量期刊的影响因子(Impactfactor，IF)，是表征期刊影响大小的一项定量指标。指的是该刊前两年发表的文献在当前年的平均被引用次数。一种期刊的影响因子越高，其刊载的文献被引用率越高，一方面说明这些文献报道的研究成果影响力大，另一方面也反映该期刊的学术水平高。根据《期刊引证报告》(JCR)的统计，SCI2005年收录的6089种期刊平均影响因子为1.745，平均被引频次为3675次[3]。2002年我国SCI论文源期刊的平均IF为1.245,而高校的平均IF为1.128,科研机构论文的平均IF为1.477[4]江南大学2001-2006年间产出的SCI论文源期刊影响因子与论文数量关系如图4所示。源期刊IF在3.0以上的论文仅11篇，IF2.0-3.0的论文79篇，IF1.0-2.0的论文213篇，IF1.0以下的论文331篇，另外有部分新增期刊无IF。634篇论文的总IF为699.11，平均为1.1027，该IF值不仅低于2005年国际期刊IF平均值，也低于国内SCI论文源期刊IF平均值。由此可见，江南大学在SCI收录论文数量大幅增加的同时，还要注重提高论文的质量和论文投稿策略。图4源期刊影响因子与论文数量关系根据SCI数据评价人才4.4.1在人才评价方面，常采用引文分析方法。这是因为某著者的论文被别人引用的程度可以是衡量该论文学术价值和影响的一种测度，同时也从科研成果被利用的角度反映了该著者在本学科领域内的影响和地位。因此，引文数据为人才评价提供了定量依据。从对历年诺贝尔奖金获得者的论文被引用情况的统计来看，物理学、化学、医学领域中诺贝尔奖金获得者中，其论文被引次数(timescited)最高者（L.D.Landan）为1888次；最低的也有79次（J·H·D·Jensen）；只有六名低于200次。4.4.2从SCI论文数量可以了解科研群体，选拔各学科的优秀人才，也是确立学科带头人的参考依据之一。例如江南大学2001-2007年间产出SCI论文数量居前的作者是：陈坚教授59篇，张慜51篇，李在均32篇，胥传来29篇，崔宝同27篇，魏取福22篇。另外，从论文质量评价标准之一的期刊影响因子来看，各学科期刊IF有较大差异，各院系论文源刊IF值印证了这一点。4.5分析合作研究情况从论文著者单位来看,科研机构与其它单位合作发表的论文比例愈高，说明其作者横向科研能力较强。在国外合作中,涉及到了的国家和地区愈多,说明作者在国际横向科研合作方面的能力愈强。例如：2001-2007年SCI收录的江南大学1276篇论文中，合作产生的论文为702篇，占江南大学发表论文总数的55％；我国作者为第一作者的国际合著论文423篇，国内合作伙伴涉及113个单位，主要是高校和研究院所，国际合作伙伴涉及13个国家（地区）；其他国家作者为第一作者、我国作者参与工作的国际合著论文为279篇，合作伙伴涉及11个国家（地区）47个单位。说明江南大学的教师和科研人员具有较好的国内横向科研能力，具有一定的国际横向科研合作能力，但还应该加强与国际机构开展横向科研合作。从论文数量确定载文核心期刊群对一定时期内刊载某机构论文数量较多的期刊进行统计分析，一是有利于对该期刊群进行跟踪了解，二是便于挖掘新的投稿源刊和更高质量期刊。例如：江南大学2001-2007年产生的1007篇SCI论文，分别发表在国内外273种期刊上，载文量居前的25种期刊载文444篇，构成了该校的载文核心期刊群，其中载文最多的期刊DYNAMICSOFCONTINUOUSDISCRETEANDIMPULSIVESYSTEMS-SERIESA-MATHEMATICALANALYSIS载文62篇，其次FOODCHEMISTRY载文46篇。5结论基于SCI引文分析的机构科研评估模型是我们多年实践探索和研究的结果，实践证明，该模型具有良好的实用性、引导性和通用性，对大中型科研机构和高校图书情报人员开展引文信息研究，为领导和研究人员提供决策情报服务具有一定的启示和帮助。我们将对引文可视化等方面进行更多的探索，以不断完善该模型。参考文献：[1]LiHong.EffectiveWaysofScientificAchievementsEvaluationbyUsingSCI[J].LibraryandInformationSer