（流行病与卫生统计学专业论文）医学期刊学术水平综合评价指标体系的研究.pdf

硕士学位论文中文摘要 摘要 目的：构建一个从学术水平层面上综合评价医学期刊的综合评价 指标体系，试图为中国的广大科技工作者、期刊编辑部和科研管理部 门有关决策提供科学依据。 方法：以中国科学技术信息研究所编写，由科学技术文献出版社 出版的( 2 0 0 4 年版中国科技期刊引证报告为综合评价数据信息来 源，从当年入围的4 7 6 种医学期刊中采用分层随机抽样法，随机抽选 1 0 种医学期刊作为评价对象；评价指标遴选及其权重的确定采用德 尔菲法和s a a t y 氏权重估计法：使用层次分析法、加权秩和比法和加 权t o p s i s 法对1 0 种医学期刊的学术水平进行综合评价。 结果：在专家评分的基础上，结合专业知识，初步构建了对医学 期刊学术水平进行综合评价的指标体系。该指标体系共分为2 层，第 1 层包括期刊引用指标、来源指标和其他相关指标3 个部分。第2 层 将第1 层的3 个指标进一步细分为总被引频次、影响因子、他引总引 比、被引半衰期、来源文献量、参考文献量、基金论文比及被国内检 索系统收录数等8 个评价指标。通过专家进一步咨询，建立了子目标 判断矩阵，用s a a t y 氏法计算出各层权重，经过一致性检验显示，各 层子目标权重符合逻辑，一致性较好。3 种综合评价方法得出的医学 期刊学术水平的评价结果，经s p e a r m a n 秩相关检验证实具有良好的 一致性。 硕士学位论文 中文摘要 结论：初步构建了一个分为2 层由8 个评价指标组成的，对医学 期刊学术水平进行综合评价的指标体系。应用层次分析法、加权秩和 比法及加权t o p s i s 法对该指标体系进行了实证研究，证明该指标体 系各层符合逻辑，且具有较好的一致性，说明依据该指标体系对医学 期刊学术水平进行综合评价有利于减少以往方法中因重引文轻载文 而可能产生的偏差。 关键词：医学期刊，学术水平，综合评价，指标体系 硕士学位论文英文摘要 a b s t r a c t i o b j e c t i v e l t oc o n s t r u c tas y s t e mo fi n d e xf o r s y n t h e t i c e v a l u a t i o n ，t r yt oe v a l u a t et h ea c a d e m i cl e v e lo fm e d i c a lj o u r n a l s y n t h e t i c a l l y , s ot h a tt h es c i e n t i f i ca n dt e c h n i c a lw o r k e rc a nc h o o s et h e j o u r n a l a n du s et h e i ri n f o r m a t i o no b j e c t i v e l ya n dc o r r e c t l y t h e d e p a r t m e n to f j o u r n a la n dt h em a n a g e m e n to fs c i e n t i f i ct e c h n o l o g yc a n a l s oe v a l u a t et h ej o u r n a lf l e e t l yb a s e do ni t o t h e r w i s e ，i tm a k e s s c i e n t i f i ca n dt e c h n i c a lj o u r n a l sa n dr e s e a r c h e r sk n o wt h e i rp e r s o n a l e f f e c to fl e a r n i n g 【m e t h o d l t h ei n f o r m a t i o ni sf r o m “c h i n e s es c i e n t i f i ca n d t e c h n i c a lj o u r n a lc i t a t i o nr e p o r t s2 0 0 3 ( c j c r ) ”，w h i c hi se d g e db y i n s t i t u t eo fs c i e n t i f i ca n dt e c h n i c a li n f o r m a t i o no f c h i n a ，a n dp u b l i s h e d b ys c i e n t i f i ct e c h n i c a ld o c u m e n tp r e s s 1 0m e d i c a lj o u r n a l sh a v eb e e n p i c k e do u tf r o m4 7 6k i n d so fs o u r c ej o u r n a lo fc h i n e s es c i e n t i f i ca n d t e c h n i c a lp a p e r sa n dc i t a t i o n s t h e r ea l e8i n d e x e si n c l u d et o t a lc i t e d ， i m p a c tf a c t o r , o t h e rc “e d ，c i t e dh a l fl i f e ，e t c a n d5k i n d so fm e t h o d i n c l u d ea n a l y t i ch i e r a r c h yp r o c e s s ，t e c h n i q u ef o ro r d e rp r e f e r e n c eb y s i m i l a r i t yt oi d e a ls o l u t i o na n dr a n ks u mr a t i o ，e t c h a v eb e e nc h o o s et o e v a l u a t et h e s em e d i c a lj o u m a lf r o mt h ea n g l eo f a c a d e m i cl e v e l 【r e s u l t l a ni n d e xs y s t e mi n c l u d e s2l e v e l sa n d8i n d e x e sh a v e b e e nb u i l t i n i t i a l l y a f t e r c o u n s e l i n ge x p e r ta n dc o m b i n a t i o nw i t h 1 1 1 硕士学位论文英文摘要 p r o f e s s i o n a lk n o w l e d g e t h em a t r i xo f j u d g m e n tf o rt h ee n t i r ei n d e xh a s b e e ne s t a b l i s h e dt od e c i d et h ew e i g h to fe v e r yi n d e xa f t e rc o u n s e l i n g e x p e l s t h e nc a l c u l a t et h ew e i g h to fe v e r yi n d e xw i t hu s i n gs a a t y s m e t h o d i ts h o w st h a tt h ec o n s i s t e n c yo fe v e r yi n d e xa n dr e s u l t so f e v a l u a t i o na l ea l l s a t i s f a c t o r yw h e nc o n f i r m e dw i t hs p e a r m a nr a n k c o r r e l a t i o nt e s t 【c o n c l u s i o n 】t h er e s e a r c hs h o w st h a tt h ei n d e xs y s t e mw h i c hi s i n c l u d e db y2l e v e l sa n d8i n d e x e s ，c a nb eu s e di nt h es y n t h e t i c e v a l u a t i o no fm e d i c a lj o u r n a l ，a n dh a sg o ts a t i s f a c t o r yc o n s i s t e n c y ，i t a l s oc a nd e c r e a s et h ed e f l e x i o nc a u s e db yn e g l e c te x c e s s i v e l yt ot h e q u a n t i t yo f i n f o r m a t i o n k e yw o r d s ：m e d i c a lj o u r n a l ；a c a d e m i cl e v e l ；s y s t e mo fi n d e x ；s y n t h e t i c e v a l u a t i o n i v 原创性声明 本人声明，所呈交的学位论文是本人在导师指导下进行的研究工 作及取得的研究成果。尽我所知，除了论文中特别加以标注和致谢的 地方外，论文中不包含其他人已经发表或撰写过的研究成果，也不包 含为获得中南大学或其他单位的学位或证书而使用过的材料。与我共 同工作的同志对本研究所作的贡献均已在论文中作了明确的说明。 懒名：二爱垦至吼丑吐九日 关于学位论文使用授权说明 本人了解中南大学有关保留、使用学位论文规定，即：学校有权 保留学位论文，允许学位论文被查阅和借阅；学校可以公布学位论文 的全部或部分内容，可以采用复印、缩印或其它手段保存学位论文； 学校可根据国家或湖南省有关部门规定送交学位论文。 夕 日期：丕丑年- 工月l 日 硕士学位论文 刖菁 从世界上第一本期刊问世到现在，已经有三百多年历史了。如果说期刊一开 始只是在少数人群中发行，那么今天它已走入千家万户。据统计，中国公民在闲 暇活动中，每天阅读期刊的人要占3 8 8 ，仅次于看电视和读报纸。所以，我们 可以说，期刊现已成为中国人日常生活的一个有机组成部分，是人们重要的精神 食粮之一。 三百多年来世界期刊有很大发展，数量呈现不断增长的趋势。中国期刊在经 历了六个跌宕起伏的发展阶段之后，到世纪之交的2 0 0 1 年，共有1 5 1 8 种期刊进 入了“中国期刊方阵”，据2 0 0 4 版中国科技期刊引证报告( c j c r ) 统计，截 至2 0 0 3 年底，我国已有1 5 7 6 种学术期刊入围中国科技信息统计源期刊的行列。 其中医学期刊就有4 7 6 种。数量剧增的学术期刊，其学术质量究竟如何? 据统计， 2 0 0 3 年我国学术期刊影响因子平均值是0 3 4 8 ( 影响因子最高为2 9 2 4 ，最低为 0 0 0 0 ) ，影响因子1 的期刊共6 8 种，其中医学期刊影响因子1 的有2 5 种。 而同期国外学术期刊中影响因子大于1 0 者己不乏其数。可见，我国学术期刊的 整体水平是偏低的。怎样提高我国期刊的国际竞争力已成为摆在我国期刊工作者 面前的一个亟待解决的问题。 目前期刊管理部门组织的各种评比，也只是从管理水平、编校质量及印刷质 量等方面入手。并没有从期刊的学术水平这一层面对期刊进行过系统的综合评 价。到目前为止，国家主管部门尚未出台一个从学术水平层面综合评价期刊的行 业标准。尤其在评价指标的选择上，大多数只是根据自已掌握的数据来定评价指 标。王玖等【l 】选取总被引频次、影响因子、即年指标、基金论文比及平均引用率 5 个指标作为分析评价因素。除了因为这些指标客观、明确外，还因为可获得。 在选择综合评价方法方面，林春艳等【2 】运用数学方法构建的由影响因子等1 2 个 指标组成的自然科学学术期刊质量指标体系的综合评价数学模型。金新政等还就 层次分析法与优序图法在综合评价中的作用进行了比较【6 】。上述研究要么就是未 对综合评价指标体系进行系统分析研究，要么就是对综合评价指标进行了评价和 分析，又缺乏实证研究资料。在运用综合评价方法上往往也比较单一，通常只用 硕士学位论文 到了一种方法。其中，最常见的是层次分析法p 叫。 本研究以中国科学技术信息研究所编写的，由科学技术文献出版社出版的 ( 2 0 0 4 版中国科技期刊引证报告的数据为信息来源。参考由中国科学院自然 科学期刊编辑研究会承担、中国科学引文数据库协助完成的自然科学学术期刊 评价指标体系，并结合专业知识，运用专家评分法、s a a t y 氏等方法建立了医 学期刊学术水平综合评价指标体系，并用层次分析法、加权t o p s i s 法和加权秩 和比法等统计学方法对从引证报告中随机抽选的1 0 种医学期刊的学术水平进行 了综合评价。旨在建立一个医学期刊学术水平的综合评价指标体系，为学术期刊 主管部门对医学期刊定级评估提供参考。 硕士学位论文研究对象与方法 1 1研究对象 第一章研究对象与方法 样本来源于中国科学技术信息研究所编写的，由科学技术文献出版社出版的 ( 2 0 0 4 版中国科技期刊引证报告( 下称引证报告) 。采用分层随机抽样方法， 先将主管单位不同的来源期刊中的医学期刊分成：“中华”系列期刊、“中国”系 列期刊、“学报”系列期刊、“军事和特种医学”期刊和“地方主办”系列期刊5 大类。再从每一类中随机抽选2 种共1 0 种。为便于比较分析，分别用a j 的英 文字母表示。 1 2 方法 1 2 1 咨询专家遴选 选择从事编辑出版工作l o 年以上，具有副高级以上专业技术职务的专家1 0 名，采取德尔菲法，以发放调查表的方式，主要针对2 3 个与医学期刊学术水平 相关的评价指标，共进行了两轮咨询。咨询专家构成情况见表卜1 。 表1 - 1 咨询专家构成情况 1 2 2 咨询工具 采用自行设计编制的调查表，见附录2 。用系统分析法与文献优选法选择一 级指标3 个，二级指标2 3 个。调查表中的指标评价采用量表的形式，每一个指 标给3 个选项，分别按5 、3 、1 评分，即必选( 计5 分) 、可选可不选( 计 3 硕士学位论文 研究对象与方法 3 分) 和不必选( 计1 分) 。专家对某项指标不熟悉的，则该项指标只按最低 分计分( 1 分) 。 1 2 3 指标遴选 对调查数据采用专家评分法进行条目删减。删除咨询结果中得分小于4 0 分 的指标( 总分为5 0 分) 。 各层各维度评价指标专家评分的一致性系数用公式= 乏彳( i z ) “。计 算，有相同秩时用公式m 2 矛虿二；薪砰进行校正口一致性系数越接近 1 ，表示所有专家对全部评价指标评分的协调程度越好，反之，则意味着专家们协 调程度较差，说明专家之间对各评价指标相对重要性的认识存在较大的不一致 性。 1 2 4 用s a a t y 氏权重估计法估计权重 建立递阶层次结构，形成医学期刊学术水平评价指标的目标树图。1 0 位专 家对目标树自上而下分层次一一打分，建立成对比较判断优选矩阵，评分标准见 表卜2 。 用s a a t y 氏权重估计法估计目标树图各层评价指标的权重。 用公式允一= 蓦九m 计算晟大特征根，再用公式a = 丑詈三兰计算甜值a c i o 1 0 时认为各层指标各项权重判断无逻辑错误。再用公式c r = ! r i 计算c r ( 随机一致性比率) 值，c r 0 1 0 即认为判断矩阵具有满意的一致性。计算各 评价指标的组合权重 7 1 。 袁1 - 2 指标树图各层次评分标准 1 2 5 选择综合评价方法 4 硕士学位论文研究对象与方法 本研究采用层次分析法、加权秩和比法和加权t o p s i s 法对1 0 种医学期刊进 行综合评价i s 。 层次分析法：综合评分指数“按公式g ，= c i + p i 求得。一致性指标r i 值取 i = l 值标准见表1 - 3 。 表1 - 31 9 阶平均随机一致性指标r i 取值 加权秩和比法：计算加权秩和比秩采用公式r s r r = 凳。阡珊 ，分档依据为 标准正态离均差，。常用分档情况下的百分位数只临界值及其对应的p r o b i t 值 见表卜4 。 表1 - 4 常用分档情况下的百分位数b 临界值及其对应的概率单位p r o b i t 值 分档数百分位数r p r o b i t 分档数百分位数rp r o b i t 3 p 1 5 8 6 6 46 p 2 2 7 5 3 p 1 5 8 6 64 p 2 2 7 5 3 p 8 4 1 3 4 6 p 1 5 8 6 6 4 4p6681 3 5p 5 0 5 p 6 6 8 l 3 5 p 8 4 1 3 4 6 p 5 0 5 p 9 7 7 2 5 7 p 9 3 3 1 9 6 5 7p1618 2 8 6 5 p 3 5 9 3 3 2p 1 6 1 8 2 8 6 p 3 5 9 3 3 2 p 1 0 0 2 7 3 7 2 p 2 7 4 2 5 4 4 p 3 3 3 6 0 4 5 7 p ? 2 5 7 5 5 6 p 6 7 0 0 3 5 4 4 p 9 6 4 0 7 6 8 p 8 9 9 7 3 6 2 8 p 9 8 3 8 2 7 1 4 加权t o p s i s 法：本研究所选指标均为高优指标。因此，进行归一化处理时，选 硕士学位论文研究对象与方法 用高优指标公式口。- x , 耵运算。得出归一化矩阵之后，选出最优方案和 最劣方案，对指标进行加权，并分别计算各评价对象与最优方案及最劣方案的距 离讲2 j 姜w ，( 口：一嘞) 2 和d 2 、陲w ，( 口；一锄) 2 。计算各评价对象与最优方 案的接近程度：，： 旦。然后，按从大到小的顺序将各评价对象排序， “战+ a 以c 信撒大为优。 1 2 6 一致性检验 3 种综合评价方法的结果一致性检验采用s p e a r m a n 秩相关检验。 假设检验：1 4 - o ：p 。= o3 种综合评价方法之间无直线相关关系 h l ：p 。o3 种综合评价方法之间有直线相关关系 0 【= o 0 5 按公式r ：l 一! 4 1计算出，j 值，再用查表法查n 界值表确定p 值。 。 n ( n 。一1 1 以p o 0 5 为有统计学意义。 硕士学位论文结果 第二章结果 2 1评价指标体系的构建 2 1 1 评价指标筛选 本研究共选取2 3 个指标，按其功能分成3 个维度进行专家咨询，结果见表2 - 1 。 表2 - 1 专家咨询得分情况 其他相关指标期刊创办年限 235 2 4 7 硕士学位论文结果 主管单位 办刊单位性质 期刊学科分类 被国外知名检索系统收 录数 被国内主要检索系统收 录数 刊期长短 年发表论文总数 4 4 23 4 1 3 8 由表2 1 可见，专家评分法得分超过4 0 分的指标有：影响因子、总被引频 次、他引总引比、被引半衰期、来源文献量、参考文献量、基金论文比、被国 内主要检索系统收录数和被国外知名检索系统收录数等9 项。本研究选取了前 8 项。被国外知名检索系统收录数是1 个衡量期刊学术水平的有效指标，在专 家咨询中获得了4 4 分。但是，由于我国医学期刊在国外知名检索系统中的显示 率极低。据统计，2 0 0 4 年我国内地医学期刊中，被收录到s c i 中的只有中华 医学杂志英文版( c h i nm e dj ，0 4 j ) 1 种。将该指标用于评价2 0 0 3 年的医学 期刊学术水平显然不妥。因此，本研究未将其列入必选评价指标行列。入选评 价指标分类及编码见图2 1 。 ，影响因子( c 1 ) i总被引频次( c 2 ) r 期刊引用指标1 弋 他引总引比( c 3 ) il 被引半衰期( c 4 ) ir 来源文献量( c 5 ) 学术水平1 来源指标( b 2 ) 参考文献量( c 6 ) ll ll 基金论文比( c 7 ) i l 其他相关指标( 1 3 3 1 被国内检索系统收录数( c 8 ) 图2 - 1 入选评价指标树图 8 舱 罢s 勰 5 3 o o 硕士学位论文结果 2 1 2 评价指标的权重估计 本组用s a a t y 氏权重估计法确定各指标权重。 2 1 2 1 专家意见一致性 根据图2 - 1 所示，采用分层打分的方法。第1 层3 个1 级指标按等差( 5 、 3 、1 ) 给分。第2 层8 个2 级指标按其指标分类分成3 个维度进行评分，第1 个维度有4 个指标，按等差( 7 、5 、3 、1 ) 给分，第2 个维度3 个指标，按等 差( 5 、3 、1 ) 给分。第3 个维度只有1 个指标，不必进行重要性评分。结果见 表2 2 表2 4 。 表2 - 23 个1 级指标的专家评分情况 于= t i n = ( 1 0 + 2 3 5 + 2 6 5 ) 厅= 2 0 因为有相同秩，用校正公式计算一致性系数 m 2 而丽1 2 屹簖一o 。y d ，2 = 。8 3 5 1 表2 - 3 期刊引用指标维度4 个2 级指标的专家评分情况 于= 乃一= ( 2 2 + 1 1 5 + 2 7 + 3 9 ) 1 4 = 2 5 i = 1 因为有相同秩，用校正公式计算一致性系数 9 硕士学位论文结果 m = 而丽1 面2 丽戮卸8 1 5 1m 2 而鬲西丽上q “1 表2 - 4 来i t , 7 , i t 标维度3 个2 级指标的专家评分情况 评价对象l 234567 8 。91 0 ；秩和( t i ) c 155533 5 ，55 ；5 5 ； r l1ll2 ：2l 1l l 1：l1 2 c 2 3 3 l l3 3 ：33 ；l 3 r 2：223 32 22 5232 2 3 5 c 3 i l135313 ：1l31 r 33321232 53；232 4 5 于= 疗打= ( 1 2 + 2 3 5 + 2 4 5 ) 3 - - 2 0 m 2 而岽甚丽翻砘5 5 1 4 本研究中第l 层3 个指标、第2 层3 个维度8 个指标专家评分时均出现相 同秩。所以均用校正公式 。一一) 一1 2 屹懈一) 。v a ，2 进行计算，获得较好一 致性。 2 1 2 2 判断优选矩阵 ( 1 ) 第一层a 对b 的矩阵： ab 1b 2b 3 b 1135 b 21 3 1 3 b 31 51 31 ( 2 ) 第二层b 对c 的矩阵： b 1c 1c 2c 3c 4 ：11 3 57 ：21 313 5 3 31 51 3 13 1 7 1 51 31 硕士学位论文结果 8 2c 5c 6c 7 c 5135 c 61 313 0 71 51 31 2 1 2 3 计算初始权重系数 按公式矽7 = 瓠i i 赢计算出w i 得出第l 层： w 。，= 2 4 6 6 2 ，w 2 = 1 0 0 0 0 眠= o 4 0 5 5 按公式形，：形j ，艺矽j 对以上权重系数进行归一化处理， 得： g = o 6 3 7 0 ( 期刊引用指标)慝= 0 2 5 8 3 ( 来源指标)聪= o 1 0 4 7 ( 其他相 关指标) 。 同理可得出第2 层经归一化处理后的权重系数。 对以上权重进行一致性检验如下： 第1 层：经计算最大特征根 m a x = 3 0 3 8 5 c i = 0 0 1 9 3 0 1 0c a - - o 0 3 o 1 0 可以认为第一层子目标各项权重判断无逻辑错误，判断矩阵具有满意的 一致性。 第2 层b 1 下子目标最大特征根 m a x = 4 2 6 8 5 c i = ( 4 2 6 8 5 - 4 ) ( 4 - 1 ) ：0 。0 8 9 5 0 1 0c r - - o 0 8 9 5 o 9 0 = 0 0 9 9 4 3 0 0 ，而水平相对 较差的是f 、e 和c 刊，综合指数均 2 0 0 。 2 2 2加权秩和比法 给原始数据进行编秩，根据专业知识确定所选评价指标均为高优指标。编 秩结果见表2 7 。 表2 - 71 0 种医学期刊8 项学术水平评价指标值及r s r 值计算 i c 1c 2c 3“c 5c 6c 7ic 8 ； ；刊名 - _ r s r w ； l 刘侧x 2 r 2 朋r 剧 8 4 船拍r 6 j 7 f ，! x 8r 8 l ； 。专- ，。l ， 争 h i 0 4 0 1 ；54 9 2 80 2 8 12 5 6 ；1i3 3 51 1 01 2 9 620 0 3 ：l ；13 ；0 5 1 8 8 ： 。4 ： 。： 一： ：一? ：o 十 ： i：0 4 3 9 ；7 ：4 1 4i60 8 67 i3 7 2 ；4 l1 6 121 7 4 370 8 11 0 ；260 ，5 8 8 1 b “* b p j ；0 4 0 1 53 6 5 ；50 5 83 ：2 8 62 ；2 4 582 0 9 390 5 683 8 ；0 ，5 7 2 ：权重o 3 5 9 1 o 1 6 7 8o - 0 7 5 1o 0 3 5 1 ：o 1 6 4 5o 0 6 6 7 o 0 2 7 ：o 1 0 4 7 ； 14 蕊一一 蔫一一 三丽焉舞曩 一一 赫一_ 一h m 埔坫铊 仉n 一 3 3 1l一 3 2 n 蚪m m 18“竺萎|3 9 的昭12 8 3 一竺竺 m o * 盯船仉吼1 3 4 1 一 ” l 3 一 晷| | l m m f g 硕士学位论文结果 本例采用分档排序法，先确定r s r 的分布：编制r s r 的频数分布表，列出 各组频数z 计算各组累计频数_ 确定各组r s r 得秩次范围r 及平均秩次天； 计算向下累计频率p = 页静；将百分率p 换算成概率单位p r o b i t ，p r o b i t 为百分率p 对应的标准正态离差甜加5 。结果见表2 - 8 。 建立回归方程：以累计频率所对应的概率单位值p r o b i t 为自变量，以彤雅 为应变量，计算回归方程：兄曼r = a + b p r o b i t 。统计软件用s p s s1 1 5 。结果如 下： 得出回归方程为：m r = - - o 3 9 4 + 0 1 8 2p r o b i t 。p o 0 0 0 ，有统计学意义。 按照回归方程推算所对应的r s r 估计值对评价对象进行分档排序。期刊评 优、评级通常将参评期刊分成3 或4 个等级，表2 - 9 显示：分成3 个等级时， 除了a 、b 两刊较好之外，其余均为一般及以下水平，未拉开档次，学术水平 高低的区分不及分成4 个等级时明显。 硕士学位论文结果 2 2 3 加权t o p s is 法 本研究的指标均为高优指标，不需作变换使之同趋势化，根据表2 - 2 的数 据，通过高优指标归一化计算公式m ：x ， d n = 直接进行归一化处理。 = 0 6 4 同理可求得处理后的归一化矩阵值。见表2 - 1 0 。 表2 1 01 0 种评价指标的归一化矩阵值 评价对象 c lc 2c 3c 4c 5c 6c 7c 8； 0 3 5 ；0 6 40 3 40 4 30 3 1 ：0 3 9 ；0 1 50 5 5 r r pp 一 ， i b 0 5 2 ；0 5 70 3 1 ；o 3 6io 2 10 2 9 ；0 4 8 ：0 4 2 ； ， 一 ? ?j c ：0 3 70 i i ；0 3 3 0 3 40 3 20 3 1 0 3 1 ：0 1 4 ； r “ ? ：， d0 3 2 ；0 2 50 2 60 4 1 ；0 2 8 ：0 3 i0 1 80 4 2 ? + * p 专 。 争 ：； e0 1 6 ；0 10 2 50 2 9 ；0 2 8 0 2 8 ；0 2 4 1 0 1 4i c ? f 0 0 50 0 6 ：0 3 50 3 5 ；0 2 30 2 2 ；0 0 8 ；0 1 4 i j ； 。 j g0 2 5 ；0 10 1 60 2 2 ；0 3 90 3 5 ；0 0 30 1 4 ； 扣p p “ ? j h 0 2 9 ；0 2 70 i ；0 1 9 0 4 80 2 4 ；0 0 2 ；0 1 4 ； 。一一一 。 一* ， ，? ， 一j 1 0 3 2 ：0 2 30 3 l ；0 2 8 ；0 2 20 3 20 6 20 2 8 ； ， ； ； j 0 2 90 20 2 10 2 0 3 50 3 8 ：0 4 3 0 4 2 ： 注：c i c 8 为8 个评价指标的编码 16 硕士学位论文结果 由表2 1 0 可得到最优值向量和最劣值向量，即有限方案中的最优方案和最 劣方案： 最优方案a + = ( o 6 4 ，0 5 2 ，0 3 5 ，0 4 3 ，0 4 8 ，0 3 9 ，0 6 2 ，0 5 5 ) 最劣方案a - = ( o 1 ，0 0 5 ，0 1 ，0 1 9 ，0 2 1 ，0 2 2 ，0 0 2 ，0 1 4 ) 用加权t o p s i s 法公式计算1 0 种医学期刊距a + 与a - 的距离d + 与d 及接近程 度系数。见表2 - 1 1 。 表2 1 11 0 种医学期刊加权t o p s i s 法评价结果 表2 一1 1 结果显示：1 0 种医学期刊中学术水平相对较好的是a 和b 刊。相 对较差的是f 和e 刊。这一点与层次分析法及加权秩和比法得出的结论一致。 2 3 评价结果的一致性检验 s p e a r m a n 秩相关检验： 17 硕士学位论文结果 3 种方法综合评价结果的致性采用s p e a r m a n 秩相关分析。 由表2 一1 2 可见，3 种评价方法结果比较有统计学意义，均p o 0 5 。说明 3 种方法对医学期刊学术水平指标体系的实证研究结果具有较好的一致性。 表2 - 1 23 种方法s p e a r m a n 秩相关分析结果 l 刊物编号0 型驾也；d 1 20 苎坚苎些也l 畦z 塑坚! 氅d ，；d ，z ! 刊物编号卜一也 卜一也l 畦2 卜_ 一 ，；， 综合指数秩次； ； ；脚估计值秩次综合指数d 秩次； ：3 7 4 3 9 1 0 ；0 ；0 0 8 3 8 7 l o0 0 ；0 7 ；1 0 ；0 0 p ；!。争哥，哥一， + ， ； b ；3 0 7 5 7910l0 ；0 7 3 0 9 ；9 ：0 0 ；0 5 5 8 8 ：9 ；0 0 ； + ； 。 ； t 一一 c1 8 2 4 5 3 ；一5 2 50 6 7 0 3 ：8 ：1 ；1 ；0 4 4 5 7i - 41 6 ； + ；i jj jd ：2 2 1 5 45i 一1 ；1 0 6 0 5 1丁 一1 ；1j0 4 7 7 9 ：6 ；一2 4 i 一； 0 十； ； ： ； e1 6 6 3 12i0i0 0 ，3 0 2 8 ：2 0 ；0 ；0 ，2 2 7 42：00 ； v 毒 i 一 i：；+ j i p1 2 6 ，9 91 ；0 0 ；0 2 5 1 410 ；0 ；0 2 11；0 o ： i j 扣 专： c2 0 1 3 3 4 ；1l1 ；0 4 2 1 830 ；0 0 3 0 5 23l1 ； ； ：， ； h；2 2 4 5 7 ；3l9 0 5 1 8 841 ；1 ；0 4 0 1 15 ；2 ：4 p 一“?一jr “r y i ；2 1 1 2 4 5 i 一1 1i0 5 8 8 l ：0 0 ；0 ；0 4 7 0 30 ； i1 r。r： + ： “ ， “ ? “ i j ；2 4 1 8 2 8 ；3 ；90 5 7 2 ：5 1 ；1 ；0 3 9 5 44：41 5 ； ；e d l 2 = 4 5 ；吨2 = 4 ：j 3 2 5 4 2 p j ， i ，。 ： ， i ；f s l = o 7 2 ；n 2 = o 9 8 ir ，篁0 7 5 i j j? ? ；十 ；： o 0 5 ； 2 o 0 1 ! p ， o0 1 ，妇分别代表层次分析法与加权秩和比法、加权秩和比法与加权 t o p s i s 法、加权t o p s i s 法与层次分析法的秩相关系数。 18 硕士学位论文 分析与讨论 第三章分析与讨论 3 1 建立综合评价的指标体系 3 1 1评价指标的分类及来源 能反映学术水平的指标有很多。按评价的时限划分，有的是静态的，多用 于同一年中多种期刊的比较，比如本文所选用的这8 项。有的是动态的，可用 于观察同种期刊多年来自身学术水平的变化，比如：稳定指数和影响因子平均 增长率等。按其与刊物载文量的相关关系划分，又可分成量效指标和质效指标 2 种。由中国科学院自然科学期刊编辑研究会承担、中国科学引文数据库协助 完成的“自然科学学术期刊评价指标体系”中将各静态学术水平综合评价指标 分成了引文特征参数、稿源特征参数和外延参数3 种。 中国科学技术信息研究所每年发布的c j c r , 白2 0 0 3 年开始向社会全面公 布1 5 项具体统计数据。分别是：总被引频次、影响因子、即年指标、他引总引 比、引用刊数、扩散因子、被引半衰期、来源文献量、参考文献量、平均引文 数、平均作者数、地区分布数、机构分布数、国际论文比和基金论文比等。这 1 5 个指标均被认为是用来评价静态学术水平的，有研究将总被引频次、引用刊 数、来源文献量、参考文献量、机构数和地区分布数等与刊物的载文量直接相 关的指标称为量效指标；而其余9 个( 均为比值) 因其排除了载文量的影响，则 被称为质效指标。本组选取的8 项指标中，总被引频次、来源文献量、参考文 献量和被国内检索系统收录数是量效指标，其余4 项均为质效指标。其中，影 响因子和被引半衰期是反映学术影响力的。总被引频次和他引总引比是反映使 用情况的，前面这4 项指标均属于引文特征参数。来源文献量、参考文献量和 基金论文比这3 项是稿源特征参数，被国内检索系统收录数也是量效指标，属 于外延参数的范畴，c j c r 中没有列出，本组该数据来源于c n k i 数据库。 3 1 2 评价指标的筛选及其权重估计 硕士学位论文 分析与讨论 综合评价的目的是力争用尽量少的指标对评价对象作出最客观的评价。可 见评价指标也并不是越多越好。在国内目前已有的指标体系中，较有代表性的 就是由中国科学院自然科学期刊编辑研究会承担、中国科学引文数据库协助完 成的自然科学学术期刊评价指标体系。该评价体系既有动态评价体系，又有 静态评价体系；既有评价期刊学术水平的指标，也有评价期刊编辑出版水平的 指标，可谓大而全。仅评价静态学术水平的指标就有1 1 项，分别是：影响因子、 总被引频次、反应速率、反应速率、平均引文率、期刊他引率、作者他引率、 基金资助项目论文比例、国际著者论文数、论文机构分布数、被国际著名检索 系统收录数和倍国内重要检索系统收录数。有4 项与本组相同( 影响因子、总 被引频次、基金论文比和被国内检索系统收录数) 。但是，笔者认为有一些意义 相同或相近的，可以用一个有代表性的指标取代。比如：其中的平均引文率、 期刊他引率和作者他引率3 项指标，经专家咨询后认为可以用他引总引比一项 代替。还有一些数据库同时提到了被引半衰期和赖普斯指数，同样是反映期刊 文献老化速率的指标，笔者认为二者选其一就行了。本组选择的是被引半衰期。 为使综合评价指标更具有代表性，本组结合医学期刊种类繁多，而影响因子和 总被引频次普遍偏低的特点，并综合各大数据库的常用指标体系，通过专家咨 询选用了8 项笔者及咨询专家一致认为最具代表性的评价指标。初步建立了一 个分为2 层共有8 个评价指标组成的医学期刊学术水平综合评价体系，并描绘 出该指标体系的框架图。这个指标体系比上述指标体系的优点是评价指标少而 精，并在使各评价指标更具代表性的同时加大了对医学期刊载文量及载文质量 评价的比重。虽然熊芝兰等的研究认为量效指标受创刊以来的总文献量或统计 当年的来源文献量( 由刊物的刊期、页码决定) 的最直接影响，使载文量不同( 即 不同刊期、页码甚至排版字号) 的刊物量效指标的横向比较参考意义不及质效 指标1 9 1 。但是，载文量及载文质量对医学期刊的学术质量的提高，其意义不容 忽视，毕竟论文质量的提高才能使引用更有价值。 评价医学期刊的学术水平，首先就要看医学期刊在同行中的地位和影响力。 因此，在本研究构建的指标体系第1 层的3 项指标中，反映期干u 引用情况的指 标地位最重要，国内外均有仅通过引文分析来评价期刊学术质量的报道i m 用。 其次是反映来源情况的指标，最后才是其他指标。这一层的权重估计在专家评 20 硕士学位论文分析与讨论 分时较容易获得。第2 层中共有8 个入选指标，由于多个专家同行直接评价多 个指标的权重有一定困难。因此，放弃直接通过专家评分获得所有评价指标权 重的做法。金新政等用优序图和层次分析法对评价指标进行权重估计【6 l 。还有的 研究利用电子表格e x c e l 填制优序图调查表、汇总计算权重系数【埘。本组采用 s a a t y 法，在第2 轮专家咨询中，分层对指标的相对重要性进行一一打分，得到 成对比较的判断矩阵后通过公式运算得到各层各个指标的组合权重。经一致性 检验，结果满意。 在确定主要评价指标的重要性排名时，专家们的意见较为一致： ( 1 ) 影响因子是1 项非常客观实际的评价指标，可以显示该期刊被使用和 受重视的程度，以及在科学交流中的作用和地位。常被当作评价期刊质量的必 选指标。国外学者常仅凭影响因子1 项来评价期刊的学术质量唧一1 1 。但国内 学者认为引证行为的不确定性、学科、源期刊库等的差异都给影响因子带来较 大的偏差。因此，不能仅凭影响因子这一项来对期刊的学术水平下定论。应该 正确应用影响因子来评价期刊及论文1 2 2 - 2 5 1 。尽管如此，影响因子在综合评价中 的重要性是毋容置疑的。本组该指标专家评分时获满分通过，可见其在期刊综 合评价中的重要地位已在期刊届达成了共识。 ( 2 ) 总被引频次属于量效指标，包括他引和自引两部分。自引率有一定的 可操作性，近几年在一些较大的评价体系中已不常使用口6 】。2 0 0 4 版引证报告 中己无该项指标的数据。刊物的自引率过高会使得总被引频次偏高，他引总引 比的应用可有效地对其进行调控，使综合评价更为客观。因为参杂了非客观因 素，总被引频次的重要性评分被排在了影响因子之后。值得注意的是，自引率 高未必完全由非客观因素造成，也可能受到客观条件的限制。比如：中医类期 刊在整个医学期刊方阵里所占比例是很小的，c j c r 收录的中医类期刊只有2 8 种，国外检索系统几乎没有。而祖国医学的精华大多数都发表在这些少数的中 医专业刊物上，其文献来源也大多局限于本专业期刊，出现较高的自引率就很 正常了，即便出现这种情况也并不代表中医类期刊的论文学术水平不高。因此， 笔者认为他引总引比在综合评价中只能作为一个调控指标，不能最终取代总被 引频次，尽管专家评分时得分高于总被引频次。其重要程度也只能排在总被引 频次之后。 2l 硕士学位论文分析与讨论 ( 3 ) 基金论文比虽在专家评分中也获得了满分。但是，由于我国医学科研 管理部门的规定，我国基金资助课题必须发表在少数影响因子较高的核心期刊 上，已经在医学期刊中产生了“马太效应” 2 7 1 。这种评价机制的不健全和评价手 段的简单化，将造成评价结果的不客观、不合理；加上重人情拉关系、本位主义 等人为活动的不正常介入，将造成评价结果的不公开、不公正 2 8 1 。因此，在本组 指标中不宜过于强调。 ( 4 ) 被国外检索系统收录数在专家评分中也超过了4 0 分却被排除在外。 主要原因是：中国医学期刊在国外检索系统中显示率极低，国外检索系统的语 种歧视固然是不可忽视的因素，更主要的还是因为我国医学期刊的学术质量偏 低使得我国医学期刊的国际竞争力不强。况且我国医学期刊被国外检索系统收 录的仅仅是医学期刊整体中的极少数。将其作为评价学术水平的指标对医学期 刊总体评比的意义不大。另外，中国医学科研成果评价中对s c i 统计数据不加 区分地使用，已经在很大程度上引导我国医学科技工作者把自己相对水平高的 科研成果投向为数不多的高影响因子国外刊物。这一方面使得国内的优秀科研 成果不能为中国的同行首先获悉，对国内科学技术的发展极为不利：另一方面使 得国内医学期刊在提高学术水平和国