（计算机软件与理论专业论文）网络科技资源质量评价方法的研究.pdf

摘要 随着网络科技资源的数量迅速增长，科技资源的异构现象、不规范问题日益 突出，网络科技资源利用、管理效率亟待提高。本文以“国家科技基础条件平台 的子项目“网络科技资源应用集成环境建设”项目为背景，对评价指标、 a h p 评价模型、加权矩阵、h f g f 算法评价模型等进行分析，针对h f g f 算法评 价模型应用到网络科技资源质量评价系统中的一些关键问题展开研究。主要研究 工作包括： 1 对评价指标的选择和评价模型的确定。针对影响数据质量评价指标的数 据质量度量模型、数据质量控制模型分析。提出了一种基于层次分析法 和灰色关联度相结合的综合评价指标模型，实验结果表明，该方法准确 地描述了被评价资源的本质特征。 2 运用层次分析法与模糊理论确定评价指标的加权矩阵。针对现有方法确 定的权重存在的问题进行了改进，提出了一种兼顾主客观两方面的因素 的综合权重的加权矩阵方法，可将被评价网络科技资源的特征指标在整 个评价过程中的重要程度合理地表达出来。 3 从定量及定性分析的角度提出了h f g f 集成算法评价模型。将灰色关联 统计专家评分和问卷调查评分相结合，通过模糊评判得出评价结论。实 际运用，评价结果更趋于客观、真实、合理。 4 设计并实现了网络科技资源质量评价与应用系统。将肿g f 算法模型应 用到网络科技资源质量评价系统中，对汇集到的网络科技资源的质量进 行了较为合理的评价，系统运行取得了较好效果，具有一定的理论意义 和实际意义。 关键词：层次分析法， 狄色关联。模糊综合，评价指标，评价模型 a bs t r a c t 砌mr a p i dg r o w t ho ft h en e t w o r kt e c h n o l o g yr e s o u r c e si nn u m b e r , t h e h e t e r o g e n e o u sp h e n o m e n o no ft h e s c i e n c ea n dt e c h n o l o g yr e s o u r c e s ，n on o r m s i n c r e a s i n g l yp r o m i n e n t , t h eu t i l i z a t i o na n dt h ee f f i c i e n tm a n a g e m e n to ft h en e t w o r k t e c h n o l o g yr e s o u r c e sn e e dt ob ei m p r o v e d t h eb a c k g r o u n do f t h i sp a p e ri st h ep r o j e c t ”n e t w o r kt e c h n o l o g yr e s o u r c e sa p p l i c a t i o ni n t e g r a t i o ne n v i r o n m e n t ”w h i c hi ss u b o ft h ep r o j e c t ”n a t i o n a ls c i e n c ea n dt e c h n o l o g yp l a t f o r m ”，a n a l y z i n ge v a l u a t i o ni n d e x , a h pe v a l u a t i o nm o d e l ，t h ew e i g h t e dm a t r i x ，h f g fa l g o r i t h me v a l u a t em o d e l s ，w e b e g i nt os t u d ys o m eo ft h ek e yi s s u e so ft h ea l g o r i t h me v a l u a t i o nh f g fm o d e l a p p l i e dt ot h en e t w o r kt e c h n o l o g yr e s o u r c e sq u a l i t ye v a l u a t i o ns y s t e m n l em a i n w o r ki n c l u d e s ： 1 n ec h o i c eo fe v a l u a t i o ni n d i c a t o r sa n de v a l u a t i o nm o d e l st od e t e r m i n e w e h a v ea n a l y z e dt h ei m p a c to fd a t aq u a l i t ye v a l u a t i o nf o rd a t aq u a l i t y m e a s u r e m e n tm o d e la n dd a t aq u a l i t yc o n t r o lm o d e l ah i e r a r c h i c a lm e t h o d a n dt h eg r a yc o m p r e h e n s i v ee v a l u a t i o ni n d e xc o m b i n i n gm o d e li sp r o p o s e d ， t h er e s u l t so fw h i c hs h o wt h a tt h em e t h o da c c u r a t e l yd e s c r i b e st h ee s s e n t i a l c h a r a c t e r i s t i c so ft h er e s o u r c e sb e i n ge v a l u a t e d 2 t h ew e i g h t e de v a l u a t i o nm a t r i xi sd e t e r m i n e db yu s i n ga h pa n df u z z y t h e o r yt o t h i sp a p e ri m p r o v e st h ee x i s t i n gm e t h o d sw h i c hh a v em a n y p r o b l e m sf o rd e t e r m i n i n gt h ew e i g h ta n dp r o p o s e ac o m p r e h e n s i v ew e i g h to f t h ew e i g h t e dm a t r i xe v a l u a t i o nm e t h o dw i t l lab a l a n c eb e t w e e ns u b j e c t i v e a n do b j e c t i v ea s p e c t sw h i c hc a ne x p r e s sr e a s o n a b l yt h ei m p o r t a n c ed e g r e eo f t h ef e a t u r ei n d e x e so fn e t w o r kt e c h n o l o g yr e s o u r c e si nt h ee v a l u a t i o n p r o c e s s 3 f r o mt h ep e r s p e c t i v eo fq u a n t i t a t i v et oq u a l i t a t i v ea n a l y s i s ，t h eh f g f i n t e g r a t e de v a l u a t i o nm o d e li sp r o p o s e d n ee v a l u a t i o nc o n c l u s i o ni sd r a w n b yf u z z ye v a l u a t i o nc o m b i n i n gt h es c o r eo ft h es t a t i s t i c a le x p e r t sb yg r e y a n dt h es c o r eo ft h eq u e s t i o n n a i r e i nt h ep r a c t i c a la p p l i c a t i o n ，e v a l u a t i o n r e s u l t sb e c o m em o r eo b j e c t i v ea n dr e a la n dr e a s o n a b l e 4 t h en e t w o r kt e c h n o l o g yr e s o u r c e sq u a l i t ye v a l u a t i o na n da p p l i c a t i o ni s d e s i g n e da n dc a r r i e do u t t h eh f g fa l g o r i t h mm o d e li sa p p l i e dt ot h e n e t w o r kt e c h n o l o g yr e s o u r c e se v a l u a t i o ns y s t e m ，w h i c hc o n d u c t sam o r e r e a s o n a b l ea s s e s s m e n to nt h ec o l l e c t i o no fs c i e n t i f i ca n dt e c h n o l o g i c a l r e s o u r c e st ot h eq u a l i t yo ft h en e t w o r k , a n dh a sa c h i e v e dg o o dr e s u l t si nt h e s y s t e m ，w i t hs o m et h e o r e t i c a la n dp r a c t i c a ls i g n i f i c a n c e k e y w o r d s ：a i p , g r e y , f u z z yc o m p r e h e n s i v e ，e v a l u a t i o ni n d e x ，e v a l u a t i o n m o d e l s 西北大学学位论文知识产权声明书 本人完全了解西北大学关于收集、保存、使用学位论文的规定。学校 有权保留并向国家有关部门或机构送交论文的复印件和电子版。本人允许 论文被查阅和借阅。本人授权西北大学可以将本学位论文的全部或部分内 容编入有关数据库进行检索，可以采用影印、缩印或扫描等复制手段保存 和汇编本学位论文。同时授权中国科学技术信息研究所等机构将本学位论 文收录到中国学位论文全文数据库或其它相关数据库。 保密论文待解密后适用本声明。 学位论文作者签名： 瘗建金丝指导教师签名： 弘f 。年6 月2 1 日o ) d 侔么月) 日 西北大学学位论文独创性声明 本人声明：所呈交的学位论文是本人在导师指导下进行的研究工作及 取得的研究成果。据我所知，除了文中特别加以标注和致谢的地方外，本 论文不包含其它人已经发表或撰写过的研究成果，也不包含为获得西北大 学或其它教育机构的学位或证书而使用过的材料。与我一同工作的同志对 本研究所做的任何贡献均已在论文中作了明确的说明并表示谢意。 学位论文作者签名：需鼢纽 铂p 年易月2 f日 西北大学硕士学化论文 1 1 选题背景 第一章绪论 随着信息化产业技术的飞速发展，网络科技资源【l 】的增长与人们对它的利用效率方 面却不成正比例的现象表现突出，不同地域、不同类别的网络科技资源不能够有效地被 管理和利用，这就造成了用户在查找所需要信息的时候就像是在大海中捞针似的，既浪 费了宝贵的时间、金钱，又浪费了人力、物力，由此可见对现行的资源管理机制已经不 能够很好地满足用户的需求。 针对以上问题现今所做出的对网络科技资源的整合、保存和使用形式的多样化导致 了对网络科技资源质量的要求和规范化程度的多样性。由于对资源进行了整合，各种形 式的数据资源要被整合到一个统一的平台当中，这些格式不一、分类不同的数据有可能 被放到同一个资源平台上面，而各个单位对网络科技资源需求与质量控制能力之间的差 异也在逐步扩大、汇集到质量不一的科技资源会影响整体的服务效果，因此首先要有效 地对网络科技资源进行整合，对整合后的资源进行合理地、有效地分类，最后在合理分 类的基础上再对网络科技资源的质量进行科学地评价。 在科技创新体系大潮的推动下，只有不断地推动网络科技资源共享体系建设，组织 国家科技基础条件平台项目建设，才能使网络科技资源不断地服务于全社会，促进科技 进步与知识创新体系的形成。网络科技资源被共享和利用的程度，对一个国家的创新能 力、科技能力、知识能力都有很大的影响，同时又成为增强国家间的综合实力、国际竞 争力的重要因素。 在增强国家科技基础条件平台项目建设总体规划f ，面向网络科技环境领域，设计 并确定了一系列建设任务，其中最重要的组成部分为“国家科技基础条件平台应用服务 支撑系统( a p p l i c a t i o ns e r v i c es u p p o r ts y s t e m ) 。 该课题以面向国家科技集成平台资源，建设统一的网络科技资源汇集j 、服务支撑 环境，形成统一的应用、安全支撑体系，有效的分类系统，形成应用集成基础性技术环 境，用来支撑平台资源的全局性共享与广泛应用，形成能够对需求定制的应用集成服务 示范体系；形成能够对分布式网络科技资源进行监测、分析、评估体系，支持平台资源 准确地、及时地、科学地分析及评估：实现网络科技资源能够被正确地、安全地、可信 第一章绪论 地、可控地共享与广泛的应用；对于一些重点领域及区域进行国家科技基础条件资源整 合示范，建立安全、快速、实时、高效的新型科技服务支撑模式，为各类科技资源的整 合、共享、利用、提供安全、高效的技术支撑为建设目标。 “网络科技资源质量评价方法与应用系统建设”是“网络科技资源应用集成环境建 设”的子任务，该任务依托于国家科技基础条件平台建设项目“国家科技基础条件平台 应用服务支撑系统”，针对其中的应用集成建设目标提供平台和技术支撑。由于几年的 持续完善建设完成了基础平台系统体系，汇集了大量有价值的网络科技资源数据。 针对科技资源的有效管理方面，又提出了“网络科技资源质量评价方法与应用系统 建设”子项目建议，该任务的建设目标是为网络科技资源的质量有效管理的提供合适的 评价方法，为网络应用提供信息服务应用，“网络科技资源质量评价方法与应用系统建 设项目是“网络科技资源应用集成环境建设 项目的扩展和延续。 该项目建设任务在整个应用服务支撑体系中的具体结构和框架如图l 所示： 总之，“国家科技基础条件平台应用服务支撑系统”是面向国家科技基础条件平台 而建设的，并为基础条件平台中的各类科技信息资源提供一致性的科技基础条件资源集 成环境建设；一致性的分类标准体系；一致性的评价指标和评价方法体系；一致性的展 现信息及服务应用门户系统；一致性的信息安全、资源授权和信用管理保障；科技资源 的监测、分析、评估方法和评价过程；便于各类网络科技信息资源共享、服务的应用集 成环境；生成服务构件、生成工具及实施环境，为戍用服务体系的建立和增值服务提供 多方面支持。 1 2 课题来源及意义 网络科技资源是通过一系列描述资源的元数据来表示的，是指科技活动过程中涉及 的存在于i n t e m e t 网络上的所有资源。在网络科技资源应用集成环境建设过程中，为有 效利用网络科技资源，从资源的定义、标识、关系、表示、管理等方面对网络科技资源 元数据做出规范，在对网络科技资源的实际应用当中，网络科技资源质量的检验与评价 工作都是很容易被忽视的，即使有对网络科技资源质量进行评价的不是带有较强的主观 性，就是局限于规范条文的限定。 本课题是在对各个节点提供的资源进行整合之后的基础上提出的，因为整合后的网 络科技资源存在形式多种多样，而现今在这个信息飞速发展的时代，在时间即是金钱的 理念下，人们对自己需求信息的检索速度和检索结果都有很高的要求，他们希望能够在 2 西北 学硕学位沧文 最短的时间内找到符合自己需求的信息而当今的资源管理体系以及在资源质量方面都 不是很健全，很好地满足用户的需求是比较困难的。为了使用户所得到的数据资源是高 质量的，对网络科技资源质量进行评价是非常有必要的，必须对这些网络科技资源进正 确、方便、快捷地评价对提高网络科技资源的使用础率具有歪关重要的意义。 本课题来源于“国家科技基础条件平台应用服务支撑系统”项目下的“网络科技资 源应用集成环境建设”子项目( 项目编号为2 0 0 5 d k a 6 3 9 0 4 ) 。 嘲 络 科 技 资 潍 杯 准 埘 越 体 系 图l 国家科技基础条件平台应用艉务支撑系统体系结构图 13 国内外研究的现状 网络科技物力资源、网络科技信息资源及网络科技组织资源三个要素的总和构成网 络科技资源。被用来进行科学技术研究活动的实验室、科研仪器、设备等组成科技物力 h杵技锯浓三三仔0授杖竹删眦务体系 第一章绪论 资源；为科学技术研究活动提供信息情报的信息( 数据) 库、图书资料以及中介咨询机 构的总和称为网络科技信息资源。为进行科学技术研究活动丽进行的组织称为网络科技 组织资源。在内容上繁杂、分布很广泛的网络科技资源，既存在r 各种资源数据库中， 也存在着各种互联网的非规格化数据，这些造成了网络科技资源质量的参差不齐，主要 表现在以下几个方面： 1 科技资源分散异构，资源质量和形式差别较大，整合利用比较困难 不同的资源系统中存在着不同的编码结构和表达方式，由j f 这些数据格式的不同导 致了描述和组织标准的差异，致使检索途径和方法迥异，另外，不同的数据库使用不同 的检索软件，使得数据库检索晃面风格各异，用户在使用时会感觉到明显的差异性和复 杂性。 当需要进行跨平台、跨领域的科研工作时，由于没有统一的资源检索接口，用户只 能一个平台、一个领域地进行资源检索，这给用户查找信息资源带来很大的不便。提供 统的质量标准和访问接口是为网络科技资源提供有价值服务的前提。 2 缺乏统一科技资源应用集成支撑环境，尤其是通用服务组件 由于国家科技基础条件平台中不同领域的平台分别实现，缺少提供统一技术支撑的 环境，经过前期的建设虽有改善，但仍然需要进一步的规范和统一，避免在类似的技术 细节上重复开发，减少后期的维护和开发成本。不同的平台需要把通用型的模块进行组 件化，形成统一的采集、审核、管理、维护、功能展示模块，保证建设成果的持续运行 和维护管理。 不同平台和领域的地理位置差异以及统一的软硬件技术支撑环境的缺乏，导致各平 台之间在对资源进行共享和交互时，互联网被首选为传输和交互平台，但是由于互联网 的特殊性，其资源交互的效果往往不能满足用户需求，安全性也得不到保障，阻碍了资 源的大范围共享。为了系统的可持续发展，需要建设一系列的通用服务组件，形成资源 服务系统的技术模块化。 3 网络科技资源的应用服务手段匮乏，资源难以利用 通过将海量存储的网络科技资源整合在一起，这些网络科技资源一方面为用户的查 询提供了选择的余地；另一方面由于网络科技资源内容丰富、包罗万象，使用检索工具 进行检索的结果往往并不能够达到理想的效果，导致了网络科技资源不能够得到充分的 展示，因此网络科技资源的有效利用率不是很高。 4 缺乏有效的科技资源质量评价方法1 5 , 6 - 1 0 和工具，资源内容管理困难 4 i ! 乓北人学硕士学位论文 网络科技资源整合的重要日的是方便、快捷地获取网络上海量的信息。但是在追求 快速的同时却在一定程度上改变了以往信息发布的模式和评价的程序，缺少了人工质量 评估这一重要的质量控制环节，使整合后的网络科技资源质量层次不齐、良莠混杂，这 样极大地降低了对网络科技资源的内容管理的效率，网络科技资源的利用率也在逐渐减 少。因此网络上科技资源的无限、无序及优劣混杂已经成为人们有效地利用网络科技资 源的主要障碍。 网络科技资源在管理方面取得了些成就的同时也存在一些不能被忽视的问题，主 要表现在如下几个方面： 1 统一的管理标准规范建立起来比较困难； 2 管理员所学的专业知识水平很有限； 3 科技资源质量评价指标的确定比较困难； ：4 通用的评价方法比较少； 5 忽视了人工在质量评价的作用。 国内外研究人员和机构在对网络科技资源利用的状况以及对网络科技资源的管理 中存在的一些问题做了大量的尝试与探索工作之后，在评价指标、评价方法上都提出了 各自不同的理论和见解，为了使数据达到完整性、有效性、一致性、及时性和精确性的 状态，并使数据适合于一些特定的用途，他们提出了各自的评价标准和评价体系，将一 些评价方法应用到实际当中，诸如综合评分、专家讨论法、层次分析法 1 , 1 2 - 1 4 1 、模糊聚 类1 5 , 1 6 - 1 7 、模糊评判、灰色统计f 1 9 ，2 3 1 、灰色关联 2 4 , 2 5 1 分析、模糊灰色f 冽物元决策等， 这些方法在评价工作中显示出了各自的优点和缺点。 1 3 1 国内研究的现状 国内对网络科技资源的评价主要集中在对评价指标的确定上，并将这些评价方法运 用到实际当中，国内的一些学者或者机构进行了如下的研究： 定性评价和定量评价鲫被陆宝益认为是网络信息资源评价指标体系应该包括的两 个方面，其中信息内容所涉及主题的深度和广度；被引用数据的准确性；观点表达的客 观性；安全性；稳定性；系统导航：创新性：责任性；信息来源：用户界面友好性；文 字格式；对用户技术要求；外观设计和信息媒体形式等成为定性评价指标应该包括的内 容。更新频率或最后修改日期；价格；链接情况；信息组织层次；被下载次数；响应进 度和被访问次数等被认为是定量指标应该包括的内容。 5 第一章绪论 张咏f 2 8 1 将网络信息资源评价指标分为三个层次： 第一层是最基本的指标要求，主要是对所有网络信息资源的评价都适用的一些做法 称为基本质量要求； 第二二层是对某种特定主题领域能够很好地适用称为主题领域要求指标； 第三层是对某种特定专题领域的用户适用称为用户专题要求层。 他将评价标准进行了迸一步的研究并给出了研究的结果： 将可信性指标进行了研究并指出可信性指标包括的内容：权威性、目的性、利益倾 向性、内容相关性及效用性、公正性、质量控制等； 1 对链接内容和链接的表现形式归结到链接质量； 2 对信息内容进行了更加具体方面的介绍，包括完熬性、准确性、时效性与存档 性、信息组织与写作； 3 对站点美观和多媒体设计的也有了一定的考虑； 4 信息的可达性也是很重要的一部分； 5 界面友好性、查询与检索性能和交互性能来反映该网络资源的易用程度； 6 用户的反馈与交流也是占很大比例的。 网络科技资源相关信息资源的评价指标和网页内容信息资源的评价指标被门金越 认为是网络信息资源的评价指标的很重要的两大方面。网页中所包含的内容在全面性、 独特性、时效性、正确性、权威性、适用性等方面的表现被认为是网页内容信息资源的 定性评价指标，网络科技资源的创建者、链接性、交互性、目的用户、稳定性、安全性、 多媒体设计被认为是网络科技资源相关信息资源的评价指标。 苏广利在内容评价与形式评价方面进行了研究，他认为这两方面对网络科技资源的 评价有决定性的作用，其中在内容评价方面他认为原创性、完备性、权威性、可靠性、 针对性、新颖性足重点研究的方面。而在形式评价方面他认为查检性、快捷性、美观性、 条理性、稳定性、低耗性、帮助性是重点研究的对象。并认为内容是评价指标中最重要 的评估要素，它能够将网络科技资源的本质特征反映出来，而为内容提供服务的是反映 外部特征以及操作使用等方面的指标。因此，在对科技资源信息进行评估时，内容评价 是重中之重。 我国著名学者邓聚龙 2 9 1 教授在做了一些试验之后，并在1 9 8 2 年创立了灰色系统理 论，从此引起了其他学者对灰色理论的研究；罗庆成、徐国新、刘思峰、郭天榜、党耀 国在1 9 8 9 年对灰色关联进行了详细的分析并将灰色关联的应用到实际当中；张丽、高 6 西北大学硕士学位论文 虹霓、梁颖亮等在2 0 0 1 年利用模糊综合对管理信息系统进行了很好地评价；颜声远、 李庆芬、张志俭灯在2 0 0 5 年将狄色理论应用到入机界面主观评价当中；张雪莲在2 0 0 7 年利用灰色聚类决策的方法对图书馆员进行了评价并建立了评价模型3 0 ，3 1 1 ，庞庆华在 2 0 0 7 年利用灰色理论对软件系统人机界面综合建立评价模型；王云娣在2 0 0 8 年利用层 次分析法对图书馆信息服务能力综合评价；戴红燕、蔡光泽、张荣萍、华劲松在2 0 0 8 年运用灰色关联度对四川省凉山州水稻新品种中粳组区域试验5 个试点进行了实验，对 高原粳稻新品种的质量进行了评价；陈铁牛、杨志辉在2 0 0 9 年将模糊理论应用到对机 动车辆风险的评估。 1 3 2 国外研究的现状 国外对网络信息资源的评价不但集中在对评价指标的确定上，还对评价标准的确定 进行一定程度的研究，国外的一些学者或者机构进行了如下的研究： ， 美国s m i t h ，a l a s t a i r g 学者认为，网络科技资源的一些评价标准，比如科技资源的 覆盖范围、评价标准的目的性、评价的支出费用、评价所涉及的用户群、评价结果是否 具有权威性等，在实际的运用当中这些并不能适应于对所有科技资源的评价，但在查询 网络科技资源信息时它们至少可以供给图书馆员和其它用户加以选择利用的方法。 他们提出了评价网络科技资源的指标集合，主要包括下列指标： 在网络科技资源信息的覆盖范围方面，主要将广度、深度、格式、时间等方面进行 了研究； 1 在网络科技资源信息的内容方面，主要涉及信息的通用性、权威性、准确性、 独特性、与其它资源的链接情况、文本质量等方面，内容方面是最基本的评价 指标； 2 在同的与用户群方面，该方面关系到所涉及的对象； 3 在评论方面，能够有效地给被评价资源合理的建议和意见； 4 ：在费用方面，主要对连接科技资源服务器的费用和与科技资源中知识产权的使 用相关的费用，这些指标被挖掘出来能够实现对资源的有效管理； 5 在便利性方面，包括需要的用户界面的友好性、检索性、计算机环境、浏览与 组织、互动性、连通性等，该方面是用户直接最关心的问题。 美国运筹学家匹茨堡大学教授萨蒂在上个世纪7 0 年代初，利用网络系统理论和多 目标综合评价方法，提出了二种层次权重决策分析方法。该国的乔治大学 7 第一章绪论 g e n e r l w i l k i n s o n 教授等人在对以前的评价指标进行研究之后，提出了网络科技资源的 进行评价的8 条标准： 1 对作者身份鉴别一定的保证性； 2 可检索性和可用性是进行评价的前提； 3 作者的权威性对评价结果的影响很重要； 4 美观与效采，在评价中占有一定的地位； 5 内容的正确性、相关性和范围、准确性和公正性等是最为关注的标准； 6 科技资源的识别和验证是进行评价必须的标准； 7 导航系统；链接质量； 8 科技资源信息的结构和设计。 这8 条标准是在对网络信息资源的特点进行分析和研究的基础上，针对网络信息资 源不同于传统信息资源的特点总结出来的。 美国南加州大学r o b e r t h a r f i s 教授提出了是否有质量控制的证据、是否有读者对象 和目的、是否有客观性，作者的观点是否得到自由表达、是否具有合理性、是否有令人 怀疑的迹象、是否有时问性、是否有引证或书目、是否有世界观这八条评价标准。 辛奇里菲认为：评价网络信息资源可以利用评价参考资料的标准，评价内容包括： 、1 形式方面，例如超链接、f t p 文件形式的文件； 2 权威性方面，了解科技资源提供者的教育与职业背景等情况是判断评价信息权 威性的重要方法，该方面对评价结果又直接地影响； 一3 内容范围方面，可分为预定范围、实际范围和所包含信息的新颖度等，这点对 于终端用户来况极为重要； 4 编排方式，科技资源的编排方式是否方便、实用，对用户的影响特别大，由于 目前的编排方式十分混乱，有按字母排序的、按机构编排的、按资源类型排序、 主题分类编排等。 新西兰维多利亚大学的网络资源评价标准被认为是一个十分详细的标准，它包括： 1 内容性方面，主要是对内容的准确性、权威性、流通性、偏见性、交互性、唯 一性、写作水平的高低等方面进行了研究； 2 目的性方面主要包括资源预期达到的目的、预期用户、资源有效定位等方面； 3 科技资源信息范围方面主要涉及主题的宽度、类型的搜索、细节的深度、时间 的限度等方面； 8 西北大学硕士学位论文 4 多媒体设计方面包括是否增加视觉效果、与科技资源的内容吻合性等疗面； 5 可用性方面包括界面的友好性、帮助信息是否有效、软硬件的要求、交互性、 链接性、检索的简易性、镜像站点的有效性等方面； 6 评论方面主要包括其他资源评价机构对该资源的评价建议和意见。 澳大利亚国立大学从1 9 9 4 年起，每年举行一次的从被评价资源的组织结构、内容 质量、外观设计等方面进行评价。 综上所述从国内外对网络科技资源研究的现状可知，具有不同的专业知识水平的各 国机构或者学者所提出的标准或者指标体系均不同，并且在不同程度上存在着下列问 题： 1 目前的评价标准和评价体系是不够健全的，国内外对评价标准的研究占很大一 部分，从总体上来看，虽然能够在每个标准的细节上有共同的建议，但在构成 标准体系框架的时候却出现了分歧，而且对标准进行的研究不是很集中，对其 既可进行定性分析，又可进行定量分析，完全用于实践的完整体系还没有形成。 2 不规范、不统一的术语，由于研究人员和机构所处的环境和所用语言的不同， 他们对网络科技资源的评价都提出了具有个人色彩的观点和意见。 3 有的将使用传统文献信息资源作为评价标准，而有些研究人员却在评价传统文 献信息资源的基础上再附加一些其他的评价指标，但是满足现实的需要还是有 一定距离的。 4 指标是否合理有待于进一步考察和认证，但对指标是否合理进行具体测度和运 用则有相当大的难度，例如“公正性 、“世界观”。如今的评价方法无论是在理 论上还是在实践中比较侧重于定性分析，而定量分析手段的应用却少之义少， 缺乏对指标的类型、指标的层次以及如何对指标进行赋值等基本理论问题的更 加深入地探讨与研究。 5 具体的应用中对评价方法的确定和计算不是很合理的，不能将每个被评价的网 络科技资源每时每刻的发展变化情况真实地显现出来，仅仅是对某个时间段的 情况进行评价。而处于频繁变动之中的网络科技资源的动态变化的状况将不能 被时时反映出来，这样将对该网络科技资源的评价失去原本的意义。 目前国内外对综合性比较强的评价方法的研究相对比较少，由于网络科技资源与传 统文献信息资源之间既具有共性又具有各自的特殊性，因此在对网络科技资源进行评价 时必须加以综合考虑，对评价标准和指标进行合理地筛选和过滤，区分出一般因素和主 9 第一章绪论 导因素，去除内容重复和含义不清的标准，选择出恰当的评价指标，建立一个较为科学 的评价指标体系才能对网络科技资源进行合理地评价。 将综合方法应用到网络科技资源质量评价领域的几乎没有，而今的网络科技资源的 数量之多、形式又多种多样，这些数据是否符合用户的需要，是否是合理的、是否是有 用的资源，必须有套合理的评价资源质量的机制。 1 4 本文研究的内容 基于国内外在对网络科技资源的使用和管理方面上出现的一些问题，以及国内外对 评价指标和评价方法研究的基础上，根据本项目的实际运用情况，本文对如下内容进行 了分析与研究： 1 对网络科技资源评价中所用的相关知识的进行了分析与研究 对网络科技资源质量进行评价的所要使用的一些相关知识的介绍，丰要是对层次分 析法、灰色系统理论、模糊理论进行了一定的分析，对这些理论知识的起源、发展的现 状、遵循的原则以及实现方法的步骤等进行了详细的介绍，使我们对这些理论知识有个 整体上的把握。 2 对以往对评价指标的确定方法上进行了改进，提出了基于层次分析法和灰色关 联度相结合的综合评价指标模型 对以前所使用的方法进行了分析和总结，由于影响网络科技资源质量的评价指标涉 及的范围比较广、涉及的行业也比较多，这就给确定评价指标带来了一定的难度，用一 种方法对评价指标进行筛选是不能够将起关键作用的指标选择出来的，本文对网络科技 资源质量度量模型和网络科技资源质量控制模型结合起来对评价指标进行选择，将层次 分析法与灰色关联度法综合起来对评价指标进行确定，根据评价指标之间的合理性与关 联性、协调性与均衡性，应用层次分析法与模糊理论【3 2 3 3 。3 6 l 来确定各指标的权重，并建 立网络科技资源质量评价矩阵，根据影响网络科技资源质量评价因素之间的关系建立层 次分析模型。 3 本文对现实使用中的一些评价方法的优缺点进行了详细地分析，提出了h f g f 算法模型以及实现该算法步骤 本文在对简单比率法、最大值或最小值法、加权平均法、定性评价法、定量评价法、 基于元数据评价法等方法进行了详细地分析，分析出这些方法在当前使用中出现的一些 问题，可知现在的方法不能够在主客观上兼顾的，尽管以前也有在评价方法上有综合的 1 0 西北人学硕士学位论文 评价方法，可是这些对网络科技资源质量的评价使用还是不够全面，本文对综合方法进 行了改进，提出了h f g f 算法评价模型，该算法综合运用了狄色关联、模糊理论。 4 网络科技资源质量评价系统的设计与实现 根据应用标准规范，制定出决定网络科技资源质量评价系统的评价指标，对整个系 统的框架、功能模块、系统运行效果图进行了详细介绍，画出了整个系统的流程图，将 系统分成资源汇集模块、资源质量评价管理模块、资源质量目录生成及资源评价服务等 模块，再根据专家的评价和问卷调查的相结合的形式，运用层次分析法和灰色关联结合 建立评价模型。运用该模型计算出被评价网络科技资源质量的好坏，通过改变参数的大 小和指标不断地修j f 模型，进而找到适合的评价网络科技资源的正确性、可靠性、稳定 性。通过h f g f 算法评价模型在实际的运行过程中表现比较好的效果。 1 5 本文的组织结构 本文共分为五章，第一章是理论综述部分；第二章到第五章是本文的研究内容；最 后是结束语。其中： 第一章绪论，着重介绍了网络科技资源质量评价系统的研究背景、该课题的来源、 研究的意义以及国内外研究的现状，对该评价系统有个整体的了解。 第二章介绍了建立评价系统相关的知识理论，通过对层次分析法、灰色系统理论、 模糊理论的介绍，从中了解本文用到的一些方法，通过对这些理论知识的详细介绍对这 些理论当前应用的情况有了更加深刻的了解，并且知道这些理论在实践的使用中表现出 的优劣情况。 第三章提出了对评价指标的确定，对资源质量度量模型、控制模型的详细分析与 介绍，为了能够将反映被评价资源的本质特征的指标尽可能全面、客观，在对国内外研 究、学者所用的方法上进行了改进，建立了基于层次分析法和灰色关联度分析相结合的 评价指标模型，这是本文的创新点之处。- 第四章h f g f 算法描述，该章也是本文的创新点，在本章节中首先介绍了现在使 用比较多的一些评价方法，通过对这些方法在实际运用中所表现出来的优缺点的分析， 得出通过综合的方法能够得到更好的评价结果，建立了综合使用灰色关联统计专家评分 与问卷调查得出的评分加权平均，最后通过模糊理论评判得出评价结沦，构造了h f g f 集成算法评价模型。 第五章介绍了资源评价与应用系统的实现，对于系统总体设计、模块设计、总体 第一章绪论 流程图、h f g f 算法在该系统中的实现以及系统运行的结果界面进行了详细的介绍。 最后总结与展望。对该评价方法在本系统中的实现情况进行了总结，得到该方法 是具有一定的实用价值，并阐述了进一步的研究工作。 1 2 两北大学硕士学位论文 第二章相关知识的概述 2 1 层次分析法的基本原理 2 0 世纪7 0 年代中期美国著名运筹学家匹兹堡大学托马斯萨提( t h o m a s l s a a t y ) 教授在美国国防部进行课题研究时发现将网络系统理论和多目标综合 评价方法应用到他所研究的课题即“根据各个工业部门对国家福利的贡献大小而 进行电力分配一中时能够起到很好的效果，随后他又对该方法进行了仔细地研究 实验，最后提出了一种利用层次权重进行决策分析的方法，即层次分析法，该方 法的英文全称为a n a l y t i ch i e r a r c h yp r o c e s s 简称为a h p l 3 7 ，3 8 j 法，该方法是一种将 定性与定量相结合的多目标决策分析技术，在对多因素进行分级处理的基础上来 确定因素权重的。 其特点是能够使人们对复杂系统的评价思维过程系统化、数学化、层次化、 模型化，使复杂的系统变得更加易于被人们所理解和接受。该方法适用于处理一 些难以量化的复杂问题，较好地体现了系统工程学中定性与定量分析相结合的思 想。层次分析法以其系统性、灵活性、实用性等特点，特别适合于多目标、多层 次、多因素复杂系统的决策。 该方法的基本原理是评价者通过对待识别的复杂问题分级成若干个层次，由 专家和决策者对待识别问题的本质及其内在关系等影响因素从整体上进行全面 的分析、整理，而在个体之间进行层层剖析、层层深入分析的基础上进行综合， 将错综复杂的问题用层次清晰化、条理化、系统化的思路分解成相互关联、层次 有序的简单问题，以便更加有效地进行分析问题和解决问题。对所列指标通过对 每一层次中每两个不同元素的相对重要性进行对比、判断和计算并给以定量表 示，最后计算出所有相关元素的权重，从而得到基层指标对总目标而言重要性的 排列结果。该方法的基本步骤如下： 1 首先要对构成被评价问题的要素进行合理分析，在对各个要素之间关系 进行系统分类的基础上，分析出其中的递阶层次关系并建立多级递阶结 构模型。而在实际的评价系统中各要素之间除了存在着非常复杂的关系 外，还存在着包含关系，各层次之间的重要程度应从横向、纵向两个方 面进行比较，横向方面即对同一层次元素相对重要性，而纵向方面则是 1 3 第二章相关知识的概述 不同层次之问即上一层次相对其下一层次的重要程度，要根据纵横两个 方面将这些评价指标对评价结果影响的重要程度进行合理分层，建立起 遵守客观现实的评价指标体系模型； 2 对于在对评价系统建立合理的多级递阶结构模型中，属于同一级的要素 之间进行两两比较之后，将其权重一一记录下来，建立合适的判断矩阵， 主要依据本阶层上而的指标与下一层次相关的一些评价指标的重要性 为准则进行两两对比，依据判断尺度进行计算来确定其相对重要性来构 造成比较矩阵； 3 在对横向元素之间的相对权重和纵向元素之间的相对权重计算的一致 性进行合理地检验； 4 在对横向元素之间的相对权重和纵向元素之问的相对权重之间进行正 确计算的基础上，对它们进行组合、一致性检验计算。 2 2 灰色系统理论 灰色系统理谢3 9 , 4 0 - 4 2 是一门基于数学理论的系统工程学科，我国华中理工大 学邓聚龙教授对该理论进行了研究，他在2 0 世纪8 0 年代首先提出该理论，同时 将该理论创立为- 1 7 新兴学科。该理论是在对灰色关联空间进行研究的基础上， 以预测、决策、控制和评价、系统分析、灰色建模为基本体系建立起来的，该理 论已广泛应用于农业、林业、畜牧业、渔业、交通运输业、教育业等几十个领域， 并运用灰色系统理论对这些领域进行评价、预测和控制方面的研究。 灰色系统理论主要通过对所谓的“部分”已知的信息来对完全未知信息进行 研究，在该理论中是用颜色来表示对系统本身以及系统内部信息的认识程度，信 息对外界来说完全未知的则用“黑 色来表示，在外界看来信息是完全透明的、 确知的则用“白 色来表示，信息不是完全透明、完全确知的则用“灰”色来表 示，其中灰数、灰元素、灰关系分别指信息不完全的数、信息不完全的元素、信 息不完全的关系，系统的灰色性是指某系统中存在着信息不完全或不确知的现 象，灰色系统则是指具有灰色性的系统。 在人类生活的实际当中，人类对客观世界的认识和改造过程是一个逐渐摸索 的过程，客观世界的信息是在随着人们的认识过程中逐渐被挖掘出来的，而是在 1 4 两北大学硕士学化论文 利用现在已知的信息对未来未知的信息进行探索，人们对信息的认识并不是令 “白色的 ，也不是全“黑色的- ”，而是“灰色的”，按照人们对实际问题进行处 理的习惯来说，人们重视对明确因素的处理，丽忽略对那些不确定因素的处理， 才把实际生活当中的灰色系统当作白色系统来认识和处理，由此可以推断，灰色 系统人们的现实生活当中处处可见。 2 2 1 灰色理论的评价原理 在对网络科技资源质量的综合评价指标进行设计时，由于不少信息或者机理 还不是完全清楚、透明，或者说有些信息被隐藏起来还没有被挖掘出来，不可能 在知晓全部网络科技资源质量的信息后，再对其进行评价，而资源的信息不可能 全部被挖掘出来，随着社会的不断发展变化更多的信息将会被挖掘出来，所以说 对网络科技资源质量的评价从本质上来说应该是灰色的。 在现实社会中我们对网络科技资源的信息并不是完全清楚明白的，根据对已 经掌握部分信息的处理，利用定性和定量相结合的方法将网络科技资源质量设计 的综合情况确定在某一灰域内，对网络科技资源质量进行评价时应采用灰色理论 的评价方法，因为这样既可以减少评价中人为因素的影响，提高评价方法的科学 性、正确性、可行性和实用性，+ 又可达到在现有数据相对少的情况下进行科技资 源的综合评价的目的，以达到实现对网络科技资源质量正确评价的目的。在对网 络科技资源质量进行综合评价时应该遵循一下原则： 1 评价结果的实用性、可行性、科学性要求对评价方法和评价指标的确定 应该结合标准规范体系的具体情况来定； 2 评价过程的客观性、公正性要求尽量将人为凶素对评价对象本质的影响 减小到最低； 3 要筛选出更多的能全面反映网络科技资源质量状况的指标要求将不可 比指标或绝对指标的使用减4 , n 最少。 本文在对网络科技资源的各个指标搭配关系的强弱程度进行评价时，将一种