数字图书馆评价指标体系

1、数字图书馆评价指标体系赵烈/申晓燕/孙一强2012-10-28 15:01:28资料来源：数字图书馆论坛(北京)2011年第7期英语标题digital library evaluation indicator system赵烈(1974-)，女性，图书馆学硕士，国家图书馆中文编辑部，副研究馆员，电子邮件：zhaoy ，北京；申晓燕(1970-)，女性，武汉大学信息管理学院2009级博士生，武汉，国家图书馆研究院副院长，副研究馆员，电子邮件：Shenxj ，北京；孙一强(1961-)，男，国家图书馆馆长助理，研究馆员，电子邮件：sunyg .

2、cn，北京【内容摘要】文章分析了国内外数字图书馆评价指标，介绍了数字图书馆评价指标体系的构建目的和原则，提出了数字图书馆评价指标体系框架，分析了评价指标体系应用的相关问题。on the basis of analyzing the digital library evaluation indicators from domestic and abroad，This paper reviews the purposes and principles of关键字数字图书馆/评估/指标/系统digital library/evaluation/indicator/system基于网络环境的新信息资源

3、组织和服务方式数字图书馆自20世纪90年代以来在世界一些主要发达国家甚至发展中国家都取得了长足的发展中国的数字图书馆目前处于快速发展阶段，国家数字图书馆、国家科学数字图书馆、中国高等教育数字图书馆、中共中央党校数字图书馆、中国农业数字图书馆等重要的国家数字图书馆都在建设或服务过程中。在建设或服务中，工业和区域的数字图书馆项目更像雨后春笋般出现了。各国政府向数字图书馆投入了大量的人力、物力、财力，但数字图书馆仍然无法满足用户的信息需求。数字图书馆建设商、开发人员及数字图书馆服务提供商和用户之间存在认知和理解上的差异，在使用数字图书馆时不能得到有效的服务，限制了数字图书馆的效用。数字图书馆评估提供

4、了使数字图书馆的设计师、操作员和用户通过评估进行有效医生沟通的方法、手段和机会。可以确保对数字图书馆的理解的相对一致性，提高数字图书馆的可用性，为用户提供更好的服务，提高数字图书馆的效率。对数字图书馆评价的研究可以为数字图书馆系统工程的开发和部署提供决策参考，验证数字图书馆为用户提供的服务的效用，从而带动数字图书馆的建设和健康发展。1国内外数字图书馆评价项目和评价指标与数字图书馆建设实践相比，数字图书馆评价方面的研究和实践还不成熟。从目前情况来看，对数字图书馆进行全面系统综合评价研究的项目不多。大部分是在电子收集、电子资源使用、电子资源服务等方面评价和实践数字图书馆建设的一个领域。1.1外国项

5、目和评价指标国外数字图书馆评价方面的成果主要集中在研究项目和标准规范两个茄子主要方面。研究项目方面主要代表以电子资源和使用评价为主的电子计量项目、以数字图书馆服务质量评价为主的数字项目、以电子服务绩效评价和评价工具为主的EQUINOX项目等。标准规格主要包括ISO2789: 2006 信息与文献国际图书馆统计(其中附件A为数字图书馆服务使用评估)和COUNTER网络电子资源在线使用统计。(1)E-Metrics项目电子计量学项目(即电子图书馆评估项目)于2000年由美国研究图书馆学会(ARL)启动，旨在构建研究图书馆的电子资源及其使用的科学测量指标体系。电子计量项目的评估指标分为5个茄子类别，

6、共设置了20个评估指标，其中包括17个统计指标和3个绩效指标。请参阅表11。(2)DigiQUAL项目DigiQUAL项目是在SERVQUAL，LibQUAL的基础上发展起来的。SERVQUAL是适用于各种服务机构(包括指标和方法)的用户满意度评估系统。LibQUAL是对ARL牙齿SERVQUAL进行“图书馆化”修改研究形成的传统图书馆服务质量评价的系统方法。DigiQUAL是研究ARL牙齿美国国家科学数字图书馆(NSDL)评估的数字图书馆服务质量评估的项目。牙齿项目经过实验，确定了评价数字图书馆服务质量的3d 12个主题。三个维度是服务效果、信息控制和数字库环境。的组合。的组合。discov

7、ery as place(数字存储库环境)。的组合(information control(数字存储库)，以及discovery as place(数字存储库环境)。12茄子主题包括可访问性、导航性、互操作性、集合构建，以及数字。K(3)EQUINOX项目EQUINOX项目，即欧洲图书馆绩效评估和品质管制系统项目，是欧洲图书馆新网络和电子资源开发利用的当前情况。基于现有评价，在质量管理框架内进行的研究工作由两部分组成。一是设计通用复合图书馆电子服务绩效评价的指标体系，另一是设计品质管制和绩效评价的软件工具。图书馆可以将实际绩效和运营的远视数据输入系统，可以使用牙齿数据计算图书馆的绩效指标和预定

8、目标的实现情况。EQUINOX项目的图书馆电子服务绩效评估指标旨在加强和完善ISO 11620 信息与文献图书馆绩效指标现有图书馆服务评估指标体系，以满足图书馆对网络环境中电子服务绩效评估的要求。项目最初形成的图书馆电子服务绩效评价指标体系包括34个指标，其中一些指标分类为ISO 11620标准中定义的传统指标更合理，另外一些指标由于可访问性不好而被排除在外。最终，2000年12月形成了由14个指标组成的图书馆电子服务绩效评价指标体系。请参阅表23。(4) iso 2789: 2006年附件aISO2789: 2006 信息与文献国际图书馆统计附件A:数字图书馆服务使用评估主要针对图书馆传统服

9、务以外的电子服务进行统计和评估，定义了数字图书馆服务的不同形式、电子信息资源的不同形式、电子服务使用的不同形式。“Measuring the Electronic collection(电子收集评估)”、“Measuring use(使用评估)”、“Electronic services(电子服务)”和“use of ellectronic services(使用电子服务)”(5)COUNTER网络电子资源在线使用统计COUNTER在线电子资源在线使用统计是图书馆、出版界和经纪人共同进行的研究项目，旨在为在线信息服务公司和用户提供可靠、一致、兼容的使用统计标准和方案。COUNTER目前发表了期

10、刊和数据库实施规范和图书和参考资料实施规范。COUNTER期刊和数据库实施规范(第二板块)规定了期刊的使用报告4份，数据库的使用报告3份。定期报告1:每月，每个期刊成功的全文请求：定期报告2:每月，每个期刊拒绝的全文请求定期报告3:每月，定期出版物，每个页面类型的请求和拒绝量日志报告4:每个集的每月搜索总数数据库报告1:每月，每个数据库的搜索次数，包括存储、修改和搜索结果为零的搜索次数COUNTER图书和参考资料实施规范(初版)规定了出版社必须提交的6茄子使用报告，即图书报告1:月，每个标题的成功标题请求量。图书报告2:每月，每个题目的成功章节请求量图书报告3:每月，每个题目的请求量拒绝：图书

11、报告4:每月，每个资源的请求量拒绝图书报告5:每月，每个题目的总搜索和访问量图书报告6:每月，每个资源的总搜索和访问量4。从以上几个茄子研究项目及标准规范设定的评价指标中可以看出，国外更多地关注资源和服务方面的评价，大部分评价项目及其指标都在此基础上考虑设计。每个项目或标准的评价指标设计不仅有理论讨论或理想化的设计，定量和定性评价的结合，还有充分考虑数据收集和分析的项目。具有强大的可操作性。1.2国内项目和评价指标国内学者对数字图书馆评价的研究也在近几年取得了成果，分别提出了评价标准和指标体系，但大部分局限于理论研究水平，进入可操作水平的研究成果较少。特别是对大型数字图书馆建设的系统综合评价和

12、对多个数字图书馆建设的比较评价研究不足。国内研究成果的评价指标设置一般比较全面，但是对指标获取、资料分析等的研究不足，评价指标缺乏可操作性。王海燕在数字图书馆评价指标体系初探文章中，将数字图书馆评价指标体系分为收集、技术、服务、管理的四个茄子方面，并提出了具体的评价因素和指标。收集评估包括收集本身的状况(丰富、可靠、持续性、适用性、特性化)、收集组织状况(组织方式多样化、组织工具多样化、元数据标准化、元数据详细程度)、收集管理状况(更新速度、资源整合能力、可持续性)。技术评估包括系统技术(网络通信功能、安全性、互操作性)、信息检索技术(搜索性能、搜索技术)、用户服务技术(用户操作技术的全面、多

13、语言支持功能、定制服务功能)、介面设计(美感、亲和性、导航功能)服务评估包括服务范围、服务质量(信息检索效果、参考服务级别、服务可用性)牙齿。管理评估包括版权管理、标准化管理、合作和孔刘管理、经济效益管理、人员管理5。上春在数字图书馆项目评价研究文章中，从用户、资源、系统、管理角度提出了数字图书馆项目评价的主要内容。从用户角度看，评估内容包括用户服务偏好、用户资源偏好、用户祖怀信息目的、网站日志分析、用户满意度、用户对评估的认识、目标用户利用率、用户动摇率、用户教育输入、多语言支持能力等。从资源方面看，评价内容包括资源规模、资源采购的经济性、资源对领域范围、资源质量、更新速度、知识挖掘深度、知

14、识组织集成和公开、资源的实用性等，数据格式的标准性、资源平均利用率、资源开发投资等。从系统角度来看，评估内容包括：用户界面的易用性和美丽、系统互操作性、系统反应时间、类似网站比较、系统实施和维护的标准化水平、系统操作安全性、资源保留技术、资源搜索技术、虚拟参考咨询运营、馆际互借实施、联合目录祖怀功能、系统服务器等硬件设备评估、系统等，从管理角度来看，评估内容包括项目人员设置包括用户人均服务成本、用户培训节目和实施、用户反馈机制、管理档案规格是否存在、管理成本投入、资金管理等6。刘伟等在数字图书馆评估研究文章中提出了“数字图书馆评价指标体系概述(1，2级)”，根据数字资源、服务、管理和用户感知4

15、方面的测量，对1、2级指标进行了简要说明。数字资源的第一、二指标包括第二文献数据库数(第二文献数据库数，第二文献数据库保留数)、全文数据库数(自制全文数据库数，全文数据库保留数)、多媒体数据库数(自制多媒体数字资源数)、自制数字资源总量。服务方面的120级指标包括读者可用的电脑数(读者可用的网络电脑数、无线网络服务)、在线参考工作问题数(在线参考工作响应满意度)、web/资源访问数(web/资源访问用户数、资源祖怀数)、注册用户数(注册用户与目标用户之比)、在线参考工作问题数用户感知指标包括满意度7。吴建华设计的“211大学数字图书馆评价指标体系”经过多次咨询，听取了专家的意见，设定了5个一级指标和24个二级指标。第一指标包括基础设施、资源配置、资源组织、资源利用和服务功能。基础架构包括5个茄子的次要指标，如网络带宽/出口速度、最大并发无线用户数、服务器数、总存储容量和面向读者的电脑数。资源配置