五台山数据库平台结题之忻州师院技术报告8

山西省科技基础条件平台建设项目（项目编号2010091001-0103）五台山文化科技文献资源特色数据库建设技 术 报 告忻 州 师 范 学 院2012年6月目 录一、项目建设的目标二、项目建设的原则1.实用性 2.创新性3.标准化4.可扩展性三、项目建设的内容四、“五台山文化科技文献资源特色数据库”及平台建设1.“五台山文化科技文献资源特色数据库”管理系统2.“五台山文化科技文献资源特色数据库”主要功能五、“五台山文化科技文献资源特色数据库”主要技术指标六、项目的创新与价值七、项目的推广应用一、项目建设的目标“五台山文化科技文献资源特色数据库”整合了地方上包括五台山管理局、五台山文化研究中心、忻州地区地方图书馆、忻州师范学院图书馆等单位的珍贵纸本文献，同时搜集相关网络资源，并全面引进与五台山文化研究相关的纸本以及数据库当中的有关资源。文献类型包括图书、期刊、报纸、学位论文、会议文献、年鉴、工具书、音视频、图片、网络资源等。利用现代信息技术对搜集到的文献进行筛选、分类标引、组织、扫描、压缩、转换和储存等。研发“五台山文化科技文献资源特色数据库资源管理系统”，搭建一个标准的、开放的、安全的网络环境。建成首个五台山文化全文数据库，数据库具有唯一性、独特性与地方性。建成平台先进、资料完备、检索方便、功能齐全、服务开放、资源共享的特色资源库，实现特色资源的共建共享。为学院龙头学科五台山文化研究服务，促进五台山文化产业化发展，服务于地方文化建设与经济开发。二、项目建设的原则1、实用性数据库建设遵循“服务至上”的原则，充分调查研究用户的信息需求，全面分析数据库的实用价值以及社会效益和经济效益，保证所建数据库能进行深层次数据挖掘，实现增值效应，面向科研用户、满足社会需要。为学院龙头学科，为地方经济、社会发展提供有力的信息资源保障。2、创新性“五台山文化科技文献资源特色数据库”建设过程中利用了大量的比较成熟的先进技术，大大提高了数据加工的效率。地方收集的文献的电子化，激活了这部分特色资源。网络相关资源的收集，使得五台山文化这一专题的文献更加集中。用户通过特色数据库查找资料更方便，效率更高，得到的信息资源价值也更高。3、标准化 “五台山文化科技文献资源特色数据库”建设，采用了国际国内通用的数据格式标准、数据著录标准、数据标引标准、规范控制标准及协议进行建设。特色资源数据库建设使用科学标准，有利于用户方便检索数据和实现真正意义上的资源共享。4、可扩展性建设成功的特色资源数据库是一项长期性的工作，需要持续性地更新和不断积累信息数据。因此，本特色数据库建设中，充分考虑到要具有良好的可扩充性、可缩放性和升级能力，能兼容不同的设备和不同的网络平台，使数据库能随着技术的发展、信息增长、业务扩展和联网扩大，实现平滑升级和过渡。三、项目建设的主要内容1建立了五台山文化科技文献目录系统提供了数据库当中所有文献的题名目录。 2建立了五台山文化科技文献资源特色数据库，共包括7个专辑，1万余条数据，数据还在不断更新中。7个专辑分别是： （1）五台山自然遗产专辑 （2）五台山文化遗产专辑 （3）五台山旅游开发专辑 （4）五台山革命史专辑 （5）五台山对外文化交流专辑 （6）域外五台山文化研究专辑 （7）五台山大事记专辑3建立了五台山文化科技文献资源特色数据库共享服务平台4建立了五台山文化科技文献处理发布系统5建立了五台山文化科技信息专家咨询系统 提供在线即时和留言两种咨询服务四、“五台山文化科技文献资源特色数据库”及平台建设1、“五台山文化科技文献资源特色数据库”管理系统特色数据库管理系统的建设在整个课题里面是最重要的，关系到数据库建库工作能否顺利展开，及后期数据库的利用和发展。我们对国内高校图书馆特色数据库进行了深入的市场调研和考察，通过探讨专题特色库的建设思路、标准规范、内容结构和一站式服务模式，归纳出了高校图书馆专题特色库资源应如何进行深度开发，才能建设出自己学科特色的专题特色库，实现优势互补和最大限度地实现信息资源共享。鉴于课题组成员技术力量的不足，我们决定与超星软件公司合作开发了“五台山文化科技文献资源特色数据库”信息管理系统，并享有完全知识产权。设计指导思想是将“五台山文化科技文献资源特色数据库”建成一个以用户为核心，利用计算机硬件、软件技术及信息加工技术进行信息的收集、传递、存贮、加工、维护和使用的系统。目的是为了提高资源的使用效率，更好的为教学与科研服务，为地方文化和经济建设服务。同时支持用户的文献需求、文献采集决策、文献加工等操作。经过课题组两年的努力，“五台山文化科技文献资源特色数据库”已基本完成，后续数据补充工作也在按部就班进行当中。用户通过输入地址5/homepage.jsp就可以进入特色数据库的主页面，见图1。图1“五台山文化科技文献资源特色数据库”首页 “五台山文化科技文献资源特色数据库”信息管理系统是构架在Web服务器上的数据库集成系统，基于ASP.net技术、Webportal技术、XML技术、数据库分布技术、中间件技术和网络安全技术构建。Web系统为java语言开发，为了加强用户体验，引入了web2.0的概念，这里边还使用了Ajax技术，借助于Ajax，可以在用户单击按钮时，使用JavaScript和DHTML立即更新UI，并向服务器发出异步请求，以执行更新或查询数据库。当请求返回时，就可以使用JavaScript和CSS来相应地更新UI，而不是刷新整个页面。最重要的是，用户甚至不知道浏览器正在与服务器通信，Web站点看起来是即时响应的。整个信息管理系统结构框架如图2所示，整体架构分为4层：系统层、平台层、管理层和页面层，各层功能如下：系统层（数据库最底层）系统层包括操作系统、数据库和应用服务器，该层是管理信息系统的物理基础，特色数据库所有的数据。采用windows 2003 server为操作系统（IIS6.0）、数据库采用SQL server 2005。平台层（数据接口层）整个信息管理系统构架在平台层之上，系统的权限控制、安全检验、界面管理、数据库操作、检索功能实现等核心功能都由管理层调用平台接口实现，并可以在管理层上实现无缝对接系统的可扩展性功能。管理层（应用管理功能层）管理层构架在平台层之上，直接提供管理人员的操作界面，完成信息管理系统中心业务功能，包括数据录入、数据加工、信息发布与检索等功能。页面层（网页直观表现层）页面层是信息管理系统的信息门户，该层充分发挥B/S架构的优势，用户通过统一的入口登录“五台山文化科技文献资源特色数据库”，根据权限不同进行不同的操作。系统层管 理 层页 面 层数据录入数据加工信息发布期刊论文图 书网络资源会议论文学位论文报纸图 片音视频统一检索信息推送分类导航咨询服务统一认证利用统计WEB服务器门户管理系统用户系统管理平台元数据管理搜索引擎与导航资源调度框架管理管理认证、授权、文件管理管理内容管理布局管理内容管理安全平台个性化管理操作系统 Windows 2003 server数据库 SQL Server 2005WEB应用开发平台中国年鉴工具书图2五台山文化科技文献资源特色数据库信息管理系统结构框架2、“五台山文化科技文献资源特色数据库”主要功能“五台山文化科技文献资源特色数据库”信息管理系统主要分6大模块：用户体验模块、后台管理模块、用户管理模块、数据共享模块、迁入数据接收模块及统计模块。（1）用户体验模块对于用户，使用系统最终目的以为得到想要的资源。系统中提供了检索和分类浏览功能，可以检索指定文献类型、指定分类、指定字段等，并可以文献、类型等经行联合查询、二次查询；分类浏览可以根据数据自定义分类进行浏览，最终找到想要资源后可以查看元数据和阅读全文。普通用户登录“五台山文化科技文献资源特色数据库”首页，可以搜索文献、注册成为会员、登陆，在校园网内用户或者注册用户在校外可以对系统中的全文内容进行浏览或下载，注册用户可得到管理员参考咨询服务等。文献检索检索文献是用户利用数据库最主要的目的之一，“五台山文化科技文献资源特色数据库”在满足用户在文献资料上的获取上，更注重用户的体验效果。本系统提供了基本检索、分类浏览、联合检索、高级检索等四种检索方式。图3所示为首页上的检索功能区。点击进入高级检索文献类型选择检索词输入图3 检索功能区用户在文本框输入检索词，可在“图书”、“学位论文”、“会议论文”等单一文献类型中，也可以在所有文献类型中进行搜索，点击“搜索”按钮后，系统将在“五台山文化科技文献资源特色数据库”文献数据资源中进行查找。如需更准确的定位所需要的资料，可以通过高级检索或联合检索来实现。高级检索可以选择各种条件的“与”（并且）、“或”（或者）、“非”（不等于）的逻辑组合查询； 当你选择“与”的时候，表示只要同时符合这两个或两个以上的条件的结果才会被检索出， 而当你选择“或”的时候，表示只要存在任何一个符合条件关键词的结果将会被检索出，而“非”则表示不符合这个条件的结果都会被检索出。考虑到目前很多用户习惯使用如百度、Google等搜索引擎网站，系统还提供了关键词分词搜索功能，比如当你输入“五台山 寺庙”关键词，此关键词是用空格隔开的，那么在检索结果中，你会看到包含五台山或寺庙的结果记录，也可能同时包括五台山和寺庙的结果记录。在搜索结果页面点击文献列表名文献详细信息页面，并根据此文献的类型显示不同的详细信息 如：期刊类文献，将显示该文献的题名、作者、主题、日期、来源、语种、所属分类等详细信息。需要全文的，可在此页面点击下载全文。如图4所示。图4打开一篇数据咨询与服务用户注册成为网站用户后，使用用户名和密码登录后，可以得到特色库管理员或学科馆员的咨询服务。用户通过这个功能对某些问题进行咨询、探讨、交流、提出建议等，并可得到文献推送服务。（2）后台管理模块 系统管理员登录“五台山文化科技文献资源特色数据库”信息管理系统后，可以进入系统后台管理页面，如图5所示。图5 站点管理页面后台管理又分为“用户分级管理” “系统配置管理”“元数据模板管理”、“数据录入管理”、“数据审核管理”、“咨询答复管理”、“分类管理”、“数据模块管理”等8个子模块。用户分级管理超级管理员可以添加不同权限的用户录入员：录入员具有“文献统计”、“资源录入”的 管理权限。可以通过web系统进行分布式的资源录入，包括元数据录入和全文上传、数据分类、关键词提取等。审核员：审核员具有“文献审核”、“文献统计”、“资源录入”管理权限。录入员具有“文献统计”、“资源录入”的 管理权限。此用户通常是具有一定专业知识的人承担，录入员录入的数据用户是不能直接看到的，需要审核员审核通过后方可，审核员可以对录入员录入的数据经行编辑、修改分类等，可以将数据状态调整为通过审核、不通过审核、不合格。只有通过审核的数据，用户方可检索到。咨询员：针对用户的疑问、信息咨询，咨询员可以与其答复。其他用户管理：普通用户拥有文献普通用户根据申请用户的实际情况进行审批。该版块还可进行访问数据库的IP范围管理，在校园网内登录无需注册用户。图6所示为IP范围管理页面。图6 IP范围管理页面系统配置包括首页样式配置、系统title、buttom、banner配置等。可以编辑系统简介、关于我们等。在此模块中管理员可以对信息管理系统站点管理，进行结果显示数量设置、录入文献状态设置、更新检索模板、更新全文检索引擎、上传特色数据库banner图片、密码修改等操作。元数据模板管理 系统的元数据标准依据DC元数据标准，但是针对每一种数据，中文显示可能不同，有些数据用15个基本字段不足以描述完整，有些数据可能用15个基本字段中的一部分就足够了，如果没中数据都列取15个标准数据，显然不够准确，故此系统提供了模板编辑功能，系统本身有一些常见文献类型的内置模板。模板管理模块是管理员对系统文献类型模板进行的操作，模版的基础根据DC元数据标准设计，图书、期刊、报纸、图片、工具书、视频、会议论文、学位论文、中国年鉴和网站资源等文献模板都可根据实际需要进行编辑。管理员可以编辑模板名称，编辑模板，删除模板，和新增自定义模板等功能。此功能和资源管理模块相关联，如修改文献模板后，在资源管理的资源录入中页面，文献模板会有相应的展示。这样设计的目的是不同的文献类型，可以灵活的适应元数据加工的要求。图7所示为图书模版的编辑页面。图7 编辑模版页面数据录入管理管理员点击后台左侧导航的“资源录入”可以进入资源录入页面，如图8所示为图书录入页面。管理员需要选择录入资源的文献类型然后根据每个添加字段后的注意事项以及范例进行添加录入，点击保存按钮确定录入。根据文献的具体情况，可以选择全文上传或者提供下载链接。图8 图书录入页面在实际应用中“资源录入”工作按不同的文献类型，由图书馆不同的学科馆员负责。最新搜集到的特色文献及校内文献传递的文献都会被收录进特色数据库，这样保证了“五台山文化科技文献资源特色数据库”的可持续发展。为了防止出现编辑错误等情况，录入的文献不会马上在前台显示，需要另一名学科馆员审核后才会发布。为提高都有大批量相似文献需要录入时的效率，系统还设计了批量导入功能。图9为批量导入功能操作界面。图9批量导入操作界面数据审核管理录入的数据可能有些不和标准，或者不完整、分类不准确等问题，故此录入数据不能直接展示给用户，需要审核员对数据审核后方可展示给用户。系统也提供了此功能，审核员可以方便的浏览、审核、标记数据。咨询答复管理咨询管理页面中管理员可以根据回复状态，咨询主题，咨询时间段进行咨询信息的查询，然后点击咨询主题的链接进行回复，或者不符合要求的咨询内容删除。回复的内容会自动发送到用户注册时所留的电邮地址。图10所示为咨询管理页面。图10 咨询管理页面分类管理管理员在此模块可以对系统分类进行操作。可方便的进行新建一级分类、编辑分类名称、添加子分类、删除分类、导入分类等操作。图11所示为分类管理页面。图11分类管理页面统计管理（3）用户管理模块“五台山文化科技文献资源特色数据库”信息管理系统用户分为普通用户与系统管理员。系统管理员又分为系统超级管理员、系统审核员、系统录入员。从图1中所示的登录区域，不同用户凭帐号和密码登陆后，只显示对应本身角色的权限，而超级管理员拥有另两种管理员的全部权限，普通用户只能检索及下载文献。另外系统设计了IP认证功能，在校园网内的用户可以直接检索及下载文献无需登录，这样的设计是出于系统安全及知识产权保护的目的。（4）数据共享模块平台自身提供OAI-DP服务与OpenUrl标准接口和RSS接口，允许其他平台对平台进行二次利用，提高信息利用率。（5）迁入数据接收模块平台提供ftp接口，可以接收编目软件中批量上传的全文附件，并有对应接口可以接受元数据，并实时对元数据经行格式转换和入库。（6）统计模块流量统计功能可统计特色库的点击量、统计特色库资源访问量前十名、 统计六个月内特色库的总访问量、 统计特色库一级分类的访问量、统计特色库一级分类的下级分类的访问量并以饼状图显示。可以为“五台山文化科技文献资源特色数据库”的应用情况提供真实准确的数据，为特色库的改进提供可靠的依据。如图12所示为截止2012年2月“五台山文化科技文献资源特色数据库”的分类统计情况。图12 “五台山文化科技文献资源特色数据库”访问量分类统计图五、“五台山文化科技文献资源特色数据库”主要技术指标1、元数据互操作（1）MARC 与 DCMARC 与 DC 作为图书馆应用最多的元数据标准，有各自不同的服务目标。MARC 主要面向图书馆自动化系统和传统 OPEC 联机检索系统。而 DC 作为一种开放式元数据标准，并不是仅面向某种特殊领域开发的，它可以广泛应用于需要通过互联网络进行互操作的元数据。MARC 多用于图书馆书目数据的编制，包括实体出版物、光盘、胶片和磁带等传统馆藏信息资源载体。DC 在图书馆中多用于经过数字化处理的信息资源或纯数字化资源，如电子图书、网站、数字化多媒体信息和数据库等。（2）基于 RDF 的 DC 句法描述实现基于 RDF 的 DC 句法描述实质就是使用 RDF 建立起 DC 的数据模型，采用 DC 的元素,并使用 XML 语句进行描述。（3）基于 XML 的 CNMARC 句法描述DTD 决定 XML 的文件结构，确定 XML 的词表语法。DTD 的声明机制可以支持与定义的存储单元。XML 文档只有遵守相应的 DTD 文档中限制条件才能被认为是有效地。（4） XSLT CNMARC XML 文档转换为 DC XML 文档CNMARC 其他字段和子元素与 DC 的各字段和字段限制词均采用了相应的类似结构设计 XSLT 转换样式单，进行转换。（5）将 XML 文档中的数据导入关系数据库在特色数据库发布平台的设计中使用 XML 作为信息交换的基础，实现元数据描述信息的编码和交换。高效率的实现 XML 数据存储及在 XML 数据源中准确查询信息并将查询结果及时发布就显得非常重要。数据统一映射为 DC 元数据，实现元数据管理的开发化和标准化。2、 OAI-PMH 协议OAI-PMH（Open Archives Initiative Protocol for Metadata Harvesting），数据收割协议，最新版本是2002年6月发布的2.0版。OAI-PMH是基于元数据的电子文献互操作框架，目的是实现分散的、不同系统平台之间的元数据互操作和共享，提高系统数据的共享能力。OAI-PMH提供了一个能独立应用的元数据收割互操作框架,其中存在两类主要的参与者。数据提供者管理系统，它支持将OAI-PMH 作为显示元数据的手段；服务提供者利用通过OAI-PMH收割的数据，作为构建增值服务的基础。六、项目的创新与价值1、项目的创新“五台山文化科技文献资源特色数据库”的研发突出了对地方经济发展的助推，突出了对馆藏特色资源的整合，具体创新点有：（1）先进的技术平台，强大的数据库功能“五台山文化科技文献资源特色数据库”建设过程中，与超星公司合作，借助了超星公司强大的技术力量，利用大量比较成熟的先进技术，大大提高了数据加工的效率。（2）建成首个五台山文化全文数据库，数据库具有唯一性、独特性与地方性。“五台山文化科技文献资源特色数据库”围绕忻州师范学院图书馆的馆藏特色、本校的龙头学科和地方特色，集中搜集各类带有指引性的专题文献而建立的数据库。尤其是对五台山管理局、五台山文化研究中心资源的整合，突出显示出本数据库专题资料的唯一性、独特性与地方性。尤其值得一提的是，“五台山文化科技文献资源特色数据库”中录入的大量图片都是第一手拍摄，而且著录十分详尽，五台山图片资料齐全。商业数据库往往只是收录了正式出版刊物，出于成本等方面