基于网格的面向专业内容的Web信息检索体系结构

1、基于网格的面向专业内容的Web信息检索体系构造摘要：利用网格计算、集群系统、XL等技术对分散的eb信息资源按地区按专业内容从逻辑上进展了有效的组织和管理，设计了一个基于网格的面向专业内容的eb信息检索体系构造，为用户高效地获取面向专业内容的信息资源提供了一种方法。关键词：网格计算,集群系统,XL,Agent,eb1、引言近年来，互联网得到了迅速的开展，网上信息资源愈来愈庞大，且信息具有量大、分散、异构等特性，因此，传统的eb信息检索工具开场暴露出它性能低下的一面，详细表达在现有的信息检索工具对用户的要求常常是找出了几千甚至上万条记录，根本无法从中再细找，或者找到的内容和要找的内容不是一个专业领

2、域的，造成信息无效的现象。但随着人们信息意识的增强，对信息内容及信息效劳的需求也在不断的演变和开展，对获取信息的专业化、实效性等方面有了新的要求。如何针对专业领域中特定的用户群为他们提供专业的、度身量造的信息效劳，使用户在尽可能短的时间内有效的找到最需要的信息内容是大家普遍关注的一个问题。本文利用网格计算、集群系统、XL等技术设计了一个基于网格的面向专业内容的eb信息检索体系构造，它能将地理位置分散的、异构的信息按地区按专业内容从逻辑上进展合理的组织和管理，为用户快速、有效地获取自己所需要的信息提供了一种方法。2、基于网格的面向专业内容的eb信息检索体系构造的设计网格计算是近年来国际上兴起的一

3、种重要信息技术，其目的是将网上各种资源组织在一个统一的大框架下，为解决大型复杂计算、数据效劳和各种网络信息效劳提供一个方便用户使用的虚拟平台，实现互联网上所有资源的全面连通，实现信息资源的全面共享。为解决不同领域复杂科学计算与海量信息效劳问题，人们以网络互连为根底构造了不同的网格，他们在体系构造，要解决的问题类型等方面各不一样，但网格计算至少需要具有三种根本功能：资源管理、任务管理、任务调度。本文设计的信息检索体系构造，围绕网格计算的根本功能及信息检索的特点，主要有以下三个层次组成：见图11网格结点：结点是网格计算资源的提供者，本系统主要是由一系列的集群系统组成，它们在地理位置上是分布的，构成

4、了一个分布检索群体，作为信息共享的根底构造平台。集群系统负责整个集群范围内的信息管理，维护和查询。2网格计算中间件：中间件是信息资源管理和用户任务调度、任务管理的工具。它是整个网格信息资源管理的核心局部，它根据用户的信息恳求任务，在整个网格内负责信息资源的匹配、定位，实现用户任务到集群系统的映射。3网格用户层：主要为用户应用提供接口，支持用户对所需要的信息资源进展描绘、创立、提交等。本系统的主要思想是在逻辑上将地理位置分散的、异构的信息划分、组建成多个集群系统，集群系统对集群内的资源进展管理和任务调度，再利用网格中间件对各集群系统进展管理，从而形成对整个网格资源的管理，并对用户的信息需求进展统

5、一的管理和调度。这种管理模型既可以尊重各个集群系统的本地信息管理策略，又可利用中间件在全局意义上对网格信息资源进展管理。2.1集群系统的设计由于eb信息资源数量非常庞大，用户在利用现有搜索引擎检索信息时面临一个海量数据的查询问题，往往造成在消耗宏大的通信资源后仍然存在资源查不准、查不全的问题。目前基于单一系统映射的eb效劳器集群系统能把假设干效劳器用局域网连接成一个整体，并使其从客户端看来就如同一台效劳器在效劳，这使得在逻辑上合并、组织地理位置分布的信息资源成为可能。因此本文首先考虑采用分布协作策略，将eb信息资源按地区按专业内容分割，一方面使信息资源数量相对缩小，便于数据的组织、管理和维护，

6、另一方面按专业内容易于制定一个公用的XL标准，便于集群内各类信息资源的描绘，从而可建立一个基于XL的面向专业内容的信息集成系统。集群系统的详细构造见图2。集群效劳器主要由接口Agent，基于专业内容的XL信息集成系统、资源效劳Agent、资源发布Agent等组成。其中接口Agent根据任务提供的接口参数登记、接收、管理各种信息资源恳求任务，并提供平安认证和受权。资源效劳Agent根据信息资源恳求任务，利用XL信息集成系统提供的数据，为用户提供实际的资源检索操作，并将检索结果信息发送给用户。资源发布Agent用于向网格中间件提供本地信息资源的逻辑数据及接口参数。下面主要说明基于专业内容的XL信息

7、集成系统的构造方法：XLtheeXtensiblearkupLanguage是3于1998年宣布作为Internet上数据表示和数据交换的新标准，它是一种可以对信息进展自我描绘的语言，它允许开发人员通过创立格式文件DTDDuentTypeDefinitins定制标记来描绘自己的数据，DTD标准是一个用来定义XL文件的语法、句法和数据构造的标准。XL使用普通文本，因此具有跨平台的优点，XL的优点在于1简单、标准性：XL文档基于文本标签，有一套严谨而简洁的语法构造，便于计算机、用户理解；2可扩展性：用户可以自定义具有特定意义的标签，自定义的标签可以在任何组织、客户、应用之间共享；3自描绘性：自描绘

8、性使其非常适用不同应用间的数据交换，而且这种交换是不以预先定义一组数据构造为前提，因此具有很强的开放性；4互操作性：XL可以把所有信息都存于文档中传输，而远程的应用程序又可以从中提取需要的信息。XL数据是不依赖于某个特定的平台的应用，因此它为基于特定专业内容的表达提供了一种极好的手段，可以作为表示专业内容的语言。目前人们研制eb信息集成系统其根本方法可分成两类：存入仓库法theare-husingapprah和虚拟法(thevirtualapprah)，可使用这两类方法利用XL在数据组织和交换方面的优越性，采用格式文件DTD和XL文档表示基于专业内容的集成形式和集成形式与资源之间的映射，建立基

9、于XL的eb信息集成系统，其构造与获取信息的工作过程参见文献2。2.2网格中间件的设计图3所示的网格中间件的主要功能是1消除不同用户与集群系统之间数据表达的差异，使信息资源数据对用户来说是透明的；2管理、维护eb上分布的各集群系统，网格中间件以关系数据库方式记录所有集群系统及其所包含的专业内容的逻辑信息，对关系数据库的操作可维护集群系统的分布式逻辑，使本构造在可变性和扩大性上具有柔性；3承受用户的信息恳求任务，能快速定位于满足要求的集群系统，通过对关系数据库的查询实现用户信息恳求任务与集群系统的对应关系。内部主要功能模块说明如下：1接收Agent模块：主要用于登记、接收、管理各种信息资源恳求任

10、务，并提供平安认证和受权。2关系数据库及数据效劳Agent：关系数据库记录了所有集群系统及其所包含的专业内容的逻辑信息。数据效劳Agent提供集群系统对关系数据库的使用权限和对数据记录的增加、删除、检索和修改等操作。3格式转换Agent模块：提供用户信息资源恳求文档与各集群系统中文档的格式转换功能。由于XL是自定义的，各用户对同一数据有不同的表示方法对信息资源描绘存在差异由于XL文档中这种格式差异表达在与之相关的DTD/Shea上，因此经过格式转换，可使信息资源的格式对用户是透明的。4XL文档分析Agent模块：提取格式转换后的XL文档中各个标签，通过查询网格中间件中的关系数据库，实现用户信息

11、恳求任务与集群系统的对应关系，并得到满足条件的集群系统的相关信息，获取各集群系统的接口参数。5发送Agent模块：将转换过的信息资源恳求XL文档发送到相应的集群系统中。其中Agent技术是解决分布式智能应用问题的关键技术，Agent是指可以自主地、连续地在一动态变化的、存在于其它系统中运行的、且不断于环境交互的实体。在系统中引入Agent可使系统具有人的特征，代表用户完成用户的任务，并能动态适应环境的变化更好地满足用户的需求，进步信息检索的才能。3、工作过程要使本体系构造具有高协作性和互操作性，用户、网格中间件、集群系统以及其它Agent等实体之间的通信是整个系统运转的关键。由于XL为基于特定

12、专业内容的表达提供了一种极好的手段，XL是一种元语言，其严格的定义和规那么集使人和机器都能更容易的阅读文档，因此本文将XL集成到各局部的通信语言中，在用户发出的信息检索恳求文档、网格中间件、集群系统之间的通信均利用XL定义，这样做增强了通信的语义信息和灵敏性并可以在多种平台使用，并且基于XL的通信语言其通信内容的表达比其它方法更容易开发语法分析器。详细的工作过程如下：1恳求、定位过程：由网格用户层向网格中间件发送用户的信息检索恳求文档，描绘网格接口参数、信息恳求内容等，在承受Agent进展身份确认及权限确认后，经文档格式转换Agent模块、文档分析Agent模块、发送Agent模块处理后，定位于某些特定的集群系统效劳器。2应答、处理过程：集群系统效劳器经历证、调用资源效劳Agent对信息集成系统进展查询后，将查询结果信息传输给用户。4、结语本文利用网格计算、集群系统、XL在数据组织、交换、共享方面的优势，对大量分散、异构的面向专业内容的信息资源提供了一种有效组织和管理方法；并通过网格中间件，实现了信息资源的数据格式转换与快速定位，进步了信息检索