信息检索语言.ppt

信息检索语言TheLanguageinformationretrieval 1 检索语言的概念2 检索语言的功能3 检索语言的分类 第一节信息检索语言 信息检索语言就是信息组织和信息检索时所使用的语言 包括自然语言 信息检索语言是文献信息标引的规则和标准 标引人员可用它来标引文献以便将文献整理 加工 存储于检索系统中 同时 检索人员可用它来表达检索课题信息的内容 以便把特定文献从检索系统中检索出来 因此 检索语言就是一种把文献的存储与检索联系起来 把标引人员和检索人员沟通起来的约定人工语言 1 检索语言的概念 2 检索语言的功能 通过分析信息存储和检索的全过程可以看出检索语言大致有以下四点主要功能 对文献的信息内容及其外表特征加以规范化的标引 对内容相同及相关的文献信息加以集中或揭示其相关性 可使文献信息的存储集中化 系统化 组织化 便于检索者按一定的排列次序进行有序化检索 便于将标引用语和检索用语进行相符性比较 检索语言在检索中的作用 例如 有三篇文献篇名如下 文献1 AModelofmultimediainformationretrieval文献2 TheInformationretrievalinchemistryWWWserver文献3 ERICresources在对信息存储的过程中 对这三篇文献内容分别进行了分析 并使用检索语言对其进行标引 标引结果为 文献1 篇名 title AModelofmultimediainformationretrieval主题 subject informationretrieval multimediacomputerapplications文献2 篇名 title TheInformationretrievalinchemistryWWWserver主题 subject chemistry educationalmaterials文献3 篇名 title ERICresources主题 subject educationalmaterials标引后这三篇文献分别被存储进数据库 在信息检索过程中 如果用户输入 informationretrieval 一词 并将检索范围限定在篇名中 则文献1与文献2符合用户要求 成为检索结果 如果用户输入 informationretrieval 一词 并将检索范围限定在主题中 则只有文献1符合用户要求 成为检索结果 如果用户输入 educationalmaterials 一词 并将检索范围限定在主题中 则文献2和文献3符合用户要求 成为检索结果 在上述例子中 informationretrieval educationalmaterials 都是检索语言 篇名和主题则是检索语言的标识 检索系统就是通过他们将用户需求与信息内容进行运算匹配 最终找到检索结果的 由这个例子可以看出 检索语言的主要作用就是对文献的外部特征和内容进行多层次描述 提供多种检索途径 以方便用户从不同角度检索查找 3 1分类检索语言文献分类的实质是按照知识体系分类和概念逻辑的方法 对文件的信息进行区分和归类 分类语言的词表即为分类表 它是由众多类目按照一定的知识分类和概念逻辑秩序 并考虑文献分类的需要而构成的体系 其中 类目是组成分类语言的基本单元 每一个类目都是一个相同事物构成的集合 体现单一的概念意义或复合的概念意义 表达这些概念意义的自然语言词语为类目名称或类名 3 检索语言的分类 由于分类语言通常采用字母或数字符号来构词 因而表达这些概念意义的分类语言词语就是类目的号码 即类号 通过自然语言的类名 可以直接的理解类目的含义 借助形势化符号的类号 可以系统的揭示与组织文献信息 文献分类的意义在于 根据文献信息的内容特征和分类词表 把相同内容的文献集中起来 同时 又把不同内容的文献信息区别开来 以实现相关集中的功能 分类检索语言的类型有 1 体系分类法 2 组配分类法 3 混合式分类法 使用较多的是体系分类法 其主要特点是按学科 专业集中文献 并从知识分类角度揭示各类文献在内容上的区别和联系 提供从学科分类检索文献信息的途径 体系分类法具有按学科或专业集中系统地向人们揭示文献资料内容的功能 这对于希望系统掌握和利用某一专业范围的文献而言 无疑是有效的 如 中国图书馆分类法 是国家推荐统一使用的分类法 被许多检索工具采用或改编 分5大部类22大类 类号采用汉语拼音字母与阿拉伯数字的混合号码 用一个字母代表一个大类 以字母的顺序反映大类的序列 在字母后用数字表示大类下类目的划分 数字的设置尽可能代表类的级位 并基本上遵从层累制的原则 例如 F 经济 大类 F2 经济计划与管理 二级类 F25 物资经济 三级类 F250 物资经济理论 四级类 F251 1 物资管理 五级类 由此可见 按体系分类法检索的长处是 能满足从学科或专业角度广泛地进行课题检索的要求 达到较高的查全率 查准率的高低与类目的粗细多少有关 类目越细 专指度越高 查准率也越高 但类表的篇幅是有限的 类目不可能设计得很细 因此 分类法只是一种 族性检索 而非 特性检索 概念 是指经过控制的 表达文献信息内容的语词 是以自然语言的语词为字符 以规范化或未经规范化的名词术语为基本词汇 以概念之间的形式逻辑作为语法和构词法 用语词字顺排列 主题概念以参照系统显示概念之间关系的一类检索语言 类型 主题检索语言包括标题词语言 标题法 单元词语言 单元词法 叙词语言 叙词法 和关键词语言 关键词法 它们可统称为主题法系统 3 2主题语言 概念 就是将千百年来存在于人类社会生活中自然形成的非正式语言 通过一定的语言处理技术 使之应用于信息检索系统的信息组织 标引与输出 而就信息用户而言 自然语言检索则主要反映在提问输入和对话接口的语言检索方式上 特点 对信息检索领域来说 采用自然语言的方式 可以有效解决潜在语义表达上的不匹配因素 自然语言的语言思维形式 对信息的表达对应性较强 因而有利于形成在语言无损耗意义上的排序输出问题 3 3自然语言 自然语言 naturallanguage 检索用词是从信息内容本身抽取的 主要依赖于计算机自动抽词技术完成 辅以人工自由标引 非依据词表的标引方法 是非规范词 uncontrolledterm 自然语言的标识包括 1 关键词 keyword 直接从信息资源名称 正文或文摘中抽出的代表信息主要内容的重要语词 这部分有时由人工自由标引进行 如期刊论文中的作者关键词 大部分由计算机标引系统自动完成 2 题名 信息资源的名称 如论文篇名 图书书名 网站名称等 3 全文 从资源的全部内容中自动抽取 查找 是目前网上各类搜索引擎使用得最多的方法 4 引文 将文献所引用的参考文献的作者 篇名 来源出版物抽取出来进行标引 此外 还有责任人 作者 摘要等 自然语言检索系统对同义词 近义词 多义词和其他一些与其相关的词语没有进行规范和统一 词间缺乏有机的联系 当用户提问的检索概念具有多种表达形式时 采用单一的关键词或自然语言索引词匹配方式势必会影响查全率 自然语言检索系统的选词没有严格限制 词量过多过杂 这势必会影响查准率 思考题1 检索语言具有哪些功能 2 分类语言使用较多的是哪种分类法 信息检索语言TheLanguageinformationretrieval 1 检索语言的概念2 检索语言的功能3 检索语言的分类 第一节信息检索语言 信息检索语言就是信息组织和信息检索时所使用的语言 包括自然语言 信息检索语言是文献信息标引的规则和标准 标引人员可用它来标引文献以便将文献整理 加工 存储于检索系统中 同时 检索人员可用它来表达检索课题信息的内容 以便把特定文献从检索系统中检索出来 因此 检索语言就是一种把文献的存储与检索联系起来 把标引人员和检索人员沟通起来的约定人工语言 1 检索语言的概念 2 检索语言的功能 通过分析信息存储和检索的全过程可以看出检索语言大致有以下四点主要功能 对文献的信息内容及其外表特征加以规范化的标引 对内容相同及相关的文献信息加以集中或揭示其相关性 可使文献信息的存储集中化 系统化 组织化 便于检索者按一定的排列次序进行有序化检索 便于将标引用语和检索用语进行相符性比较 检索语言在检索中的作用 例如 有三篇文献篇名如下 文献1 AModelofmultimediainformationretrieval文献2 TheInformationretrievalinchemistryWWWserver文献3 ERICresources在对信息存储的过程中 对这三篇文献内容分别进行了分析 并使用检索语言对其进行标引 标引结果为 文献1 篇名 title AModelofmultimediainformationretrieval主题 subject informationretrieval multimediacomputerapplications文献2 篇名 title TheInformationretrievalinchemistryWWWserver主题 subject chemistry educationalmaterials文献3 篇名 title ERICresources主题 subject educationalmaterials标引后这三篇文献分别被存储进数据库 在信息检索过程中 如果用户输入 informationretrieval 一词 并将检索范围限定在篇名中 则文献1与文献2符合用户要求 成为检索结果 如果用户输入 informationretrieval 一词 并将检索范围限定在主题中 则只有文献1符合用户要求 成为检索结果 如果用户输入 educationalmaterials 一词 并将检索范围限定在主题中 则文献2和文献3符合用户要求 成为检索结果 在上述例子中 informationretrieval educationalmaterials 都是检索语言 篇名和主题则是检索语言的标识 检索系统就是通过他们将用户需求与信息内容进行运算匹配 最终找到检索结果的 由这个例子可以看出 检索语言的主要作用就是对文献的外部特征和内容进行多层次描述 提供多种检索途径 以方便用户从不同角度检索查找 3 1分类检索语言文献分类的实质是按照知识体系分类和概念逻辑的方法 对文件的信息进行区分和归类 分类语言的词表即为分类表 它是由众多类目按照一定的知识分类和概念逻辑秩序 并考虑文献分类的需要而构成的体系 其中 类目是组成分类语言的基本单元 每一个类目都是一个相同事物构成的集合 体现单一的概念意义或复合的概念意义 表达这些概念意义的自然语言词语为类目名称或类名 3 检索语言的分类 由于分类语言通常采用字母或数字符号来构词 因而表达这些概念意义的分类语言词语就是类目的号码 即类号 通过自然语言的类名 可以直接的理解类目的含义 借助形势化符号的类号 可以系统的揭示与组织文献信息 文献分类的意义在于 根据文献信息的内容特征和分类词表 把相同内容的文献集中起来 同时 又把不同内容的文献信息区别开来 以实现相关集中的功能 分类检索语言的类型有 1 体系分类法 2 组配分类法 3 混合式分类法 使用较多的是体系分类法 其主要特点是按学科 专业集中文献 并从知识分类角度揭示各类文献在内容上的区别和联系 提供从学科分类检索文献信息的途径 体系分类法具有按学科或专业集中系统地向人们揭示文献资料内容的功能 这对于希望系统掌握和利用某一专业范围的文献而言 无疑是有效的 如 中国图书馆分类法 是国家推荐统一使用的分类法 被许多检索工具采用或改编 分5大部类22大类 类号采用汉语拼音字母与阿拉伯数字的混合号码 用一个字母代表一个大类 以字母的顺序反映大类的序列 在字母后用数字表示大类下类目的划分 数字的设置尽可能代表类的级位 并基本上遵从层累制的原则 例如 F 经济 大类 F2 经济计划与管理 二级类 F25 物资经济 三级类 F250 物资经济理论 四级类 F251 1 物资管理 五级类 由此可见 按体系分类法检索的长处是 能满足从学科或专业角度广泛地进行课题检索的要求 达到较高的查全率 查准率的高低与类目的粗细多少有关 类目越细 专指度越高 查准率也越高 但类表的篇幅是有限的 类目不可能设计得很细 因此 分类法只是一种 族性检索 而非 特性检索 概念 是指经过控制的 表达文献信息内容的语词 是以自然语言的语词为字符 以规范化或未经规范化的名词术语为基本词汇 以概念之间的形式逻辑作为语法和构词法 用语词字顺排列 主题概念以参照系统显示概念之间关系的一类检索语言 类型 主题检索语言包括标题词语言 标题法 单元词语言 单元词法 叙词语言 叙词法 和关键词语言 关键词法 它们可统称为主题法系统 3 2主题语言 概念 就是将千百年来存在于人类社会生活中自然形成的非正式语言 通过一定的语言处理技术 使之应用于信息检索系统的信息组织 标引与输出 而就信息用户而言 自然语言检索则主要反映在提问输入和对话接