《智能信息检索与生成式AI应用》课件-2.信息的表示与组织 1.1 信息概述_第1页
《智能信息检索与生成式AI应用》课件-2.信息的表示与组织 1.1 信息概述_第2页
《智能信息检索与生成式AI应用》课件-2.信息的表示与组织 1.1 信息概述_第3页
《智能信息检索与生成式AI应用》课件-2.信息的表示与组织 1.1 信息概述_第4页
《智能信息检索与生成式AI应用》课件-2.信息的表示与组织 1.1 信息概述_第5页
已阅读5页,还剩7页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

信息的表示与编码01了解信息表示的原因02掌握主要信息类型的编码方式03认识不同表示方式对信息检索的影响学

标我们在生活中如何表示如下信息?思

考小明从学校回家的路。小明想说明什么平均数。小明想表达对妈妈的爱。我们在生活中如何表示如下信息?答

案小明从学校回家的路。小明想说明什么平均数。小明想表达对妈妈的爱。地图公式语言我们如何让计算机表示信息人机器人可以识别事物、生物、非生物.....如何表示世间万物的信息机器底层只能处理二进制0\1必须建立一套规则,将人类可理解的信息映射为计算机可操作的符号编码文本信息的编码毕达哥拉斯:“数”是一切事物的本源,即“万物皆数”文字是书写的符号信息,也可以通过特定的数字代码来表示ASCII码:

一种将英文字符或特殊符号转换为数字的编码字母'A'转换为数字65字母'B'转换为

数字66ASCII码无法覆盖所有语言,Unicode应运而生,可以表

示世界上几乎所有的字符包括中文、阿拉伯文等汉字“中”的Unicode编码是4E2D古希腊哲学家、数学家和音乐理论家多媒体信息的编码图片的编码像素矩阵+颜色模型(RGB、CMYK)音频的编码连续的音频实际是离散的数字信号组成每个音频都是一个数字信号视频的编码本质是连续图像(帧)+同步音频xyG:237R:226B:233结构化信息的编码结构化信息是具有固定格式和明确模式的信息常见的结构化数据数据库表示模型:半结构化信息的表示:关系模型:表(行=记录,列=字段/属性)键值对:简单的键-值映射文档模型:嵌套的层次结构(如MongoDB文档)XML:标签定义数据结构JSON:轻量级键值对,网络传输常用语义表示与知识组织从语法到语义的飞跃构建词汇表基于词汇表分词词汇表ID替换构建众多语料中的词向量向量(50维)Word2Vec嵌入表示与编码对信息检索的影响检索系统的能力受限于信息的表示方式不同表示方式支持的检索类型表示方式支持的检索类型技术示例局限字符编码精确字符串匹配关键词搜索无语义理解结构化表示字段精确查询、范围查询SQL查询需预定义模式词向量表示语义相似性检索向量相似度计算训练数据依赖知识图谱表示关联推理、智能问答图查询、推理构建成本高依赖文本的词法表示建立倒排索引图像检索系统:提取视觉特征向量进行相似度匹配智能问答系统:将自然语言问题映射到知识图谱查询全文检索系统图像检索系统智能问答系统例子小

结信息在计算机中的表示,本质上均为数字编码

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论