文物数字化技术及数字化文物系统初探.ppt

文物数字化技术及数字化 文物系统初探 内容简介 1 文物数字化的背景、定义、意义 2 文物数字化的关键技术 3 文物数字化应用系统组成 4 文物数字化应用系统的关键技术 5 文物数字化应用项目 6 讨论 北京理工大学软件学院数字图书馆实验室 1 文物数字化的定义、背景、意义 1.1 文物数字化的定义 1.2 文物数字化的背景及意义 北京理工大学软件学院数字图书馆实验室 1.1 文物数字化的定义 利用最新的数字技术如数字化 扫描、摄影、数字化编辑、三 维动画、虚拟现实以及网络等 再现、保存、传播文物,对文物 进行数字化加工处理； 涉及多学科的技术 北京理工大学软件学院数字图书馆实验室 1.2 文物数字化的背景及意义 计算机网络、通信、计算机等技术的 发展提供了发展基础 是文物保护、保存、文化传播的需要 * 文物的唯一性、不可共享和不可再生性相比； * 数字化的文物信息是无限的、可共享的、可再生的 是NII建设的重要组成部分，急需大 规模有严密组织的信息资源库 北京理工大学软件学院数字图书馆实验室 全球 Internet主机数 (000s) 1989-2006 360 Million用户 Source: Cerf, based on Source: Cerf, based on , Jan 2000, Jan 2000 综 合 数字图书馆 Tiny（小型） Moderate (中型） Immense (巨型） Content Scale （内容规模） Distribution (地域范围） Wide Area (广域) Regional (区域） （本地） Local Hours/Days （数时/数天） Months/Years （数月/数年） Decades/Centuries (数世纪）/ （数十年) General Digital Library Global Design Decision Network Local Design Decision Network 应急管理 知识网络 全 球 决策网络 本 地 决策网络 Lifetime （生命周期） 美国NFS（国家科学基金会）关于知识联网的白皮书附图 2 文物数字化的关键技术 .图像拍摄技术、扫描技术 2.2 虚拟现实 2. 数字对象表示 2. 数字化加工编辑处理技术 北京理工大学软件学院数字图书馆实验室 2.1 图像拍摄技术、扫描技术 选择感光材料的传统相机为主，或数码相 机 图像信息的数字化 非数字化的图像经过光学信号转变成数字 信号再存入计算机；分辩率和色深度是图 像信息化的两个主要技术指标 提高图像的分辩率和突出主题是文物的要 点 扫描仪 2.2 虚拟现实技术 虚拟现实技术是20世纪末发展起来的 一门涉及众多学科的高新技术，从本 质上说是一种先进的计算机用户接口 技术，给用户提供视觉，听觉，触觉 ，嗅觉，味觉等各种直观而又自然的 实时感知交互手段。 虚拟现实：虚拟现实建模语言 Virtual Reality Markup Language 虚拟现实：VRML历史 1994年3月在日内瓦召开的第一届WWW大会上 ，首次正式提出了VRML这个名字。 1994年10 月在芝加哥召开的第二届WWW大会上公布了规 范的VRML1.0草案。 1996年8月在新奥尔良召开的优秀3D图形技术 会议-Siggraph96上公布通过了规范的VRML2.0 第一版。它在 VRML1.0的基础上进行了很大的 补充和完善。 虚拟现实：VRML历史 1997年12月VRML作为国际标准正式发布， 1998年1月正式获得国际标准化组织ISO批准简 称VRML97。VRML97只是在VRML2.0基础进 行上进行了少量的修正。 1998年。VRML组织把自己改名为Web3D组织 ，同时制订了一个新的标准，Extensible 3D (X3D)，到了2000年春天，Web3D组织完成了 VRML到X3D的转换。X3D整合正在发展的XML 、JAVA、流技术等先进技术，包括了更强 大、 更高效的3D计算能力、渲染质量和传输速度。 虚拟现实：VRML的核心体系 VRML文件描述的基于时间的三维空间称 为虚拟境界（Virtual World），它由对象 构成，而对象及其属性用节点描述，节点 是VRML的基本单元。每个节点由类型、 域、事件、实现、名字组成，节点按一定 规则构成场景图（Scenegraph）。 虚拟现实：VRML特点 存在感。 多感知性。 交互性。 动态显示。 立体感的视觉与听觉效果。 脚本功能。 数字对象构成 数字信息管理的基本术语： 1 数字对象：数字信息库中表示信息的基本逻辑 单位。如文章，图片，一部音乐作品。 2 元数据：描述对象实体的信息。元数据中可包 含数字对象的唯一句柄。 .3 数字对象构成 数字对象头 数字对象体 A1A2A3An 元数据句柄 2.4 数字资源加工编辑相关技术 数字资源加工主要涉及元数据标准的制定 与资源的元数据加工、工业化的OCR技术 、自动标引、自动文摘、知识概念体系、 网上资源的获取与处理、数据压缩、数字 版权的管理等。 北京理工大学软件学院数字图书馆实验室 数字资源加工编辑相关技术 (Cont.) 建立元数据标准和规范：提高数字资源的 可访问性和可检索性；为搜索结果提供更 加有效的关联度排序；作为某些资源的替 代品，如需要花费大量时间下载或浏览的 大型文件，需要进行解释才能理解的原始 数据，甚至某些无法以电子方式获得的资 源；有助于解决知识产权的辨认、跟踪和 管理问题。 数字资源加工编辑相关技术 (Cont.) 工业化的OCR技术：为完成大批量的数字 化工作，需要可靠的不依靠人工校对的图 像处理和OCR技术，该技术要支持汉字大 字符集下的工业化扫描和识别，其识别精 确度要在99.99%以上。 数字资源加工编辑相关技术 (Cont.) 自动标引、自动文摘生成、自动篇名生成 技术：以现有的主题和分类词表为基础， 具有自学习的能力，学习成熟人员的经验 ，为标引人员自动生成或辅助生成主题和 分类，并对人工标引进行必要的校对。同 时，要求具有智能化的自动文摘生成技术 及自动篇名生成技术来大批量地生成文摘 数据和篇名数据。 数字资源加工编辑相关技术 (Cont.) 知识概念体系：建立基于人工智能知识表 达的知识概念体系，提供智能化的信息服 务。 数字资源加工编辑相关技术 (Cont.) Web挖掘技术：Web内容的挖掘是对Web 中包含的文本、图像、视频等数据元素进 行挖掘；Web结构的挖掘是从Web的链结 构中发现知识；Web使用的挖掘是追随用 户对Web页的交互和操纵，从中挖掘出有 价值的用户存取模式。 北京理工大学软件学院数字图书馆实验室 数字资源加工编辑相关技术 (Cont.) 多媒体挖掘技术：基于多媒体的内容特性 以及这些特性相关的语义，从大型多媒体 数据集（不仅仅是多媒体数据库）中发现 和分析出隐含的、有效的、有价值的、可 理解的模式，使多媒体的处理和管理从信 息存取上升到知识获取层次，使多媒体内 容的利用达到新的高度。 北京理工大学软件学院数字图书馆实验室 数字资源加工编辑相关技术 (Cont.) 压缩、解压缩技术：在数字资源的建设与 使用的过程中，资源的加工必须是一次性 的，而经过加工的资源应适应多种不同的 用途。 数字资源加工编辑相关技术 (Cont.) 数字版权管理技术：通过对数字资源进行 处理，有效地管理所有数字资源内容的知 识产权，其中包括文字、图像、音频、视 频等各种形式的数字对象。综合运用各种 加密手段保证数字对象在网络传输过程中 的安全，并建立网上授权认证机制，防止 传播中的数字资源被非法使用，同时与精 确的计费功能结合，提供安全可靠的信息 交易平台。 数字资源加工编辑相关技术 (Cont.) 数字版权管理技术：通过对数字资源进行 处理，有效地管理所有数字资源内容的知 识产权，其中包括文字、图像、音频、视 频等各种形式的数字对象。综合运用各种 加密手段保证数字对象在网络传输过程中 的安全，并建立网上授权认证机制，防止 传播中的数字资源被非法使用，同时与精 确的计费功能结合，提供安全可靠的信息 交易平台。 3文物数字化应用系统组成 3.1文物数字化应用系统定义 3.2数字资源管理系统模型 3.3文物数字化应用系统体系结 构 3.1文物数字化应用系统定义 根据需求不同，文物数字化应用系统定义 多样 本报告讨论的是一种具有开放式体系结构 的、有组织管理的网络数字文物藏品系统 及信息服务系统； 它支持大范围、分布式的数字化文物的信 息服务，用户可在网络上横跨异构的支持 知识关联的文物资源库，高效访问以多种 数字格式存储在其中的多媒体知识信息。 支持基于局域、互连网的服务 与其它应用系统或资源库的关连 3.数字资源服务管理系统模型 元数据服务器对象数据服务器 内容管理 WEB PORTAL 用户 权限 认证 收费 管理 Web客户端管理工具 存储管理 3.文物数字化应用系统体 系结构 北京理工大学软件学院数字图书馆实验室 文物数字化应用系统体系 结构(Cont.) 文物数字化应用系统体 系结构(Cont.) 文物数字化应用系统体 系结构(续) 构成子系统 用户界面 数字化资源加工系统 数字信息的存储管理 资源调度系统 信息访问和查询 安全认证 版权保护 文物数字化应用系统体 系结构(续) 用户界面 1 为用户服务的界面 浏览器：与用户交互作用 客户服务：浏览器与系统其它部份的中介服 务。 2 为系统管理员提供的界面。 文物数字化应用系统体 系结构(续) q数字化资源加工系统 1、对文本、图像、音频和视频等信息的数 字化采集，加工，处理。 2、实现信息资源的一次加工，多次使用。 3、信息的表示格式与对系统升级的影响 如一幅图像的表示： 高分辨率；中分辨；低分辨；元数据 文物数字化应用系统体 系结构(续) q数字化资源加工系统 4、数字化标准 XML/SGML SGML：标准通用标识语言 XML：可括充的标识语言 XML工具软件：编译，转换，编辑等 5、从MARC到DC的辅助转换 文物数字化应用系统体 系结构(续) 数字信息的存储管理 实现对所有数据的存储管理，包括标准化 的元数据和数字对象的存储格式、存储协 议、元数据和对象数据的一致性、分布环 境下数据的查询 文物数字化应用系统体 系结构(续) 数字信息的存储管理 LAN/WAN/INTERNET 图书馆服务器对象服务器 客户 文物数字化应用系统体 系结构(续) 数字信息的存储管理 异地存储 技术更新 文物数字化应用系统体系结构(续) 资源调度系统 1、建立统一的资源命名规则 2、建立调度机制 3、为资源加工和用户服务提供 调度服务功能 文物数字化应用系统体系结构(续) 信息查询系统 查询界面 匹配系统/搜索引擎 信息库信息库信息库 文物数字化应用系统体系结构(续) 信息查询系统 1、统一检索功能：采取单一界面实现数据的统一 检索。 2、检索结果的显示 过滤功能；信息选择，复杂检索功能；对多数 据库的检索功能(结果合并等) 3、影像数据的检索 对影像数据进行详细检索的功能。 文物数字化应用系统体系结构(续) 信息查询系统 4、人工标引，自动标引，半自动标引， 标引转换生成 5、多语言处理系统 6、自然语言处理，基于语义的检索分类 文物数字化应用系统体系结构(续) 安全认证 1、用户身份认证 2、访问权限认证 文物数字化应用系统体系结构(续) 版权保护软件系统 实现基于分布式环境下垮单位垮库环境下 的版权保护和电子商务系统。 登记；认证；记费；结算 分布式有偿服务的记费模型 4 文物数字化应用系统的关键技术 4.1 数字资源加工编辑相关技术 4.2 应用平台和资源管理 4.3 用户服务相关技术 4.4 应该遵循的相关标准规范 数字资源加工编辑相关技术 见 应用平台和资源管理 提供对数字资源的管理和开发利用，是为用 户提供各种信息与知识服务的后台系统。 检索技术：包括纯文本的全文检索、概念 检索、图像检索、视频检索、音频检索技 术等。 应用平台和资源管理(Cont.) 智能型全文检索技术。主要解决跨地区、 跨数据库的信息资源检索问题。检索软件 应该能够根据用户的信息需求，帮助用户 分析和制定检索策略，并能智能化地在不 同地点、不同数据库中进行搜索，将用户 所需信息准确地检索显示出来。 应用平台和资源管理(Cont.) 命名系统：系统中的资源需要具备一个长 期的、全球唯一的、独立于地址的标识名 ，以便于用户对资源的检索。 应用平台和资源管理(Cont.) 资源调度技术：主要负责从唯一的资源名 到资源的网络地址的解析过程。 应用平台和资源管理(Cont.) 多媒体处理技术：适于网络传输、多媒体 的检索。 应用平台和资源管理(Cont.) 系统的互操作技术：通过元数据的互操作 ，促进资源的共享；通过中间件、Agent 以及Web Services解决分布式异构系统之 间的互操作。 应用平台和资源管理(Cont.) 数字化信息资源管理技术：主要解决信息 资源数字化后海量信息的存储和管理问题 ，一方面要保证海量信息存储有序，另一 方面还要保证不影响信息的读取速度和效 果。 应用平台和资源管理(Cont.) l 水印技术与密钥技术：通过这种技 术将对数字资源进行有效的知识产权保护 。 用户服务相关技术 主要涉及人机交互方面的技术，为用户提供 简单、便捷、灵活的友好界面。 多语言技术：要保证系统支持多语言技术 ，同时为满足更大范围的用户的需求，系 统要通过机器翻译、多语言浏览等功能为 用户提供跨语言的支持。 用户服务相关技术 (Cont.) 个性化定制服务技术：根据不同用户的不 同需求，向他们提供个性化界面，以便高 效、准确的知识服务。 4.4应该遵循的相关标准规范 北京理工大学软件学院数字图书馆实验室 ISO 10646 信息技术通用多个8比特编码字符集 使用场所：底层数据编码标准，采用Unicode 4.0标准 ISO 14721 / OAIS 空间数据和信息传送系统开放档 案信息系统参考模型 使用场所：数字资源组织、管理、预发布参考模型 ISO 15836 信息和文档都柏林核心元数据元素集 Open Archives Initiative 用于元数据收获的开放档案主 动协议 使用场所：不同系统元数据收获处理 北京理工大学软件学院数字图书馆实验室 Z39.87数据字典对于数字静止图象的技术元数据 使用场所：数字图书馆系统中，数字静止图象加工技术元数据参考 Z39.88对于关系敏感服务的开放唯一资源定位的框架 GB2312 / GB18030 国家中文信息编码标准 使用场所：系统中，表现层信息编码 中图分类法：中国国家图书馆分类方法 使用场所：数据分类规范，数据检索开关控制，参加关联检索 北京理工大学软件学院数字图书馆实验室 Adobe PDF 使用场所：电子文档表现格式，