ISO 19165-22020 地理信息.数字数据和元数据的保存.第2部分地球观测数据和衍生数字产品的内容规范标准立项发展报告

地理信息数字数据和元数据的保存第2部分：地球观测数据和衍生数字产品的内容规范标准立项发展报告EnglishTitle:StandardizationDevelopmentReport:Geographicinformation—Preservationofdigitaldataandmetadata—Part2:ContentspecificationsforEarthobservationdataandderiveddigitalproducts摘要随着空间对地观测技术的飞速发展，地球观测数据已成为支撑全球变化研究、资源环境监测、防灾减灾及国家安全等关键领域的核心战略资源。然而，这些海量的数字数据及其衍生产品面临着数据格式过时、存储介质老化、元数据缺失等诸多保存风险，导致数据资产的有效性和可用性随时间推移而急剧下降。为应对这一全球性挑战，国际标准化组织地理信息/地球信息业技术委员会（ISO/TC211）制定了ISO19165-2:2020《地理信息数字数据和元数据的保存第2部分：地球观测数据和衍生数字产品的内容规范》。本报告旨在系统阐述该标准的立项背景、核心内容、技术架构及其深远意义。报告首先分析了地球观测数据长期保存面临的严峻形势与特殊需求，明确了标准制定的迫切性。其次，详细解读了标准的核心内容，包括地球观测数据保存的信息模型、数据内容规范（如原始数据、处理级别数据、元数据及辅助数据的保存要求）以及封装结构（如使用OAIS信息包模型）。最后，报告总结了该标准的实施价值，通过规范数据内容，确保地球观测数据在未来数十年甚至数百年内可被正确解析、理解与重用，从而最大程度地实现其科学价值和经济价值。该标准对于构建可持续的地球观测基础设施、促进国际合作与数据共享具有里程碑式的意义。关键词地球观测数据；数字保存；元数据；内容规范；数据归档；开放档案信息系统；互操作性；长期保存Keywords:EarthObservationData;DigitalPreservation;Metadata;ContentSpecification;DataArchiving;OpenArchivalInformationSystem(OAIS);Interoperability;Long-termPreservation正文1.引言：地球观测数据长期保存的全球性挑战在当今信息化时代，地球观测（EarthObservation,EO）卫星、航空遥感平台及地面传感器网络持续产生着前所未有的海量数据。这些数据不仅是科学研究的基石，更是政府决策、商业应用和公共服务的重要支撑。然而，一个严峻的挑战与日俱增：这些宝贵的数字资产正面临着由于技术快速迭代而导致的“数字黑洞”风险。数据格式的专有性、存储介质的物理衰减、相关软件和解读环境的过时，以及元数据信息的缺失，都可能导致这些数据在未来变得不可访问、不可理解甚至完全丢失。不同于传统文献或图纸的保存，数字数据的保存是一项涉及技术、管理、法律和财政等多个层面的系统性工程。特别是对于地球观测数据，其复杂性尤为突出：*数据体量巨大：单颗卫星每天即可产生TB级甚至PB级的数据，对存储和传输提出极高要求。*处理层次多样：从原始传感器数据（Level0）到经过辐射定标、几何校正、大气校正后的高级产品（Level2,3,4），每一级数据的内容、结构和生成上下文都不同。*元数据复杂：不仅需要描述数据本身（如数据获取时间、传感器参数、地理范围），还需记录数据处理流程、算法版本、质量评估信息等完整的“溯源信息”（Provenance）。*依赖专用处理环境：许多历史数据依赖特定的硬件或软件才能正确读取和解析，这种环境随着厂商的变迁和技术升级而迅速消失。在此背景下，国际标准化组织（ISO）下属的地理信息/地球信息业技术委员会（ISO/TC211）审时度势，启动了ISO19165系列标准的编制工作。该系列标准旨在为地理信息数字数据和元数据的长期保存提供一个通用框架。其中，ISO19165-2:2020《地理信息数字数据和元数据的保存第2部分：地球观测数据和衍生数字产品的内容规范》作为该系列的重要组成部分，聚焦于解决地球观测数据这一特殊类型数据的内容规范问题。2.标准核心内容与技术架构解析ISO19165-2:2020并非一个孤立的文件，它建立在ISO19165-1（数字数据和元数据保存的通用框架）的基础之上，并引用了多个现有的ISO地理信息标准，如ISO19115（元数据）、ISO19130（传感器模型）和ISO19157（数据质量）等。其核心目标是提供一个具体、可操作的规范，以确保地球观测数据及其衍生产品能够在不确定的未来被独立于原始软硬件环境之外的任何合格第三方重建、解读和利用。2.1核心信息模型：保存描述信息（PreservationDescriptionInformation,PDI）标准的核心引入了“保存描述信息”（PDI）的概念，这是源自开放档案信息系统（OpenArchivalInformationSystem,OAIS）参考模型（ISO14721）的关键要素。ISO19165-2规定，针对地球观测数据，必须记录以下四类PDI信息：*参考信息（ReferenceInformation）：提供唯一标识数据资源的标识符，如数字对象标识符（DOI）、卫星名称、任务名称、数据集名称等。这是定位和引用数据的基础。*背景信息（ContextInformation）：描述数据对象与其他外部信息之间的关系，例如它所属的卫星任务、关联的定标文件、辅助的卫星姿态数据、气象数据、地面同步观测数据等。这有助于理解数据在更大系统中的角色。*固化信息（FixityInformation）：用于验证数据在长期存储和传输过程中是否发生改变。常用的技术如MD5,SHA-256等校验和（Checksum）值。标准要求保存这些校验和，以备未来进行完整性验证。2.2内容规范：五类核心数据对象基于地球观测数据的获取与处理流程，标准将需要保存的内容明确划分为五类核心数据对象，并对每一类提出了详细的内容规范要求：1.原始数据（RawData,Level0）：要求保存未经任何处理的、最接近传感器输出的数据包或文件。这包括卫星下行链路的遥测数据和工程参数。保存原始数据是后续所有再处理的基础，也是核查数据质量的最终依据。2.处理级别数据（ProcessedData,Levels1-4）：涵盖从辐射定标、几何校正后（Level1）到反演出的地球物理参数（Level2）以及更高级别的时空融合产品（Level3,4）。标准要求对于每个处理级别，不仅要保存最终的产品文件，还必须保存完整的溯源信息（如处理软件、算法、参数、输入数据等），以便未来使用更新的算法或更精确的辅助数据重新处理（Reprocessing）生成“气候数据记录”（ClimateDataRecords,CDRs）。3.元数据（Metadata）：要求按照ISO19115等元数据标准，对数据的标识、内容、空间与时间范围、质量、分发限制等信息进行全面描述。元数据是发现和理解数据的“钥匙”。4.支持与辅助数据（SupportingandAuxiliaryData）：包括传感器定标数据（如辐射定标系数、光谱响应函数）、卫星姿态或轨道星历文件、数字高程模型（DEM）、大气模型数据等。这些数据是正确解读和处理地球观测数据不可或缺的，必须与相关地球观测数据一同保存。5.软件与算法描述（SoftwareandAlgorithmDescription）：鉴于特定的软件可能在未来无法运行，标准要求对用于处理数据的核心算法进行形式化描述，如算法理论文档、伪代码、物理模型方程等。即使不保存可执行软件，通过这些形式化描述，未来也可以使用其他编程语言重新实现该算法。2.3信息包结构与封装ISO19165-2实质上是定义了地球观测数据长期保存的内容外包层（InformationPackage）结构。它遵循OAIS参考模型，将上述五类数据对象及其PDI信息打包成存档信息包（ArchivalInformationPackage,AIP）。这个AIP应是一个自包含、自描述的“数据胶囊”，使得未来任何一个具备基本地理信息知识的数据管理员，即便不了解原始数据格式，也能根据包内的元数据、PDI和辅助数据，将原始比特流转换为可理解的地理信息。标准建议采用如HDF5、NetCDF等通用自描述数据格式来封装此信息包，以确保平台的无关性（Platform-Independent）。3.核心参与机构介绍：加拿大自然资源部（NaturalResourcesCanada,NRCan）与ISO/TC211ISO19165-2:2020的制定是国际合作的成果，其中，加拿大自然资源部（NRCan）及其下属的加拿大遥感中心（CanadaCentreforRemoteSensing,CCRS）扮演了至关重要的角色。作为该标准项目的积极推动者和主要起草单位之一，NRCan贡献了其在联邦地球观测数据管理、长期存档和分发领域的深厚专业知识。机构概况与使命：加拿大自然资源部（NRCan）是加拿大联邦政府的一个关键部门，其使命是开发和利用加拿大的自然资源（如矿产、能源、森林、土地和水资源）的可持续性，以造福当代和未来的加拿大人。该部门的核心工作之一是负责国家地理信息基础设施的管理，包括雷达卫星（RADARSAT）系列卫星的数据存档、处理和分发。作为世界上第一个商业化合成孔径雷达（SAR）卫星数据的运营者和存档者，NRCan（通过CCRS）自1990年代以来便面临着大容量SAR数据长期保存的紧迫挑战。在地球观测数据长期保存领域的贡献：1.实践经验的积累与提炼：NRCan在运营RADARSAT-1,RADARSAT-2和RADARSATConstellationMission(RCM)任务的过程中，积累了超过30年的卫星数据管理与存档经验。面对专有数据格式（如CEOS格式）、软件环境变迁和存储介质老化等实际问题，CCRS的科学家和工程师开发并实施了一套完整的数据保存策略。ISO19165-2中的许多概念，如对传感器校准参数、轨道星历的必须保存，以及详细的溯源信息要求，都直接源自RADARSAT项目的数据保存实践。2.标准化工作的领导力：作为ISO/TC211（地理信息/地球信息业技术委员会）的积极成员国，加拿大（通常由NRCan代表）深度参与了ISO19165系列标准的制定。加拿大提出并主导了“保存地球观测数据”这一细分领域的标准化提案，并将其在本国项目中验证过的最佳实践提炼为国际标准。具体而言，加拿大的专家主导了标准附录中关于“合成孔径雷达（SAR）数据保存内容规范”的编写，为复杂传感器数据的保存提供了专用模板。3.推动开放标准与应用：NRCan积极倡导采用开放、公认的国际标准（如OAIS、ISO19115）。通过推动ISO19165-2的发布，NRCan鼓励全球各地的数据提供者采用统一的内容规范，从而极大地促进了不同地球观测数据存档系统之间的互操作性，为建立全球性的“数据共享网络”奠定了技术基础。这对于应对气候变化、全球环境监测等跨国界科学难题至关重要。综上所述，中国及其他各国可以借鉴NRCan的经验，认识到数据长期保存不仅是一个技术问题，更是一个需要前瞻性规划和持续投入资源的管理问题。通过参与国际标准的制定，既能学习先进经验，也能在全球数据治理格局中发声，保障自身数据资产的安全与长久价值。4.标准的实施价值与现实意义ISO19165-2:2020不仅是一份技术文件，它更是一份数据资产的“保险单”，其实施具有深远的价值：*确保数据资产的长期可用性：严格执行该标准，可以显著降低数据丢失的风险，确保为气候变化、水资源、碳排放、城市规划等需要长期序列数据分析的研究提供持续、稳定的数据源。这是保障科学研究可持续性和决策科学性的基石。*促进数据共享与互操作：标准化的内容规范极大地简化了不同数据存档系统间的数据交换和迁移。新的数据服务提供商可以按照本标准快速构建其存档体系，而用户可以从不同来源获得具有统一格式和内容的“即插即用”数据。*提升数据的可信度与科学性：通过强制记录详尽的溯源信息和元数据，用户能够识别并追溯数据的产生过程。这极大地增强了数据的透明度和可解释性，有助于发现数据处理中的潜在问题，提升基于这些数据所产生科学结论的可信度。*降低长期维护成本：虽然初期按照标准进行数据封装可能需要投入一定的人力与物力，但从长远来看，这避免了因数据格式过时、信息不全而导致的昂贵且困难的“数据考古（DataArcheology）”式抢救项目，实现了数据生命周期管理成本的最优解。5.结论与展望ISO19165-2:2020是针对地球观测数据长期保存这一全球性难题给出的一份权威且详尽的技术解决方案。它通过借鉴OAIS的通用