ISOIEC 21794-32021 信息技术.阻燃图像编码系统（JPEG Pleno）.第3部分一致性试验标准立项发展报告

信息技术阻燃图像编码系统（JPEGPleno）第3部分：一致性试验标准立项发展报告StandardizationDevelopmentReport:Informationtechnology—Plenopticimagecodingsystem(JPEGPleno)—Part3:Conformancetesting摘要随着光场成像、全息显示及多视角三维采集技术的迅猛发展，传统二维图像编码标准已难以支撑新兴沉浸式视觉应用对海量高维数据的压缩需求。JPEGPleno（阻燃图像编码系统）作为国际标准化组织ISO/IECJTC1/SC29/WG1（JPEG委员会）主导的新一代成像标准体系，旨在为光场、全息、点云及多视角纹理等阻燃（Plenoptic）视觉数据提供统一、高效的压缩与描述框架。本报告聚焦于该标准体系中的一致性测试部分——ISO/IEC21794-3:2021，系统阐述其立项背景、技术路线、标准架构、测试方法及产业应用价值。该标准通过定义比特流一致性、解码器一致性与编码器一致性三层测试框架，为JPEGPleno体系内各编解码器实现提供了客观、可复现的验证手段，有力保障了不同厂商设备间的互操作性与产品质量。报告同时介绍了该标准的主要起草单位及技术组织，并对标准未来在沉浸式媒体、文化遗产数字化、工业视觉检测等领域的应用前景进行了展望。关键词JPEGPleno；一致性测试；阻燃图像编码；光场成像；全息显示；国际标准；ISO/IEC21794Keywords:JPEGPleno;Conformancetesting;Plenopticimagecoding;Lightfieldimaging;Holographicdisplay;Internationalstandard;ISO/IEC217941引言1.1标准化背景数字成像技术经历了从黑白到彩色、从静态到动态、从平面到立体的演进历程。近年来，随着计算摄影、VR/AR（虚拟现实/增强现实）、数字全息显示等技术的快速成熟，业界对成像系统提出了新的需求——不仅要记录场景的二维投影，更要捕捉光线的方向、相位、视差等完整光场信息。这类多维光学信息被统称为“阻燃图像”（PlenopticImage），其数据量较传统图像呈数量级增长，对压缩编码技术提出了前所未有的挑战。在此背景下，国际标准化组织ISO/IECJTC1/SC29（编码音视频对象与多媒体系统分技术委员会）下设的WG1工作组（即JPEG委员会）于2015年启动了JPEGPleno标准项目的立项论证，旨在建立一套涵盖光场、全息、点云等多种阻燃视觉数据类型的标准化压缩框架。JPEGPleno标准体系由多个部分构成，其中一致性测试部分（Part3）是确保整个标准体系可实施、可验证、可互通的基石。1.2一致性测试的意义-互操作性：确保不同厂商的编码器生成码流可被任意符合标准的解码器正确解码；-产品质量：为编码器/解码器开发提供验证基准，帮助开发者发现实现缺陷；-公平竞争：建立统一的性能评价体系，促进良性市场竞争；-用户信任：为终端用户选用符合标准的设备提供权威依据。1.3标准基本信息-标准编号：ISO/IEC21794-3:2021-标准名称：信息技术——阻燃图像编码系统（JPEGPleno）——第3部分：一致性试验-英文名称：Informationtechnology—Plenopticimagecodingsystem(JPEGPleno)—Part3:Conformancetesting-发布机构：ISO/IECJTC1/SC29（由国际电工委员会/IEC与ISO联合发布）-发布日期：2021年12月20日-标准状态：现行-标准语种：英语2JPEGPleno标准体系概述2.1JPEGPleno整体架构JPEGPleno标准体系（ISO/IEC21794系列）从架构设计上采用了“主标准+子标准”的分层结构。其中：-ISO/IEC21794-1：定义JPEGPleno系统的整体框架、编码流程、文件格式及元数据描述；-ISO/IEC21794-2：规定光场数据的编码格式与压缩算法；-ISO/IEC21794-3：规定一致性测试方法与验证程序（即本报告所关注的标准）；-ISO/IEC21794-4：针对全息数据的编码方案；-ISO/IEC21794-5：针对点云数据的编码方案。JPEGPleno在技术设计上并非另起炉灶，而是充分复用和扩展了JPEG家族已有的技术成果，包括JPEG2000的小波变换编码框架、JPEGXS的轻量级低延迟编码机制等，并针对阻燃图像的特殊统计特性（如极强相关性、大视差范围、非朗伯表面反射）引入了专用编码工具。2.2阻燃图像编码的技术特征阻燃图像编码不同于传统二维图像编码，其核心技术挑战包括：1.数据维度扩展：光场图像通常以4D光场函数（两个空间维度和两个角度维度）表示，全息图则涉及复数幅值编码，需要将传统编码框架推广至更高维度。2.视角间冗余消除：阻燃图像中不同视角之间存在大量重叠视觉信息，需采用基于视差补偿的预测编码策略。3.主观质量与感知一致性：不同于传统PSNR指标，阻燃图像的质量评价需兼顾多视角一致性和深度感/立体感的保真度。4.实时性能要求：VR/AR等交互式应用场景对编解码延迟提出严苛要求。2.3一致性测试在JPEGPleno体系中的定位ISO/IEC21794-3在整个JPEGPleno体系中的职能类似于“质量守门员”。没有一致性测试标准，JPEGPleno编码器/解码器的生产商将面临以下困境：技术规范中的模糊与歧义无法通过形式化方法完全消除；各实现间可能存在非预期的不兼容行为；用户无法判断一个解码器是否“足够好”。因此，Part3的制定与发布对于JPEGPleno从技术规范走向产业化应用至关重要。3ISO/IEC21794-3:2021标准内容解读3.1标准适用范围ISO/IEC21794-3:2021规定了JPEGPleno编码系统一致性测试的程序与要求。具体覆盖范围包括：-对JPEGPleno比特流的通用语法约束一致性验证；-对JPEGPleno解码器的输出保真度验证；-对JPEGPleno编码器生成的码流结构合规性验证。该标准适用于所有声称支持JPEGPleno标准的编码器、解码器及码流文件，涵盖了光场图像编码（Part2）、全息图像编码（Part4）和点云图像编码（Part5）所涉及的通用一致性测试过程。3.2一致性测试层级框架ISO/IEC21794-3:2021的核心内容围绕三个递进的测试层级展开：3.2.1第一层：比特流一致性（BitstreamConformance）该层级测试旨在验证给定的JPEGPleno比特流是否严格符合标准规定的语法和语义要求。具体测试内容包括：-起始码与标记段检测：验证码流中包含正确的起始码序列、标记段结构，符合ISO/IEC21794-1规定的封装格式；-参数集完整性检查：验证解码所需的所有参数集（包括序列参数集、帧参数集、切片参数集等）在比特流中被正确且完整地携带；-语法元素范围约束：检查码流中各语法元素的取值是否在标准规定的有效范围内；-参考图像管理一致性：对于涉及帧间预测的编码模式，验证参考图像列表构建和管理的逻辑一致性。3.2.2第二层：解码器一致性（DecoderConformance）该层级测试聚焦于解码器实现的行为正确性。标准规定了以下核心测试方法：-基准比特流测试：标准提供一组“基准解码测试比特流”，解码器必须能够对所有基准比特流实现正确解码，且输出与标准提供的参考解码器输出逐比特一致；-误差鲁棒性测试：向比特流中注入可控的比特错误（如误码、丢包），验证解码器的错误隐藏与容错机制是否符合标准的“最优努力”要求；-全范围参数测试：使用覆盖标准规定参数空间边界的测试比特流，验证解码器在所有合法参数组合下均能正常解码；-输出精度测试：对解码输出的像素精度（如8bit、10bit、12bit）和色彩空间转换（如YCbCr到RGB）进行误差容限验证。3.2.3第三层：编码器一致性（EncoderConformance）编码器一致性测试是所有图像编码标准中最具挑战性的部分，因为编码器的输出与输入内容、编码参数及率失真优化策略密切相关。ISO/IEC21794-3:2021采用了以下策略：-编码器输出合规性（HRD一致性）：验证编码器生成的比特流满足标准规定的假设参考解码器（HRD）缓冲区模型约束，即码率变化不导致解码缓冲区上溢或下溢；-编码器输出可解码性：验证编码器生成的比特流可被符合标准的解码器成功解码，且解码输出满足一定的质量要求；-编码器重构质量验证：对标准定义的测试图像序列进行编码，验证编解码后的重构质量（以PSNR或主观质量指标衡量）不低于标准规定的质量下限。3.3测试比特流与参考软件ISO/IEC21794-3:2021的一个重要特征是提供了官方测试比特流集和参考解码软件。这些材料构成了标准不可分割的一部分，以电子附件方式随标准文本一同分发。测试比特流覆盖了以下典型场景：-不同分辨率等级（如1K、2K、4K、8K光场图像）-不同光场配置（密集视角阵列、稀疏视角阵列、微透镜阵列型光场相机）-不同编码配置（无损、近无损、有损；不同率点）-不同色彩格式（单色、4:2:0、4:2:2、4:4:4）参考软件作为“标准一致性锚点”具有重要地位——任何声称支持JPEGPleno的设备，其解码输出需要与参考软件的输出进行一致性比对。3.4一致性声明与认证流程标准还规定了符合性声明（ConformanceStatement）的格式和内容要求。一个完整的符合性声明应包含：-实现的类型（编码器、解码器、或两者兼具）-支持的配置文件和级别-已通过的测试套件列表-测试环境（硬件平台、操作系统、编译器版本等）-已知偏差和限制说明该声明机制为用户选择产品和系统集成提供了充分的决策依据。4标准主要起草单位与工作组织4.1ISO/IECJTC1/SC29/WG1（JPEG委员会）ISO/IEC21794-3:2021由ISO/IECJTC1/SC29/WG1即“JPEG委员会”负责制定。JPEG委员会是国际标准化领域最具影响力的图像编码标准组织之一，自1986年成立以来已发布了包括JPEG1、JPEG2000、JPEGXR、JPEGXS、JPEGXL、JPEGPleno、JPEGAI等一系列里程碑式标准。委员会汇聚了来自全球约30个国家的专家，涵盖学术界、工业界和研究机构的代表，通过严谨的标准化工作流程（包括需求收集、技术评估、核心实验、协作测试、草案评审等阶段）推进各项标准。4.2主要起草单位介绍——NokiaTechnologies在ISO/IEC21794-3:2021的制定过程中，芬兰NokiaTechnologies（诺基亚科技）作为JPEG委员会的积极成员单位，在一致性测试框架设计和验证方法研究方面发挥了重要推动作用。诺基亚科技是诺基亚集团旗下负责技术研发与专利许可的全资子公司，总部位于芬兰埃斯波，在多媒体编码、通信协议及沉浸式媒体技术领域拥有深厚的技术积累。长期以来，诺基亚专家在JPEG委员会中担任多个关键角色，包括工作组主席、编辑（Editor）和项目联合负责人等。在JPEGPleno标准项目推进过程中，诺基亚科技重点贡献了以下技术方案：-测试流程框架设计：诺基亚专家基于其在视频编码标准（如H.264/AVC、H.265/HEVC）一致性测试方面的丰富经验，为JPEGPlenoPart3引入了层次化的测试流程框架，使一致性验证的可操作性和工作效率得到提升。-参考软件架构建议：诺基亚提出了模块化参考软件架构方案，将核心解码模块与工具模块解耦，便于不同实现进行模块级一致性比对。-性能评估方法：诺基亚推动建立了面向光场图像的主观质量评价协议，将感知质量纳入编码器一致性评估体系。诺基亚科技的技术团队在标准化工作中秉持“开放、协作、严谨”的原则，与来自其他国家的专家紧密配合，确保标准的科学性、完备性和可实施性。4.3联合编辑与协作单位除了诺基亚科技外，ISO/IEC21794-3:2021的制定还汇聚了包括来自日本、美国、中国、法国、韩国等国标准化机构在内的多方力量。其中，日本庆应义塾大学、法国电信研究院（OrangeLabs）、美国惠普实验室等机构在光场数据特性分析、测试比特流设计等方面做出了重要贡献。中国电子技术标准化研究院也积极参与了该标准的讨论和评审工作，并推动JPEGPleno与国内超高清视频产业需求的对接。5标准的技术难点与创新点5.1多维数据一致性验证的挑战与传统的二维图像编码一致性测试不同，JPEGPleno的一致性测试需要处理高维数据结构带来的复杂性。对于光场图像，解码输出是包含数十乃至数百个视角图像的数据集；对于全息图，输出则是复数域数据。针对多维数据的特性，ISO/IEC21794-3:2021提出了以下创新性解决方案：-逐视角/逐平面误差度量：将高维输出拆分为多个二维投影面，分别计算误差指标后进行聚合评价；-感知加权策略：对中心视角（通常为视觉关注重点）赋予更高权重，边缘视角权重递减，以贴近人类视觉系统的感知特性；-多级容限机制：为不同应用场景（如无损存档、有损传输、实时预览）定义不同层级的一致性容限范围。5.2编码工具可选项的一致性处理JPEGPleno标准包含了多种编码工具和配置选项。不同实现可能启用不同的工具组合，如何在如此大的灵活性空间内保证互操作性，是标准制定面临的突出问题。Part3的应对策略包括：-配置文件（Profile）与级别（Level）机制：标准明确定义了若干配置文件和级别，每个配置对应一组特定的工具组合和参数范围，一致性测试严格限定在特定配置／级别框架内进行；-工具启用标记检查：测试比特流中包含了专门用于检测解码器是否正确响应编码工具启用标记的测试用例。5.3与JPEG家族标准的兼容性6标准应用与产业影响6.1应用领域ISO/IEC21794-3:2021发布以来，已在以下领域发挥重要的指导和规范作用：-沉浸式媒体与VR/AR产业：光场相机和光场显示器制造商依据该标准验证产品互操作性，用户无需担心内容与设备的不兼容；-文化遗产数字化保护：博物馆和文化遗产机构采用JPEGPleno对珍贵文物进行全息记录和光场存档，一致性测试确保数字存档的可长期读取性；-医学影像与远程诊断：全息医学影像系统利用JPEGPleno编码实现高保真三维显示，Part3的一致性验证为医疗器械的合