ISOIEC 19075-82021 信息技术数据库语言.SQL技术报告.第8部分多维数组（SQLMDA）标准立项发展报告

信息技术数据库语言SQL技术报告第8部分：多维数组（SQL/MDA）标准立项发展报告StandardizationDevelopmentReport:Informationtechnology-GuidancefortheuseofdatabaselanguageSQL-Part8:Multidimensionalarrays摘要随着遥感观测、医学影像、地球科学、金融风控及工业物联网等领域的迅猛发展，多维数组（MDA）数据已成为大数据生态中不可或缺的核心数据类型。然而，传统关系型数据库管理系统（RDBMS）在存储和查询多维数组数据时长期面临语义缺失、语法碎片化和跨系统互操作困难等瓶颈。为系统性地解决上述问题，国际标准化组织（ISO）与国际电工委员会（IEC）联合发布了ISO/IEC19075-8:2021《信息技术数据库语言SQL技术报告第8部分：多维数组（SQL/MDA）》。该标准以ISO/IEC9075（SQL标准）系列为基础，系统阐释了SQL/MDA扩展的语法框架、操作语义、嵌入方式及应用约束，为数据库厂商在关系引擎中实现数组数据类型（ArrayTypes）、数组表达式（ArrayExpressions）和面向数组的聚合与窗口操作提供了权威指引。本报告系统梳理了该标准的立项背景、编制过程、核心技术内容、主要参与单位及推广应用前景，旨在为国内数据库领域的技术研发、标准制定和产业实践提供参考与借鉴。关键词：SQL/MDA；多维数组；数据库语言；ISO/IEC19075；标准化；大数据管理；数组查询Keywords:SQL/MDA;MultidimensionalArrays;DatabaseLanguage;ISO/IEC19075;Standardization;BigDataManagement;ArrayQuery1引言1.1立项背景进入21世纪第三个十年，全球数据规模呈现指数级增长态势。据国际数据公司（IDC）预测，2025年全球数据总量将达到175ZB，其中非结构化与半结构化数据占比超过80%。在这些数据中，以遥感影像栅格、医学CT/MRI扫描数据、地震波数据、气候模式输出、高光谱数据、金融时序面板数据以及工业传感器阵列数据为代表的多维数组数据，构成了科学计算与行业应用的基础性数据形态。多维数组数据具有维度高、规模大、时空关联性强、语义丰富等特点。传统关系模型以二维表为核心，虽然具备成熟的事务处理能力和标准化查询语言（SQL），但在表达和计算多维数组数据时存在以下结构性缺陷：1.语义鸿沟：关系模型缺乏对数组维度、坐标轴、切片、分块（tiling）等语义的原生建模能力；2.语法碎片化：各大数据库厂商分别以自定义扩展（如PostgreSQL的ArrayType、Oracle的VARRAY、SciDB的自有查询语言）支持数组操作，缺乏统一语法；3.互操作困难：不同系统间的数组数据交换和查询逻辑迁移成本高昂；4.性能优化无标准可依：数组数据的物理存储、索引结构和并行计算策略缺少标准化指导。在此背景下，国际标准化组织ISO/IECJTC1/SC32（数据管理与交换分技术委员会）于2015年前后启动了SQL标准中多维数组支持的研究工作，经过多年论证与编写，最终形成ISO/IEC19075-8:2021技术报告。1.2编制过程ISO/IEC19075-8:2021是ISO/IEC19075系列技术报告的第8部分。该系列旨在为SQL标准的使用提供指导性说明，涵盖SQL标准中的各类特性。第8部分的编制过程经历了以下主要阶段：-2016年—2017年：SC32/WG3（数据库语言工作组）成立专门研究小组，调研主流数据库系统的数组扩展技术方案，收集行业需求；-2018年—2019年：起草工作草案（WorkingDraft），重点讨论数组类型定义、数组构造函数、数组元素访问、切片操作、数组聚合函数等核心语义；-2020年：进入委员会草案（CommitteeDraft）阶段，面向各国家成员体征求意见，修改完善；-2021年9月：正式发布为ISO/IEC19075-8:2021。该标准的制定遵循了ISO/IECJTC1的快速程序（Fast-track）与正常程序相结合的方式，充分吸收了对SQL/MDA标准提案（ISO/IEC9075:2023中新增的Part15:MDA）的前期研究成果，保证了两者之间的兼容性和一致性。1.3标准定位ISO/IEC19075-8属于技术报告（TechnicalReport，TR）类型，其定位并非强制性的规范（NormativeSpecification），而是提供信息性指导（InformativeGuidance）。该标准重点解决以下核心问题：-解释在SQL框架中引入多维数组类型的动机与设计原则；-定义数组类型系统的抽象语法和操作语义；-阐明SQL/MDA与既有SQL特性（如用户定义类型UDT、集合操作、窗口函数）之间的关系；-为数据库实现者和应用开发者提供最佳实践指引。2标准核心技术内容2.1多维数组的抽象数据模型ISO/IEC19075-8:2021在SQL:2023（ISO/IEC9075:2023）所定义的SQL/MDA扩展基础上，给出了多维数组的规范化描述框架。该框架将多维数组抽象为一个由维度（dimension）、坐标（coordinate）和元素（element）组成的数学结构：-维度：每个维度具有坐标轴（axis）、下界（lowerbound）和上界（upperbound）；-坐标：由各维度坐标值构成的有序元组，唯一标识数组中的一个位置；-元素：存储在特定坐标位置的数据值，可以是SQL标量类型（如INTEGER、FLOAT、DOUBLEPRECISION）或用户定义类型；-分块（tiling）：将大数组划分为若干子数组（tile/subarray），以优化存储和并行查询性能。该抽象模型既覆盖了稠密数组（densearray），也支持稀疏数组（sparsearray），为后续的物理存储和查询优化提供了理论基石。2.2核心语法特性标准中重点阐述了以下核心语法特性：1.数组类型定义（ArrayTypeDefinition）：通过`CREATETYPE`或`CREATEDOMAIN`语句定义多维数组类型，指定元素类型和维度信息，实现维度元数据与数组值的绑定。2.数组构造函数（ArrayConstructor）：提供`ARRAY[...]`语法构造数组字面量，支持嵌套构造，可灵活生成不同维度的数组。3.数组元素访问（ElementReference）：采用`A[i][j][k]`或`A(i,j,k)`语法访问指定坐标处的元素值，支持动态索引。4.切片操作（Slicing）：支持通过省略某个维度的坐标获取子数组，形成降维操作，此特性可极大增强数据分析的处理能力。5.数组聚合函数（AggregateFunctions）：定义了`ARRAY_AGG`、`ARRAY_CONCAT`、`ARRAY_SORT`等函数，支持一条SQL语句内完成数组构建、拼接及排序等批量操作。6.数组比较与运算：定义数组类型的相等比较和排序规则，支持数组之间的关系判断与逐元素运算传播（element-wiseoperations）。7.嵌套查询与解构（Unnesting）：支持将数组展开为关系表行（`UNNEST`），实现数组数据与关系数据的无缝融合查询。2.3与SQL标准家族的协同关系ISO/IEC19075-8:2021在SQL标准体系中居于承上启下的关键位置：-向上衔接：全面支撑ISO/IEC9075:2023（SQL:2023）中新增的第15部分（SQL/MDA），对MDA的正式标准条款进行解释和示例补充；-横向协同：与ISO/IEC19075-1（SQL标准概述）、ISO/IEC19075-2（SQL/XML相关指导）、ISO/IEC19075-7（多态表函数）等系列报告协同配合，共同构建SQL技术指导体系；-向下兼容：确保基于传统关系代数优化的查询引擎在扩展数组支持后，仍能保持对既有SQL特性的完整兼容。3应用场景与行业价值3.1地理空间与遥感领域卫星遥感影像天然以多波段栅格形式存储。借助SQL/MDA，可在传统空间数据库（如PostGIS、OracleSpatial）中实现"按需像素访问"，从TB级影像中实时截取任意空间范围的波段数据，进行植被指数计算、土地利用分类等分析操作，突破了传统"先导出文件、再离线处理"的低效模式。3.2生物医学与精准医疗医学影像数据（CT、MRI、PET）是典型的三维或四维数组。SQL/MDA能够支持标准SQL语句对影像体素（voxel）级数据执行查询和统计运算，为跨机构影像数据共享与多中心临床研究提供了统一数据访问接口，降低了影像数据流通的技术门槛。3.3地球科学与气候模拟气候模式输出数据以经纬度×高度×时间为维度组织。研究人员利用SQL/MDA可直接在数据库中完成区域平均温度、极端降水阈值统计等分析，无需将数百GB数据导出至外部计算环境，显著提高了科研效率。3.4工业物联网与金融领域工业传感器阵列数据通常包含时间戳、设备ID和传感器通道三个维度。SQL/MDA允许在标准SQL框架内实现多通道时间序列的切片查询、模式匹配和异常检测。在金融领域，SQL/MDA可用于处理多维面板数据，支持投资组合的批量风险计算和压力测试。4主要参与编制单位ISO/IEC19075-8:2021的编制工作由ISO/IECJTC1/SC32/WG3数据库语言工作组主导完成。在该工作组的组织框架下，多个国际机构与企业深度参与了标准的技术方案拟定和文稿审校工作，其中代表性机构包括：美国国家标准协会（ANSI）作为SC32的积极成员体，ANSI在标准编制中发挥了关键协调作用。ANSI下属的INCITSDM32.2（数据库语言技术委员会）长期跟踪SQL标准的技术演进，在SQL/MDA的前期需求分析和与美国国内产业界的沟通协调方面做了大量工作。德国标准化协会（DIN）在数组代数理论基础和形式化语义定义方面做出了显著贡献，推动了标准中数组操作数学定义的严谨化。此外，多家国际主流数据库厂商和研究机构亦派专家参与技术方案讨论，从不同维度支撑了该技术报告的落地和未来推广。关于ANSI的进一步介绍：美国国家标准协会（AmericanNationalStandardsInstitute，ANSI）成立于1918年，是一个非营利性民间标准化组织，负责协调美国自愿性标准体系，并代表美国参与ISO和IEC等国际标准化组织的工作。ANSI自身不制定标准，而是通过认证标准制定组织（AccreditedStandardsDevelopers）来协调各专业领域的标准制定工作。在数据库领域，ANSI通过其下属的INCITS（国际信息技术标准委员会）组织协调SQL标准的美国国家立场，组织产业界与学术界专家参与SC32的国际标准制定，对SQL标准在全球范围内的推广和应用产生了深远影响。5结论与展望ISO/IEC19075-8:2021的正式发布，标志着国际标准化组织在多维数组数据管理方面迈出了体系化、标准化的重要一步。该标准以SQL/MDA为技术核心，以技术报告的形式为数据库厂商和应用开发者提供了全面、可操作的指导，弥补了SQL标准在数组数据处理领域长期存在的空白。其核心价值体现在：1.填补标准空白：首次系统地阐述了在SQL框架内支持多维数组数据的语法与语义，为产业界提供了统一的技术共识；2.降低集成成本：通过标准化的数组类型和操作接口，有效降低了异构系统间的数据交换和集成复杂度；3.促进生态成熟：为数据库产品、中间件、BI工具及科学计算平台的互操作提供了技术基础，推动整个数据管理生态的协同发展。随着SQL:2023正式纳入SQL/MDA规范（ISO/IEC9075-15），ISO/IEC19075-8所承载的指导框架将进一步促进数据库产品对MDA的兼容实现。未来，随着遥感、医学影像、科学计算等领域的深度融合，SQL/MDA有望成为多维数组数据管理的主流标准化方案。我国作为数据资源和应用大国，应积极跟进该系列标准的动态，推动国内数据库产品对SQL/MDA的适配与创新研发，提前布局下一代数据管理技术的标准话语权，在数字时代全球数据标准竞争中占据主动地位。参考文献[1]ISO/IEC19075-8:2021,Informationtechnology—GuidancefortheuseofdatabaselanguageSQL—Part8:Multidimensionalarrays(SQL/MDA),2021.[2]ISO/IEC9075:2023,Informationtechnology—Databaselanguages—SQL,2023.[3]ISO/IEC19075-1:2021,Informationtechnology—GuidancefortheuseofdatabaselanguageSQL—Pa