ISOIEC 19075-82021 信息技术数据库语言SQL使用指南第8部分多维数组标准立项发展报告

信息技术数据库语言SQL使用指南第8部分：多维数组标准立项发展报告StandardizationDevelopmentReport:Informationtechnology—GuidancefortheuseofdatabaselanguageSQL—Part8:Multidimensionalarrays摘要随着大数据、科学计算和人工智能技术的快速发展，多维数组作为数据密集型应用的核心数据结构，其高效存储与查询需求日益凸显。传统关系型数据库在处理多维数组数据时存在明显的建模复杂性和查询性能瓶颈。在此背景下，国际标准化组织（ISO）于2021年9月正式发布了ISO/IEC19075-8:2021《信息技术数据库语言SQL使用指南第8部分：多维数组》，该标准作为SQL标准系列的重要补充文件，系统阐述了SQL中多维数组的概念模型、类型定义、构造方法、元素访问及操作语义。本报告对该标准的立项背景、编制过程、核心技术内容和应用价值进行了系统分析。报告指出，该标准的发布填补了SQL语言在多维数组支持方面的标准化空白，为数据库厂商实现数组扩展功能提供了权威参考，同时也为科学数据管理、地理信息系统、金融风险分析等领域的数据处理实践提供了规范化指引。该标准的实施将有力推动SQL语言在非传统数据管理场景中的扩展应用，促进数据库技术与科学计算领域的深度融合。关键词：SQL语言；多维数组；数据库标准；ISO/IEC19075；数组类型；查询语言扩展Keywords:SQLlanguage;Multidimensionalarrays;Databasestandards;ISO/IEC19075;Arraytypes;Querylanguageextension一、引言1.1立项背景结构化查询语言（SQL）自20世纪70年代诞生以来，经过数十年的发展和完善，已成为关系型数据库管理系统的通用标准语言。ISO/IEC9075系列标准系统地规定了SQL语言的语法、语义及实现要求，为数据库产品的互操作性和可移植性提供了根本保障。然而，传统SQL标准的设计主要面向以行和列为基础的关系数据模型，在处理科学计算、遥感影像、气象预报、基因组学等大规模数组型数据时暴露出显著的表达能力和性能缺陷。多维数组（MultidimensionalArray）作为科学计算领域最基本的数据组织方式，以其天然的维度结构和高效的索引访问特性，在数据密集型应用中扮演着不可替代的角色。美国国家超级计算应用中心（NCSA）提出的NetCDF格式和HDFGroup开发的HDF5格式等自描述数组数据格式在科学界已被广泛采用，但这些格式与主流关系数据库管理系统之间存在明显的数据隔离鸿沟，导致科学数据管理与业务数据管理长期处于割裂状态。为弥合这一鸿沟，ISO/IECJTC1/SC32（数据管理与交换分技术委员会）启动了SQL多维数组标准的制定工作，旨在将数组类型有机融入SQL框架体系。1.2标准定位与意义ISO/IEC19075-8:2021并非对SQL核心标准的替换或修订，而是作为SQL标准系列的"使用指南"（Guidance）部分，为开发人员、数据库厂商及标准实现者提供多维数组相关的概念性说明和技术指导。参见图1所示的ISO/IEC19075系列标准结构。该系列标准的独特价值在于，它不对语法做出强制规定，而是从语义层面阐明SQL标准中数组相关特性的设计意图和使用模式。对于数据库厂商而言，该指南有助于统一对标准条款的理解，减少产品实现中的语义偏差；对于应用开发者而言，该指南提供了解决实际问题的模式化方法，降低了标准文本阅读和理解的复杂度。二、标准编制过程与组织架构2.1制定机构本标准由ISO（国际标准化组织）与IEC（国际电工委员会）下属的联合技术委员会JTC1（信息技术委员会）负责制定，具体由SC32分技术委员会（数据管理与交换）主导实施。SC32的工作范围涵盖数据管理、数据交换以及数据互操作性等关键领域，其下设的WG3（数据库语言工作组）直接承担SQL系列标准的维护与开发工作。参与本标准制定的专家来自全球主要数据库技术强国和领先企业，包括美国、英国、德国、中国、日本等国家的标准化机构代表，以及Oracle、Microsoft、IBM、SAP等数据库产业界的资深技术专家。标准文本经过多轮工作组会议讨论、委员会审查（CD）、国际标准草案投票（DIS）及最终国际标准草案投票（FDIS）等严格程序，最终于2021年9月1日正式发布。2.2主要参与单位介绍中国电子技术标准化研究院（CESI）是本标准制定过程中活跃的参与单位之一。作为中国信息技术领域权威的国家级标准化研究机构，CESI长期跟踪并参与ISO/IECJTC1/SC32数据库国际标准的制修订工作，承担着将国际标准转化为中国国家标准（GB/T）的技术归口职责。在ISO/IEC19075-8的编制过程中，CESI组织国内数据库领域专家学者对多维数组标准化的需求进行深入研究，结合中国在科学数据管理、地理信息处理等领域的应用实践，向国际工作组提交了多项有价值的贡献文件和修改建议，推动了标准文本中有关数组元素寻址规则和维度边界处理等技术条款的完善。此外，CESI还积极推动ISO/IEC19075-8标准在中国的落地应用，组织编写标准解读材料，开展标准宣贯培训，为国内数据库厂商和应用单位理解和实施该标准提供了有力的技术支撑。三、标准核心内容解析3.1多维数组的概念框架ISO/IEC19075-8:2021开篇系统定义了多维数组的概念框架，阐述了数组作为SQL中的一种原子数据类型（atomicdatatype）的定位。该标准明确，多维数组是由相同数据类型元素组成的n维结构体，每一维度具有独立的长度定义和取值边界。数组的维度数量（即秩）可以是静态固定的，也可以根据数据的实际存储需要动态确定。标准中严格区分了"数组类型定义"（ArrayTypeDefinition）与"数组实例"（ArrayInstance）两个层次的概念：前者描述数组的结构模板（包括元素类型、维度数和各维度长度），后者则是满足类型定义的具体数据结构。这一概念划分为SQL中数组变量的声明和操作提供了清晰的语义基础。3.2数组类型与构造方法在类型体系层面，该标准详细说明了如何在SQL中声明数组类型，包括元素类型（如数值型、字符型、用户自定义类型等）、数组维度数的指定方式以及维度的边界定义规则。标准特别强调了空数组（zero-lengtharray）的合法性以及数组中空元素（arrayelementnull）与数组本身为空的语义区别，这一区分对数据完整性和查询正确性具有重要的实践意义。在数组构造方面，标准系统介绍了多种数组值的创建途径，包括构造器函数（constructorfunction）、查询结果聚合、以及通过数组字面量直接指定等。这些构造方法为应用程序中数组数据的生成提供了灵活的语法选项。标准通过代码示例详细描述了嵌套数组（即元素本身也是数组）的构造和访问方式，为多维数组的实现提供了直接的技术参照。3.3数组操作语义标准对数组的核心操作语义进行了系统性阐释，涵盖以下关键操作类别：-元素访问：通过下标表达式定位和提取数组中的单个元素，支持按行优先规则进行的多维寻址；-切片操作：获取数组某一维度上的连续子序列，生成新的数组值，用于数据的局部提取和分析；-维度属性查询：获取数组的维度数量、各维度长度、元素类型等元数据信息，支持对数据结构的动态感知；-数组连接：将一个或多个数组拼接形成新的数组，支持不同维度方向上的扩展；-遍历与聚合：结合SQL查询语言的能力，对数组元素进行集合级操作，如求和、求均值、极值搜索等。标准还特别讨论了数组值与关系表之间的转换方法，包括将数组"展开"（unnesting）为一组行记录以及将查询结果"聚合"（aggregating）为数组值的操作模式。这一机制为传统关系数据和数组格式数据之间的互操作提供了标准的、规范化的桥梁，是实现统一数据管理的关键路径。3.4与SQL标准体系中其他部分的关系ISO/IEC19075-8:2021作为19075系列的组成部分，在内容组织上既保持了自身的独立性，又与其他部分形成了互文参照的关系。该标准与ISO/IEC9075-2:2016（SQL基础/通用特性）中关于数组类型的定义紧密衔接，对后者中较为抽象和简略的定义提供了详细的使用指导和语义解读。同时，该标准也参考了ISO/IEC9075-14:2016中关于XML数据类型的处理方式，在数组与XML文档的映射方面提供了指导性说明。四、标准的应用价值与影响4.1对不同用户群体的价值数据库管理系统开发商：该标准为在数据库产品中实现数组类型支持提供了清晰的语义指导，有助于减少各产品之间在数组处理行为上的差异，提升SQL标准的一致性实现水平。厂商可依据标准中丰富的示例和解释性内容，降低测试用例设计的难度，提高开发效率。数据库应用开发人员：借助该标准，开发人员可以正确理解SQL中数组类型的语义边界和限制条件，减少因误用而产生的程序缺陷。标准中提供的代码示例和模式化解决方案，为常见数组操作需求提供了"开箱即用"的参考实现。数据架构师与数据科学家：该标准为在关系数据库环境中存储和处理大规模科学数据集提供了方法论支持。通过将数组数据与业务数据纳入同一数据库管理框架，可以显著简化数据管道的复杂度，消除数据转换环节中的碎片化问题，提升数据分析工作的整体效率和数据质量。4.2支撑的关键应用领域-气象与地球科学：气象观测数据和气候模型输出通常以多维数组形式组织（经度×纬度×高度×时间），该标准为这些数据在SQL数据库中的直接存储和高效查询提供了标准化途径；-地理信息系统（GIS）：遥感影像数据和数字高程模型天然以多维栅格格式存在，标准支持对这些数据类型的结构化访问和分析操作；-金融风险管理：金融衍生品定价和风险计量中的情景模拟数据（情景×时间×资产类别）可采用标准化的数组表示，提升计算和回测的效率；-生物信息学：基因表达谱数据和蛋白质结构数据等多维数据集可借助该标准实现与临床数据的一体化管理。4.3与新兴技术趋势的衔接随着人工智能和机器学习技术的蓬勃发展，向量数据库和嵌入（Embedding）技术成为数据库领域的热门方向。多维数组作为向量数据的基本载体，ISO/IEC19075-8所规范的数组操作语义为SQL数据库扩展向量检索能力提供了基础性支撑。各数据库厂商在实现AI相关功能时，可以参照该标准所确立的数组模型作为语义基础，在增强功能的同时保持与核心SQL标准的一致性。五、结论与展望ISO/IEC19075-8:2021的正式发布标志着SQL语言在多维数据处理领域迈出了标准化的关键一步，填补了SQL标准体系在数组类型支持方面的空白。该标准以使用指南的形式，有效搭建了SQL抽象语法与实际应用之间的桥梁，为数据库产品的研发和数据库应用的构建提供了不可或缺的技术依据。展望未来，多维数组标准化工作仍有广阔的发展空间：一方面，随着各主流数据库产品陆续实现对数组类型的原生支持，业界对于数组索引结构、数组持久化存储格式、数组并发访问控制等方面将提出更高层次的标准化需求；另一方面，随着SQL标准继续向后兼容演进的趋势，将数组与JSON、XML等半结构化数据类型的无缝互操作也将成为下一阶段标准化工作的重点方向。中国作为全球数据库产业最具活力的市场之一，应当持续加大对该国际标准的跟踪和参与力度，积极推进同等采用为国家标准的工作，推动国内数据库产品在数组处理能力方面的技术升级，助力构建自主可控的数据库产业生态，为全球数据管理标准化事业贡献中国智慧和中国方案。参考文献[1]ISO/IEC19075-8:2021,Informationtechnology—GuidancefortheuseofdatabaselanguageSQL—Part8:Multidimensionalarrays[S].Geneva:ISO/IEC,2021.[2]ISO/IEC9075-2:2016,Informationtechnology—Databaselanguages—SQL—Part2:Foundation(SQL/Foundation)[S].Geneva:ISO/IEC,2016.[3]ISO/IEC9075-14:2016,Informationtechnology—Databaselanguages—SQL—Part14:XML-RelatedSpecifications(SQL/XML)[S].Geneva:ISO/IEC,2016.[4]InternationalOrganizationforStandardization.ISO/IECJTC1/SC32