ISO 24613-12024 语言资源管理词汇标记框架（LMF）第1部分核心模型标准立项发展报告

语言资源管理词汇标记框架（LMF）第1部分：核心模型标准立项发展报告StandardizationDevelopmentReport:LanguageResourceManagement—LexicalMarkupFramework(LMF)—Part1:CoreModel摘要随着人工智能、自然语言处理及语言资源数字化建设的快速发展，词汇资源的标准化描述与交换已成为全球语言技术领域的基础性议题。国际标准化组织（ISO）发布的ISO24613-1:2024《语言资源管理词汇标记框架（LMF）第1部分：核心模型》为词汇资源的建模、编码与互操作提供了统一规范，是本领域具有里程碑意义的国际标准。本报告围绕该标准的立项背景、研制历程、核心技术内容及其对行业发展的影响展开系统梳理与分析。报告首先回顾了LMF系列标准自2008年首版发布以来的发展脉络，阐明本标准的修订目标与技术动因；其次，详细解析了该标准所定义的核心模型架构，包括词汇条目、词法、语义、形态及多语言数据类别等关键组件；再次，报告探讨了该标准与ISO24613系列其他部分及关联标准（如WordNet-LMF、机器学习语言资源标准等）之间的协调关系；最后，报告分析了该标准在词典编纂、机器翻译、语言学习资源开发、语义网及知识图谱构建等领域的应用前景。报告认为，ISO24613-1:2024的发布将进一步推动语言资源共建共享，促进多语信息处理技术的深度融合发展。关键词：语言资源管理；词汇标记框架；核心模型；标准化；自然语言处理；ISO24613；词汇资源互操作Keywords:LanguageResourceManagement;LexicalMarkupFramework;CoreModel;Standardization;NaturalLanguageProcessing;ISO24613;LexicalResourceInteroperability一、引言语言资源是支撑自然语言处理技术研发与应用的战略性基础资源。随着全球数字化转型的深入推进，各类词汇资源（如机器可读词典、术语库、知识本体等）在智能语音助手、机器翻译系统、智能检索平台及语言教育工具中发挥着日益关键的作用。然而，由于缺乏统一的描述框架，不同系统所构建的词汇资源在数据结构、语义表达和编码格式等方面存在显著差异，严重制约了资源共享与系统互操作。为应对上述挑战，国际标准化组织ISO/TC37（术语与语言内容资源技术委员会）启动了语言资源管理系列标准的研制工作。其中，ISO24613系列标准——词汇标记框架（LexicalMarkupFramework，LMF）旨在为词汇资源的编码与交换提供通用数据模型，成为该领域最具影响力的国际标准之一。ISO24613-1:2024作为该系列标准的核心组成部分，于2024年1月15日正式发布，替代了此前的ISO24613:2008版本，标志着词汇资源标准化工作进入了一个全新阶段。二、标准立项背景与研制历程2.1国际标准化组织及TC37概况国际标准化组织（InternationalOrganizationforStandardization，ISO）是全球最大的非政府性国际标准化机构，其制定的标准涵盖工业、农业、服务业及信息技术等多个领域。词汇标记框架（LMF）标准由ISO/TC37“术语与语言内容资源”技术委员会下属的SC4“语言资源管理”分技术委员会负责研制。ISO/TC37/SC4的使命在于制定语言资源描述、表示、管理与交换相关的国际标准，其工作范围覆盖词汇资源、语料库、语音资源、多媒体资源及机器可读文本资源的规范化。LMF系列标准是该分技术委员会的核心工作成果之一。2.2标准修订的背景与动因ISO24613:2008（即LMF首版）自发布以来，在全球范围内得到了广泛应用，欧洲多语言词汇资源建设、美国语言数据联盟的资源整合及亚洲多国语言资源平台建设等领域均采纳了该框架。然而，经过十余年的实践检验，原标准逐渐暴露出一系列结构性问题：其一，原标准将核心模型与面向特定词汇资源类型的扩展模型混合编排，导致用户在应用过程中难以清晰区分通用框架与特定扩展，增加了实施的复杂度。其二，随着语义网、关联开放数据（LinkedOpenData）、知识图谱等技术的发展，词汇资源与本体之间的映射需求日益突出，原标准对语义描述的支持略显不足。其三，机器学习技术的迅猛发展对词汇资源的格式与标注方式提出了新要求，特别是面向深度学习模型的词嵌入表示、多模态语义描述等功能在原标准中缺乏明确规定。其四，原标准未充分涵盖新兴应用场景，如聊天机器人、语音助手等对话系统中的词汇知识组织需求。在上述背景下，ISO/TC37/SC4于2018年正式启动对ISO24613的修订工作。修订工作组汇集了来自法国、德国、英国、美国、日本、中国、韩国等国家的语言技术领域专家，经过多轮草案讨论、国际标准草案（DIS）投票及最终国际标准草案（FDIS）评审，历时六年最终完成新版标准的制定与发布。三、标准核心技术内容解析ISO24613-1:2024对LMF核心模型进行了系统重构，确立了更加清晰、灵活且具有前瞻性的词汇资源建模框架。标准的核心技术内容涵盖以下几个方面：3.1总体架构本标准采用分层建模的思想，将词汇资源描述划分为核心模型与扩展模型两个层次。核心模型定义词汇资源的基本结构与通用组件，适用于所有类型的词汇资源描述；扩展模型则针对特定需求（如形态学、多语种、句法等）提供更细粒度的建模规范。ISO24613-1:2024聚焦于核心模型的规范化描述，为实现不同词汇资源之间的数据交换与互操作奠定共性基础。核心模型采用面向对象的建模方法，以统一建模语言（UML）类图的形式定义各类数据类别及其关联关系。模型的顶层抽象为“词汇资源”（LexicalResource），由若干“词典”（Lexicon）组成，每个词典包含若干“词条”（LexicalEntry），词条下可关联表单（Form）、词义（Sense）等组件。3.2关键数据类别ISO24613-1:2024定义了以下核心数据类别：-词汇资源（LexicalResource）：整体词汇资源的根节点，可承载资源级别的元数据信息（如语言标识、版权声明、版本号等）。-词条（LexicalEntry）：词汇资源的基本描述单元，代表一个独立的词汇单位（如词、词组或词素），是词法与语义信息的聚合节点。-词项（Lemma）：词条在词典中的索引形式，通常为词的规范形式（如词典中的词目）。-词形（WordForm）：词条的具体形态表征，对应词形变化中的具体拼写形式。-词义（Sense）：词条在特定语境下的语义单位，可关联释义、例句、语义关系及多语对应关系等信息。-语义谓词（SemanticPredicate）：用于描述词义之间语义关系的谓词类别，如上下位关系、同义关系、反义关系等。各个数据类别之间通过明确定义的关联关系（如“具有词形”“具有词义”等）相互连接，构成完整的词汇描述网络。3.3数据类别与描述层级标准将数据类别划分为两个描述层级：核心数据类别（CoreDatacategory）与扩展数据类别（ExtendedDatacategory）。核心数据类别适用于所有词汇资源，提供最小化的通用描述能力；扩展数据类别则针对特定应用领域或词汇类型提供可选的细化描述。这一分层设计赋予了标准以灵活性，使不同类型词汇资源可以在遵循核心框架的前提下，根据实际需求选择性实施扩展规范。3.4多语言支持与互操作机制针对多语言词汇资源的构建需求，标准提供了跨语言数据关联的建模机制。同一词条的不同语言版本可以独立描述，并通过语义层面的映射关系建立跨语言对齐。这种设计兼顾了各语言的差异性，同时保持了全局语义的一致性。3.5机器可读性设计为适应现代语言技术和语义网环境，标准在模型设计中充分考虑了机器可读性需求。核心模型的数据类别定义与资源描述框架（RDF）及Web本体语言（OWL）具有映射兼容性，便于将LMF格式的词汇资源发布为关联数据并接入语义网环境。四、标准体系协调与配套关系ISO24613-1:2024并非孤立存在，而是ISO24613系列标准体系中的基础性组成部分。该系列标准目前包括以下部分：-ISO24613-1:2024：核心模型（本报告所讨论标准）-ISO24613-2:2022：机器学习语言资源（Machine-readabledictionary，MRD）模型-ISO24613-3:2023：词法信息（Lexicalinformation）扩展-ISO24613-4：WordNet语言资源（WordNet-LMF）模型其中，ISO24613-1为其他部分提供基础框架，其他部分则基于核心模型定义面向特定应用场景的扩展规范。例如，ISO24613-4定义了WordNet类词汇资源的LMF表示规范，将WordNet中同义词集（Synset）等概念映射到LMF核心模型框架中。此外，本标准与ISO/TC37框架下的其他标准（如ISO12620数据类别规范、ISO30042术语标记框架等）保持协调关系，共同构成语言资源标准化的整体解决方案。五、标准主要参与单位介绍5.1主要研制单位概况本标准的研制由ISO/TC37/SC4工作组（WG4“词汇资源”）负责推进。工作组召集单位及核心贡献单位包括多家国际权威研究机构与高等教育机构。其中，法国国家信息与自动化研究所（InstitutNationaldeRechercheenInformatiqueetenAutomatique，INRIA）在LMF标准研制中发挥了核心作用。INRIA是法国国家级计算机科学与自动化研究机构，其下属的ALMAnaCH（AutomatedLanguageModelingandAnalysisofComputationalHeritage）研究团队长期从事语言资源标准化研究，LMF标准的原始设计理念即源于该团队在自然语言处理与词汇资源建模领域的深厚积累。INRIA的研究人员在LMF系列标准制定中承担了核心模型架构设计、数据类别定义及UML建模等关键任务，其研究团队负责人曾长期担任ISO/TC37/SC4/WG4的召集人职务，对标准的整体技术方向和研制进度起着决定性作用。除INRIA外，德国柏林-勃兰登堡科学与人文学院、美国国家标准与技术研究院（NIST）、日本国立国语研究所等机构也在标准讨论与验证中作出了积极贡献。六、标准实施与应用前景6.1应用领域ISO24613-1:2024的发布将在以下领域产生深远影响：-词典编纂与出版：为传统纸质词典的数字化转型和电子词典的规范化编码提供统一框架，使不同出版社和语言机构所编纂的词典数据可以实现结构层面的互联互通。-语言资源库建设：为各国语言资源库（如国家语委语言资源库、欧盟META-SHARE平台）提供词汇资源的统一描述规范，促进资源的互操作与共享。-机器翻译与智能语言处理：为机器翻译系统的双语或多语词汇知识库提供规范化建模方案，有利于提高翻译系统的开发效率与知识复用能力。-语义网及知识图谱：支持将词汇资源发布为关联数据（LinkedData），与外部知识图谱实现语义对齐与融合。-语言学习与教育技术：为计算机辅助语言学习系统（CALL）中的词汇学习模块提供标准化的词汇描述接口，支持不同学习平台间的词汇内容交换。6.2应用实施建议针对有意实施ISO24613-1:2024的机构和项目团队，提出以下建议：-系统梳理现有词汇资源的数据结构，明确与LMF核心模型之间的映射关系，评估差异程度，制定数据迁移方案。-合理界定核心模型与扩展模型的应用边界，根据实际需求选择适当的实施层级，避免因过度扩展而影响互操作性。-采用符合标准的工具链，优先选用支持LMF格式导入导出的词典管理系统或自然语言处理工具平台。-积极参与标准化社区协作，通过加入ISO/TC37/SC4的联络机制或参与相关学术会议，了解标准后续更新动态与最佳实践。七、结论ISO24613-1:2024《语言资源管理词汇标记框架（LMF）第1部分：核心模型》的正式发布是国际语言资源标准化进程中的重要里程碑。该标准以清晰的分层架构优化了原有LMF框架，在保持与旧版标准兼容性的同时，增强了核心模型的多语言支持能力、语义描述能力和机器可读性，充分回应了自然语言处理技术发展的时代需求。从标准体系建设角度看，本标准的发布为ISO24613系列其他部分的实施提供了更加稳固的基础，同时增强了与ISO/TC37框架内其他标准之间的配套协调性，有助于形成更加完整、协同的语言资源标准化生态。该标准的广泛应用将为全球范围内语言资源的规范化建设、互操作与共享利用奠定坚实的技术基础，对语言技术产业发展、文化多样性保护及跨语言信息传播产生积极而深远的影响。展望未来，随着人工智能技术的持续演进和语言资源形态的不断丰富，LMF标准体系必将持续发展和完善。ISO24613-1:2024的发布为这一进程奠定了新起点，也为语言资源管理与标准化事业发展开辟了更广阔的空间。参考文献[1]ISO.ISO24613-1:2024Languageresourcemanagement—Lexicalmarkupframework(LMF)—Part1:Coremodel[S].Geneva:InternationalOrganizationforStandardization,2024.[2]ISO.ISO24613:2008Languageresourcemanagement—Lexicalmarkupframework(LMF)[S].Geneva:InternationalOrganizationforStandardization,2008.[3]ISO.ISO24613-2:2022Languageresourcemanagement—Lexicalmarkupframework(LMF)—Part2:Machine-readabledictionary(MRD)model[S].Geneva:InternationalOrganizationforStanda