T-CESA《多模态模拟诊疗行为感知系统参考架构》编制说明

中国电子工业标准化技术协会

团体标准《多模态模拟诊疗行为感知系统参考架构》

（征求意见稿）编制说明

一、工作简况

1.任务来源

根据中国电子工业标准化技术协会公布的2024年第六批团体标准制修订项

目的通知（中电标通〔2024〕017号），团体标准《多模态模拟诊疗行为感知系

统参考架构》由中国电子技术标准化研究院发起并主办，由中国电子技术标准

化研究院、中国电子工业标准化技术协会归口，项目编号为：CESA-2024-102。

2.标准编制的主要成员单位

本文件的编制组由发起单位中国电子技术标准化研究院及主要参与起草单

位复旦大学、长春博立电子科技有限公司、复旦大学附属儿科医院、季华实验室、

清华大学、浙江大学医学院附属儿童医院、上海交通大学医学院附属上海儿童医

学中心、光华临港工程应用技术研发（上海）有限公司、北京协和医院等单位组

成。主要起草人中李伟、耿力、王文峰、张立华、温志庆主要负责标准的草案编

制和编制讨论会的组织，苏柳桢、熊本竹、杨晓东主要负责标准的修改反馈整理

工作，卢宇蓝、宋先辉主要负责标准的验证工作，其他起草人参与标准编制讨论

会并提供标准意见。

3.主要工作过程

2022年5月，为讨论多模态模拟诊疗感知系统领域标准需求，来自电子标准

院、复旦大学、清华大学、季华实验室等多家单位的代表参加了多模态模拟诊疗

感知系统标准化需求分析会议。与会代表交流讨论多模态模拟诊疗感知系统技术

现状，根据科技部的科技创新2030“新一代人工智能”重大项目《标准化儿童患

者模型关键技术与应用》研究内容，调研情况，提出制定本标准。

2022年9月，电子标准院与复旦大学、长春博立电子科技有限公司、复旦大

学附属儿科医院、季华实验室、清华大学等多家单位召开了多模态模拟诊疗感知

系统参考架构标准研制交流会，针对本标准内容展开讨论，并讨论了目前多模态

中国电子工业标准化技术协会

模拟诊疗感知系统的应用场景和产品现状。会后，参会专家对标准草案提出修改

建议，编制组根据专家建议修改形成新的草案。

2023年4月，电子标准院完善标准草案并提交内审，内审专家审核了标准与

项目任务书的关联度以及系列标准的关联性，标准通过内审。会后按照专家意见，

编制组修改标准草案，形成新一版草案内容。

2023年10月，标准任务所属的科技创新2030“标准化儿童患者模型关键技术

与应用”项目召开项目组会，会议上针对标准内容进行了讨论，并建议在架构中

体现业务流程模块等相关内容。会后编制组完善修改了标准草案。

2024年6月，标准任务所属的科技创新2030“标准化儿童患者模型关键技术

与应用”项目课题召开相关会议，会议上针对多模态模拟诊疗数据的特征提取与

融合内容进行了讨论，并建议在融合部分强调分级融合。会后编制组完善修改了

标准草案。

2024年7月，经过与复旦大学、清华大学、季华实验室等单位的专家进一步

的讨论，建议编制组将多模态模拟诊疗感知系统参考架构进一步调整为数据采

集、特征融合识别、识别结果几个部分，对每个部分进行多模态数据的介绍，在

组内针对专家意见召开讨论会，并根据专家意见修改标准内容，形成标准征求意

见稿。

二、标准编制原则和确定主要内容的论据及解决的主要问题

1.编制原则

本文件主要内容按照GB/T1.1—2020给出的规则起草。文件编制遵循“科学

性、实用性、统一性、规范性”的原则。按照中国电子工业标准化技术协会标准

制修订工作程序的要求开展工作。

2.确定主要内容的依据

本文件主要规定系统的参考架构，便于系统的研发和生产。术语的制定，参

考GB/T40687-2021《物联网生命体征感知设备通用规范》、GB/T21023-2007中

文语音识别系统通用技术规范、GB/T36464.1-2020信息技术智能语音交互测试

方法第1部分：语音识别。

3.解决的主要问题

基于多模态数据的模拟诊疗行为感知技术在医护人员培训等方面发挥重要

中国电子工业标准化技术协会

作用。受益于增强现实、虚拟现实、模式识别等相关技术的高速发展，多模态模

拟诊疗行为感知系统在诊疗培训、医学教育等相关领域取得了显著的成果。目前，

基于多模态数据的模拟诊疗行为感知技术正处于研究阶段，行业应用规模相对较

小，存在感知系统的形式多样、感知的数据模态多样、感知系统的功能差异大等

问题，不利于基于多模态数据的模拟诊疗行为感知系统的开发、应用和推广，需

研制基于多模态数据的模拟诊疗行为感知系统相关标准对该领域进行引导和规

范。

本文件提出了多模态模拟诊疗行为感知系统参考架构，适用于多模态模拟诊

疗行为感知系统的设计、开发和应用，从而推进多模态模拟诊疗行为感知技术的

发展和应用。

三、主要试验[或验证]情况分析

本标准依据项目组的多模态模拟诊疗系统相关研究成果进行了实验验证与

分析工作。其中复旦大学附属儿科医院、浙江大学医学院附属儿童医院、上海交

通大学医学院附属上海儿童医学中心等单位对于模拟诊疗的数据、行为等进行试

验分析，对于问诊、表情、肢体动作等诊疗行为进行验证，其中对于实体儿童患

者模型的插管等操作进行实际操作分析。季华实验室、复旦大学、清华大学分别

对语音识别、情绪识别、动作识别相关的数据采集、特征提取与识别等内容进行

了试验验证分析，保证了系统的可靠性等。

四、知识产权情况说明

本文件不涉及专利及知识产权问题。

五、产业化情况、推广应用论证和预期达到的经济效果

得益于增强现实、虚拟现实、模式识别等相关技术的高速发展，多模态模拟

诊疗行为感知系统在诊疗培训、医学教育等相关领域取得了显著的成果。基于多

模态数据的模拟诊疗行为感知系统相关技术目前在信息技术与医疗交叉领域受

到广泛关注。本项目提出了多模态模拟诊疗行为感知系统的参考架构，适用于多

模态模拟诊疗行为感知系统的设计、开发和应用。

六、转化国际标准和国外先进标准情况

本文件没有对应的国际标准或国外先进标准，为自主制定的标准。

七、与现行相关法律、法规、规章及相关标准的协调性

中国电子工业标准化技术协会

本文件没有对应的国际标准或国外先进标准，为自主制定的标准，该细分领

域在国内目前尚无相关标准，是弥补领域的空白。

八、重大分歧意见的处理经过和依据

无。

九、贯彻标准的要求和措施建议

建议标准发布后尽快实施。

十、替代或废止现行相关标准的建议

无。

十一、其它应予说明的事项

无。

《多模态模拟诊疗行为感知系统参考架构》

团体标准编制起草组

2024-7-26

中国电子工业标准化技术协会

团体标准《多模态模拟诊疗行为感知系统参考架构》

（征求意见稿）编制说明

一、工作简况

1.任务来源

根据中国电子工业标准化技术协会公布的2024年第六批团体标准制修订项

目的通知（中电标通〔2024〕017号），团体标准《多模态模拟诊疗行为感知系

统参考架构》由中国电子技术标准化研究院发起并主办，由中国电子技术标准

化研究院、中国电子工业标准化技术协会归口，项目编号为：CESA-2024-102。

2.标准编制的主要成员单位

本文件的编制组由发起单位中国电子技术标准化研究院及主要参与起草单

位复旦大学、长春博立电子科技有限公司、复旦大学附属儿科医院、季华实验室、

清华大学、浙江大学医学院附属儿童医院、上海交通大学医学院附属上海儿童医

学中心、光华临港工程应用技术研发（上海）有限公司、北京协和医院等单位组

成。主要起草人中李伟、耿力、王文峰、张立华、温志庆主要负责标准的草案编

制和编制讨论会的组织，苏柳桢、熊本竹、杨晓东主要负责标准的修改反馈整理

工作，卢宇蓝、宋先辉主要负责标准的验证工作，其他起草人参与标准编制讨论

会并提供标准意见。

3.主要工作过程

2022年5月，为讨论多模态模拟诊疗感知系统领域标准需求，来自电子标准

院、复旦大学、清华大学、季华实验室等多家单位的代表参加了多模态模拟诊疗

感知系统标准化需求分析会议。与会代表交流讨论多模态模拟诊疗感知系统技术

现状，根据科技部的科技创新2030“新一代人工智能”重大项目《标准化儿童患

者模型关键技术与应用》研究内容，调研情况，提出制定本标准。

2022年9月，电子标准院与复旦大学、长春博立电子科技有限公司、复旦大

学附属儿科医院、季华实验室、清华大学等多家单位召开了多模态模拟诊疗感知

系统参考架构标准研制交流会，针对本标准内容展开讨论，并讨论了目前多模态

中国电子工业标准化技术协会

模拟诊疗感知系统的应用场景和产品现状。会后，参会专家对标准草案提出修改

建议，编制组根据专家建议修改形成新的草案。

2023年4月，电子标准院完善标准草案并提交内审，内审专家审核了标准与

项目任务书的关联度以及系列标准的关联性，标准通过内审。会后按照专家意见，

编制组修改标准草案，形成新一版草案内容。

2023年10月，标准任务所属的科技创新2030“标准化儿童患者模型关键技术

与应用”项目召开项目组会，会议上针对标准内容进行了讨论，并建议在架构中

体现业务流程模块等相关内容。会后编制组完善修改了标准草案。

2024年6月，标准任务所属的科技创新2030“标准化儿童患者模型关键技术

与应用”项目课题召开相关会议，会议上针对多模态模拟诊疗数据的特征提取与

融合内容进行了讨论，并建议在融合部分强调分级融合。会后编制组完善修改了

标准草案。

2024年7月，经过与复旦大学、清华大学、季华实验室等单位的专家进一步

的讨论，建议编制组将多模态模拟诊疗感知系统参考架构进一步调整为数据采

集、特征融合识别、识别结果几个部分，对每个部分进行多模态数据的介绍，在

组内针对专家意见召开讨论会，并根据专家意见修改标准内容，形成标准征求意

见稿。

二、标准编制原则和确定主要内容的论据及解决的主要问题

1.编制原则

本文件主要内容按照GB/T1.1—2020给出的规则起草。文件编制遵循“科学

性、实用性、统一性、规范性”的原则