CN119476431A 一种面向驾驶舱人机交互的分层知识图谱构建方法和系统 （海乂知信息科技(南京)有限公司）

一种面向驾驶舱人机交互的分层知识图谱本发明公开了一种面向驾驶舱人机交互的2若确定所述知识类型为时空动态知识，将所述时空动态知识进行时空动态知识建模，若确定所述知识类型为多模态知识，将所述多模态知识进行多根据所述驾驶舱人机交互场景，将所述基础静态知识图谱、时空动态2.根据权利要求1所述的一种面向驾驶舱人机交互的分层知识图谱构建方法，其特征所述时空编码规则在全球网格模型的基础上，根据时间对所述驾驶舱人机交互3.根据权利要求2所述的一种面向驾驶舱人机交互的分层知识图谱构建方法，其特征若所述时空动态知识为非结构化时空信息，对所述非结构化时空信息进行信息抽取，根据信息抽取获得的所述关键时空信息，结合所述时空编码规则4.根据权利要求3所述的一种面向驾驶舱人机交互的分层知识图谱构建方法，其特征确定所述时空动态知识的类别，所述时空动态知识的类别包括所述时空概念包括时空序列。5.根据权利要求4所述的一种面向驾驶舱人机交互的分层知识图谱构建方法，其特征3确定所述驾驶舱人机交互场景的类型，所述驾驶舱人机交互场若所述驾驶舱人机交互场景的类型为所述时间主题模型，使用若所述驾驶舱人机交互场景的类型为所述空间主题模型，使用若所述驾驶舱人机交互场景的类型为所述时空主题模型，组合卷积经网络作为模型结构，结合所述时空动态知识对应的信息索引以及时空动态知识的类别，6.根据权利要求1所述的一种面向驾驶舱人机交互的分层知识图谱构建方法，其特征通过多模态知识表征学习方法，将所述多模态知识表示为实体，并得到7.根据权利要求6所述的一种面向驾驶舱人机交互的分层知识图谱构建方法，其特征根据所述多模态知识图谱的逻辑架构，结合所述多模态知识表征学习后的多模态知8.根据权利要求7所述的一种面向驾驶舱人机交互的分层知识图谱构建方法，其特征所述实体类与多模态类之间的关系通过对所述多模态知识所述多模态类之间的关系通过对所述多模态知识的处理所述多模态类与标签类之间的关系通过对所述多模态知识的抽取和语9.根据权利要求1所述的一种面向驾驶舱人机交互的分层知识图谱构建方法，其特征在得到所述基础静态知识图谱、时空动态知识图谱和多模态知根据所述展示需求，通过所述基础静态知识图谱、时空动态知识图4现如权利要求1_9任一项所述一种面向驾驶舱人机交互的分层知识图谱构建方法，所述系知识类型确定模块，用于确定驾驶舱人机交互场景中获基础静态知识图谱构建模块，用于若确定所述知识类型为基础静时空动态知识图谱构建模块，用于若确定所述知识类多模态知识图谱构建模块，用于若确定所述知识类型为机载知识图谱生成模块，用于根据所述驾驶舱人机交互场景，将所述基5[0004]本发明实施例的目的在于提供一种面向驾驶舱人机交互的分层知识图谱构建方若确定所述知识类型为基础静态知识，将所述基础静态知识进行三元组知识建6所述时空概念包括时空序列。根据多模态知识图谱的逻辑架构，结合所述多模态知识表征学习后的多模态知7所述实体类与多模态类之间的关系通过对所述多模态知识所述多模态类之间的关系通过对所述多模态知识的处理述驾驶舱人机交互场景中对所述机载知识图谱8[0017]图1为本发明实施例提供的一种面向驾驶舱人机交互的分层知识图谱构建方法的图2为本发明实施例提供的一种面向驾驶舱人机交互的分层知识图谱构建系统的[0019]图1为本发明实施例提供的面向驾驶舱人机交互的分层知识图谱构建方法的流程9体代表中的一个个存在的实体；属性是概念或实体的基础特征，采用三元组形式表示<多边形等方式勾勒出需要处理的区域，称为感兴趣区域，简称为ROI。在电子信息系统GIS中、机器视觉软件Halcon、跨平台计算机视觉库OpenCV等软件上常用到各种算子合卷积神经网络与循环神经网络的方式进行态知识表征学习方法可采用如languageBind等S1045，所述多模态类与标签类之间的关系通过对所述多模态知识的抽取和语义获取所述驾驶舱人机交互场景中对所述机载知识[0045]如图2所示，基于本发明实施例提供的一种面向驾驶舱人机交互的分层知识图谱人机交互的分层知识图谱