CN119516071A 一种虚拟教学场景生成方法、装置、设备及存储介质 （浙江师范大学）

发明可以根据不同的教学活动和场景进行动态2对包含教学场景的文本资源与图片资源进行特征提取，得到语义特对三维教学资源分别进行空间布局编码以及场景层次编码，得到用于表征三维源在三维场景中的布局位置的空间布局特征和用于表征三维教学资源在三维场景中动态通过运动结构恢复方法获取图片资源中采样点的三维位置和视角方通过通道注意力机制选择和增强三维教学资源中的重要特将通道注意力机制、空间注意力机制和分类器的输出进行融合并通过超边约束对空间向量进行图结构建模，并将建模后的数据再次输3通过注意力机制对场景时序特征进行注意力加权，得到层次化空间空间特征包括三维资源在时间上出现的层次顺序以及不同教学资源在不同时间的权重分通过输入层对空间布局特征和层次化空间特征进行线性变换和通过逐层解码层对空间布局特征和层次化空间特征进行逐层解码，得通过特征融合层将空间布局信息和层次化空间信息进行融合，得生成模块，用于对三维教学资源分别进行空间布局编码以及场景表征三维教学资源在三维场景中的布局位置的空间布局特征和用于表征三维教学资源在上运行的计算机程序，所述处理器执行所述程序时实现上述权利要求1_7任一所述的虚拟算机程序被处理器执行时实现上述权利要求1_7任一项所述的虚4[0004]虽然现有的虚拟教学场景生成方法生成的虚拟教学场景可以较为准确地呈现出学资源在三维场景中的布局位置的空间布局特征和用于表征三维教学资源在三维场景中5通过通道注意力机制选择和增强三维教学资源中的重要特通过长短期记忆网络将融合特征和词向量进行场景信息捕捉，得到场景时序特次化空间特征包括三维资源在时间上出现的层次顺序以及不同教学资源在不同时间的权通过输入层对空间布局特征和层次化空间特征进行线性变换和6用于表征三维教学资源在三维场景中的布局位置的空间布局特征和用于表征三维教学资源在三维场景中动态演化的层次化空间特征，对空间布局特征和层次化空间特征进行解7模型以合成兼具沉浸感与交互性的动态三维虚拟[0024]参照图2，多模态神经辐射场模型首先将文本与图片分别通过文本编码器BERT和[0025]然后，通过运动结构恢复方法分析图片资源中采样点的三维位置(X)和视角方向时刻空间点的位移使三维资源能够随着时间的推移而动态变化，这种动描述图像资源的空间信息。采样特征指的是从图片资源中的采样点信息中提取出的特征，这些特征包含场景中与教育信息相关的视觉和空间数据。具体来说，采样特征包括了三维在不同时刻的动态变化信息。这些采样特征被整合进神经辐射场，以生成具有时空动态的三维教学资源，从而提升学习者的沉浸体验和对知识的长时记忆。运动结构恢复方法景的三维结构和相机运动信息。这种方法通常应用于动态场景的建模，尤其是在处理包含8[0028]提取采样特征后FS，将语义特征Ft和视觉特征Fv共同作为多模态特征输入至全关键特征的表示能力。通道注意力机制确保模型在处理资源数据时能够关注最相关的特9逐步深化学习认知。本发明致力于根据虚拟教室中的教学设计生成动态三维场景序列模传递时不丢失。CAP用于进一步抽取高层次特征。FC用于将特征向量转换为指定维度的输[0054]注意力机制用于关注场景中的重要位置或对象，对场景时序特征进行注意力加融合后的特征将进一步调整资源的空间位置，并根据时序信息对资源的布局进行动态调于表征三维教学资源在三维场景中的布局位置的空间布局特征和用于表征三维教学资源在三维场景中动态演化的层次化空间特征，对空间