CN113808279B 基于虚拟现实的课程制作及重现的方法及其系统 （台达电子工业股份有限公司）

基于虚拟现实的课程制作及重现的方法及一种基于虚拟现实的课程制作及重现的方拟摄影机录制一使用者在一虚拟现实中操作上述物件的动作，并产生对应上述物件的动作影包包括上述模型数据包以及包括上述动作影片2根据上述3D模型生成对应上述3D模型的一模型数据包，其中上通过复数虚拟摄影机录制一使用者在一虚拟现实中操作上述物件的产生一课程数据包，其中上述课程数据包包括上述模型数据包以2.如权利要求1所述的基于虚拟现实的课程制作及重现的方法，其中上述复数物件被3.如权利要求1所述的基于虚拟现实的课程制作及重现的方法，其中上述虚拟摄影机播放包括在上述课程数据包中的上述动画包，以重现上述使用者在5.如权利要求4所述的基于虚拟现实的课程制作及重现的方法，其中上述播放包括在7.如权利要求6所述的基于虚拟现实的课程制作及重现的方法，其中上述课程数据包8.如权利要求1所述的基于虚拟现实的课程制作及重现的方法，其中上述动画包至少9.如权利要求1所述的基于虚拟现实的课程制作及重现的方法，其中上述电子装置是一或多个电脑存储媒体，存储电脑可读取指令，其中上述处3根据上述3D模型生成对应上述3D模型的一模型数据包，其中上通过复数虚拟摄影机录制一使用者在一虚拟现实中操作上述物件的产生一课程数据包，其中上述课程数据包包括上述模型数据包以11.如权利要求10所述的基于虚拟现实的课程制作及重现的系统，其中上述复数物件12.如权利要求10所述的基于虚拟现实的课程制作及重现的系统，其中上述虚拟摄影机通过一时间差记录上述物件的坐标旋转信息播放包括在上述课程数据包中的上述动画包，以重现上述使用者在14.如权利要求13所述的基于虚拟现实的课程制作及重现的系统，其中上述播放包括16.如权利要求15所述的基于虚拟现实的课程制作及重现的系统，其中上述课程数据17.如权利要求10所述的基于虚拟现实的课程制作及重现的系统，其中上述动画包至18.如权利要求10所述的基于虚拟现实的课程制作及重现的系统，上述系统应用于一45程数据包中的上述动画包，以重现上述使用者在上述虚拟现实中操作上述物件的上述动[0011]在一些实施例中，上述播放包括在上述课程数据包中的上述动画包的步骤还包[0017]图1A是显示根据本公开一实施例所述的教学者配戴一头戴式显示(Head-mounted[0018]图1B是显示根据本公开一实施例所述的学习者配戴一HMD装置在一虚拟现实中观[0022]图5是显示根据本公开一实施例所述的基于虚拟现实的课程制作及重现的方法流[0023]图6是显示根据本公开一实施例所述的虚拟摄影机记录物件移动的统一建模语言[0024]图7是显示根据本公开一实施例所述的电子装置以时间戳对上述动作影片进行标[0025]图8是显示根据本公开一实施例所述的电子装置以时间戳播放动作影片的示意6[0046]S1105,S1110,S1117本文描述为“示例性”的设计不一定被解释为优选于或优于本公开或设计的其他方面。此[0060]图1A是显示根据本公开一实施例所述的教学者110配戴一头戴式显示(Head-[0061]在图1A中，教学者110可通过本公开提出的基于虚拟现实的课程制作及重现的方法及其系统将真实手部操作动作转换成虚拟3D影像，以使教学者110于虚拟现实中可边操[0062]计算装置的类型范围例如从小型手持装置(例如，移动电话/便携式电脑)到大型主机系统(例如大型电脑)。便携式电脑的示例包括个人数字助理(PDA)、笔记本电脑等装[0063]图1B是显示根据本公开一实施例所述的学习者130配戴一HMD装置120在一虚拟现从多角度探索或跟随教学者110的操作步骤一[0064]应可理解，图1A及1B中的HMD装置120及计算装置130所示的每个元件可经由任何[0066]为了于虚拟现实中模拟真实世界组装机台时的物理效果，本公开是采用Unity3D引擎中内置3D物理(Build-in3Dphysics)，其中此Unity3D引擎主要使用开源的Nvidia89只要与该基座接触的物件即继承基座物件的特性进入固定模式。图2是显示根据本公开一实施例所述的基座物件制定的示意图。如图所示，使用者可设定机柜部分210为整体机台[0075]图3是显示根据本公开一实施例所述的碰撞物件制定的示意图。为了于虚拟现实中模拟物件真实碰撞效果并节省Unity3D引擎中运算的耗能，使用者在组装各物件时可通[0076]图4是显示根据本公开一实施例所述的群集物件制定的示意图。为配合使用者实[0077]图5是显示根据本公开一实施例所述的基于虚拟现实的课程制作及重现的方法流时间差记录上述物件的坐标旋转信息及位移信息。在一实施例中，上述时间差为10毫秒物件移动的目的。图6是显示根据本公开一实施例所述的虚拟摄影机记录物件移动的统一[0081]更详细地说明，电子装置所产生的课程数据包包含课程中所需的所有多媒体文片及3D模型被打包为Assetbundle格式。Assetbundle功能可将各式3D文件格式(例如：动作影片进行存储。图7是显示根据本公开一实施例所述的电子装置以时间戳对上述动作1～物件5移动的虚拟摄影机可通过一时间差(10ms)记录物件1～物件5的坐标旋转信息及画包放入一物件池(ObjectPool)中。电子装置接着可判断上述动作影片中的一动作帧是[0093]图8是显示根据本公开一实施例所述的电子装置以时间戳播放动作影片的示意~9D图是以对一机台进行组装为例进行说明。如图9A所示，电子装置会生成环境9[0096]图11是显示根据本公开一实施例所述的使用者制作课程数据包的详细流程图型的一模型数据包，其中上述模型数据包至少包括应用于上述3D模型的复数物件(在此步述物件的坐标旋转信息及位移信息。当HMD装置未检测到使用者按下录制键时(步骤S1120[0099]在步骤S1140中，HMD装置将模型数据包及动画包合成为一课程数据包。在步骤[0100]图12是显示根据本公开一实施例所述的使用者重现课程数据包的详细流程图放结束。当HMD装置检测使用者按下停止播放键或动画已播放结束时(步骤S1230中的[0103]通过本公开的基于虚拟现实的课程制作及重现的方法及装置可捕捉教学者的身存储媒体包括但不局限于随机存取存储器(RandomAccessMemory，RAM)、只读存储器(Read-OnlyMemory，ROM)、电子抹除式可复写只读存储器(Electrically-ErasableProgrammableRead-OnlyMemory，EEPROM)、快闪存储器或其它存储器技术、只读光盘计或陀螺仪的输出可被提供给计算装置130