CN114519773B 生成三维虚拟人物的方法、装置、存储介质及家教机 （北京致远航程软件科技有限公司）

A,2020.08.07A,2018.07.20A,2020.06.30A,2019.04.30虚拟人物包括人脸部分和身体部分。该方法包取模型获得全身图像中关键点对应的关键点信根据关键点的序号将全身图像的关键点与三维虚拟人物模型中具有相同序号的预设关键点一2通过图像特征提取模型获得所述全身图像中关键点对应的关键点信息以及所述全身根据所述关键点的序号将所述全身图像的关键点与三维虚拟人物模型中具有相同序根据所述全身图像中所述用户对应的衣着参数以及所述候选三维所述根据所述关键点的三维坐标调整所述三维虚拟人物模型中所述预设关键点的位其中，所述全局调整策略用于根据每一所述关键点的三维坐所述局部调整策略用于在执行所述全局调整策略后，根据所述关键三维坐标调整所述三维虚拟人物模型中与所述目标关键点对应的所述预设关键点的位置，所述目标关键点为能够用于唯一确定所述用户的人脸轮廓通过图像特征提取模型获得所述全身图像中所有关键点、所有关键点所述根据所述关键点中目标关键点的三维坐标调整所述三维虚拟人物模型中与所述根据所述目标关键点的三维坐标以及所述所有关键点中与所述目标关键点距离最近对所述目标关键点的所述第一法向量和所述第二法向量求均值，得将所述全身图像输入到图像特征提取模型，并通过所述图像特征提像预处理网络基于至少一种预设图像处理策略对所述全身图像进行图像预处理得到目标通过所述图像特征模型中的所述特征提取网络对所述目标图像进行特述全身图像中关键点对应的关键点信息以及所述全身图像中所述用户对图像预处理网络基于至少一种预设图像处理策略对所述全身图像进行图像预处理得到目3通过所述图像特征提取模型中的所述图像预处理网络基于以下至少一种预设图像处将所述样本图像输入所述图像特征提取网络，得到所述样本根据所述样本图像中的所述样本关键点信息与所述预测关键点通过图像特征提取模型获得所述全身图像中所述用户对应的衣着款式参数以及衣着所述根据所述全身图像中所述用户对应的衣着参数以及所述候选三维虚根据所述全身图像中所述用户对应的衣着款式参数以及衣着颜色参提取模块，用于通过图像特征提取模型获得所述全身图像中关键调整模块，用于根据所述关键点的序号将所述全身图像生成模块，用于根据所述全身图像中所述用户对应的衣着其中，所述全局调整策略用于根据每一所述关键点的三维坐4所述局部调整策略用于在执行所述全局调整策略后，根据所述关键三维坐标调整所述三维虚拟人物模型中与所述目标关键点对应的所述预设关键点的位置，所述目标关键点为能够用于唯一确定所述用户的人脸轮廓通过图像特征提取模型获得所述全身图像中所有关键点、所有关键点根据所述目标关键点的三维坐标以及所述所有关键点中与所述目标关键点距离最近对所述目标关键点的所述第一法向量和所述第二法向量求均值，得处理器执行时实现权利要求1-6中任一项所述方5立与用户自身形象高度相似的三维虚拟人物显示在应用界面，以获得身临其境的使用感[0003]相关技术中，通常需要拍摄多张多角度的二维人脸照片解决相关技术生成三维虚拟人物需要多张二维人脸照片且只有脸部与用户相似的技术问[0007]通过图像特征提取模型获得所述全身图像中关键点对应的关键点信息以及所述[0008]根据所述关键点的序号将所述全身图像的关键点与三维虚拟人物模型中具有相图像特征提取模型获得所述全身图像中关键点对应的关键点信息以及所述全身图像中所述图像预处理网络基于至少一种预设图像处理策略对所述全身图像进行图像预处理得到6得所述全身图像中关键点对应的关键点信息以及所述全身图像中所述用户对应的衣着参[0014]通过所述图像特征提取模型中的所述图像预处理网络基于以下至少一种预设图点的三维坐标调整所述三维虚拟人物模型中与所述目标关键点对应的所述预设关键点的[0026]所述根据所述关键点中目标关键点的三维坐标调整所述三维虚拟人物模型中与[0027]根据所述目标关键点的三维坐标以及所述所有关键点中与所述目标关键点距离[0030]通过图像特征提取模型获得所述全身图像中所述用户对应的衣着款式参数以及[0031]所述根据所述全身图像中所述用户对应的衣着参数以及7[0034]响应于用户在家教机中的三维虚拟人物创建操作，获取所述用户输入的全身图8[0056]在应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执与用户自身形象高度相似的三维虚拟人物显示在应用界面，以获得身临其境的使用感受。9图像特征提取模型获得全身图像中关键点对应的关键点信息以及全身图像中用户对应的模型中的图像预处理网络基于至少一种预设图像处理策略对全身图像进行图像预处理得身图像中关键点对应的关键点信息以及全身图像中用户对应网络基于至少一种预设图像处理策略对全身图像进行图像预处理，得到多个目标子图像，全局调整策略用于根据每一关键点的三维坐标调整三维虚拟人物模型中与关键点对应的中目标关键点的三维坐标调整三维虚拟人物模型中与目标关键点对应的预设关键点的位够确定眼睛的宽度，通过上眼睑的目标关键点与下眼睑的目标关键点可以确定眼睛的高数以及衣着颜色参数。然后根据全身图像中用户对应的衣着款式参数以及衣着颜色参数，有样本关键点信息以及样本衣着参数的样本图像，然后将样本图像输入图像特征提取网[0094]下面对本公开提供的生成三维虚拟人物的方法结合家教机的应用场景进行举例[0100]提取模块402，用于通过图像特征提取模型获得所述全身图像中关键点对应的关[0101]调整模块403，用于根据所述关键点的序号将所述全身图像的关键点与三维虚拟[0102]生成模块404，用于根据所述全身图像中所述用户对应的衣着参数以及所述候选征提取模型中的所述图像预处理网络基于至少一种预设图像处理策略对所述全身图像进[0108]通过所述图像特征提取模型中的所述图像预处理网络基于以下至少一种预设图点的三维坐标调整所述三维虚拟人物模型中与所述目标关键点对应的所述预设关键点的[0121]根据所述目标关键点的三维坐标以及所述所有关键点中与所述目标关键点距离[0124]通过图像特征提取模型获得所述全身图像中所述用户对应的衣着款式参数以及[0128]响应于用户在家教机中的三维虚拟人物创建操作，获取所述用户输入的全身图[0133]本公开实施例还提供一种非临时性计算机可读存储介质，其上存储有计算机程[0137]图4是根据一示例性实施例示出的一种家教机500的框图。如图4所示，该家教机人物的方法中的全部或部分步骤。存储器502用于存储各种类型的数据以支持在该家教机500的操作，这些数据例如可以包括用于在该家教机500上操作的任何应用程序或方法的指器502可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，例如静态随机存取存储器（StaticRandomAccessMemory，简称SRAM电可擦除可编程只读存储器（ProgrammableRead-OnlyMemory，简称PROM只读存储器（Read-OnlyMemory，简称一个麦克风，麦克风用于接收外部音频信号。所接收的音频信号可以被进一步存储在存储按钮等。这些按钮可以是虚