CN114926324B 基于真实人物图像的虚拟试衣模型训练方法、虚拟试衣方法、装置及设备 （深圳市皓丽软件有限公司）

道岗头社区五和大道4023号1号楼第基于真实人物图像的虚拟试衣模型训练方本发明实施例公开了一种基于真实人物图真实人物图像分别进行姿态估计及图像语义分输入训练好的虚拟试衣模型，依次通过特征提2获取原始训练数据，所述原始训练数据包括二维原始衣服图像对所述二维真实人物图像进行姿势估计及标记得到人体姿势估计及人体穿将所述人体姿势估计、所述人体穿衣区域以及所述二维原始衣服将所述二维原始衣服图像、所述人体姿势特征、所述人体语义将所述外观流估计图、所述人体姿势估计以及所述人体穿根据所述虚拟试衣图像及所述二维真实人物图像对所述预设流估计网络以及所述生成对抗神经网络进行迭代训练以生所述根据所述虚拟试衣图像及所述二维真实人物图像对所述预设根据所述虚拟试衣图像及所述二维真实人物图像通过预设损失函数若所述损失值不小于预设损失值且训练次数小于预设训练次若所述损失值小于所述预设损失值或所述训练次数不小于预设述对所述二维真实人物图像进行姿势估计及标记得到人体姿势估计及人体穿衣区域，包通过姿态检测模型对所述二维真实人物图像进行姿势估计得对所述二维真实人物图像中的头发、面部以及下半身衣服区域进及所述二维原始衣服图像输入预设特征提取网络进行特征提取融合，得到人体姿势特征、将所述人体姿势估计、所述人体穿衣区域以及所述二维原始衣服分别将所述多个姿势特征、所述多个人体特征以及姿势特征、所述人体语义特征以及所述衣服特征输入外观流估计网络以获得外观流估计将所述人体姿势特征、所述人体语义特征以及所述衣服特征输入外观3根据所述外观流对所述二维原始衣服图像进行形变以得到外对所述二维真实人物图像分别进行姿势估计及图像语义分割以得到人体姿势估计及将所述人体姿势估计、所述人体穿衣区域以及所述二维真实衣服第一获取单元，用于获取原始训练数据，所述原始训练数据估计标记单元，用于对所述二维真实人物图像进行姿特征提取融合单元，用于将所述人体姿势估计、所述人体征以及所述衣服特征输入外观流估计网络以获得外第一生成单元，用于将所述外观流估计图、所述人体姿势估计训练单元，用于根据所述虚拟试衣图像及所述二维真网络、所述外观流估计网络以及所述生成对抗神经网络进行迭代训练以生成虚拟试衣模计算单元，用于根据所述虚拟试衣图像及所述二维训练子单元，用于若所述损失值不小于预设损失值且对所述预设特征提取网络、所述外观流估计网络以及所述生成对抗神经网络进行迭代训生成子单元，用于若所述损失值小于所述预设损失4估计分割单元，用于对所述二维真实人物图像分别进行姿第二生成单元，用于将所述人体姿势估计、所述人体穿衣区存储有计算机程序，所述处理器执行所述计算机程序时实现如权利要求1-4中任一项所述5[0004]第一方面，本发明实施例提供了一种基于真实人物图像的虚拟试衣模型训练方[0006]对所述二维真实人物图像进行姿势估计及标记得到人体姿势估计及人体穿衣区外观流估计网络以及所述生成对抗神经网络进行迭代训练以生成虚[0013]对所述二维真实人物图像分别进行姿态估计及图像语义分割以得到人体姿态估6义特征以及所述衣服特征输入外观流估计网络以获所述二维真实人物图像分别进行姿态估计及图像语义分割以得到人体姿态估计及人体穿7[0029]图1为本发明一实施例提供的一种基于真实人物图像的虚拟试衣模型训练方法的[0030]图2为本发明一实施例提供的一种基于真实人物图像的虚拟试衣模型训练方法的[0032]图4为本发明实施例提供的一种基于真实人物图像的虚拟试衣模型训练装置的示衣模型训练方法。下面对所述基于真实人物图像的虚拟试衣模型训练方法进行详细说明。8避免所述二维原始衣服图像内相邻像素点出现跳跃断层，即为了更好的保留衣服的特征，区域输入生成对抗神经网络以得到虚拟试衣图像，其中，所述生成对抗神经网络为[0051]S150、根据所述虚拟试衣图像及所述二维真实人物图像对所述预设特征提取网9的视觉相似性及逐元素差值的对数值计算损失值，即所述损失函数是由平滑二阶损失函实衣服图像之后，即虚拟试衣软件在接收到用户选择二维真实衣服图像的触发指令之后，[0059]图4是本发明实施例提供的一种基于真实人物图像的虚拟试衣模型训练装置200明还提供一种基于真实人物图像的虚拟试衣模型训练装置200。该基于真实人物图像的虚拟试衣模型训练装置200包括用于执行上述基于真实人物图像的虚拟试衣模型训练方法的估计单元204第一生成单元205以及训练单原始衣服图像和穿着相应衣服的二维真实人物图像；所述估计标记单元202用于对所述二合单元203用于将所述人体姿势估计、所述人体穿衣区域以及所述二维原始衣服图像输入征以及所述衣服特征输入外观流估计网络以获得外观流估计图；所述第一生成单元205用以得到虚拟试衣图像；所述训练单元206用于根据所述虚拟试衣图像及所述二维真实人物[0068]其中，所述第二获取单元301用于获取用户选择的二维真实人物图像及二维真实衣服图像；所述估计分割单元302用于对所述二维真实人物图像分别进行姿态估计及图像语义分割以得到人体姿态估计及人体穿衣区域；所述第二生成单元303用于将所述人体姿[0074]该存储介质303可存储操作系统3031和计算机程序3032。该计算机程序3032被执真实人物图像的虚拟试衣模型训练方法训练的动作姿态模型，也可使得处理器302执行一[0081]在某些实施例，例如本实施例中，处理器302在实现所述将所述二维原始衣服图少一张衣服图片的衣服选择界面；在接收到用户选择二维真实衣服图像的触发指令之后，[0085]应当理解，在本发明实施例中，处理器302可以是中央处理单元(CentralSignalProcessor，DSP)、专用集成电路(ApplicationSpecifi[0086]本领域普通技术人员可以理解的是实现上述实施例的方是可以通过计算机程序来指令相关的硬件来完成。该计算机程序可存储于一存储介质中，图像的虚拟试衣模型训练方法及虚拟试衣方法的任[0092]该集成的单元如果