CN114419091B 一种前景抠图方法、装置及电子设备 （奥比中光科技集团股份有限公司）

道学府路63号高新区联合总部大厦当前帧彩色图像、历史帧融合图和当前帧三分2获取当前帧彩色图像和当前帧对应的深度图像，历史帧彩色图像及其对应的透明度对所述深度图像进行多次腐蚀膨胀处理生成当前帧三分图；并对所述当前帧彩色图像、所述历史帧融合图和所述当前帧三分图进行特征提将所述第一特征图和所述第二特征图进行融合，得到第一特征对所述第一特征图、所述第一特征融合图和所述第二特征融合图利用预设特征提取网络对所述当前帧彩色图4.如权利要求1至2任一项所述的前景抠图方法，其特征在对所述当前帧前景软分割图进行多次腐蚀处理，得到当前帧三分图的获取深度阈值；遍历所述当前帧对应的深度图像中的像素，将大获取有效深度范围；遍历所述当前帧对应的深度图像中的像素，36.如权利要求1至2任一项所述的前景抠图方法，第一获取模块，用于获取当前帧彩色图像和当前帧对生成模块，用于对所述当前帧对应的深度图像进行多次腐蚀膨胀第二获取模块，用于根据所述当前帧彩色图像、所述历史帧融对所述当前帧彩色图像、所述历史帧融合图和所述当前帧三分图进行特征提将所述第一特征图和所述第二特征图进行融合，得到第一特征对所述第一特征图、所述第一特征融合图和所述第二特征融合图第三获取模块，用于利用所述编码特征图获取当前帧对应8.一种电子设备，包括存储器、处理器以及存储在当前帧对应的深度图像实现如权利要求1至6任一项计算机程序被处理器执行时实现如权利要求1至6任4[0003]在基于深度学习的抠图算法中，基于三分图(trimap)的方法得到了广泛的研述历史帧彩色图像及其对应的透明度图进行拼接生成历史[0011]利用所述编码特征图获取当前帧对应的透明度图，并根据所述透明度图抠取前5[0014]对所述当前帧彩色图像、所述历史帧融合图和所述当前[0020]利用包括卷积层、批归一化层和激活函数层的特征结合模块对所述第一特征图、[0025]对所述当前帧前景软分割图进行多次腐蚀处理，得到当前帧6[0041]图2是本申请一实施例提供的一种前景抠图方法的步骤S130和S140的实现流程示7[0051]图1是本申请一实施例提供的一种前景抠图方法的实现流程示意图。本实施例中存储器中。需要说明的是，本申请中的透明度(Alpha)图由图像中每个像素的透明程度构[0054]在一些实现方式中，通过RGBD相机采集目标物进入场景内的彩色图像和深度图历史帧彩色图像及其对应的透明度图进行拼接[0056]在一些实施例中，对当前帧对应的深度图像进行切分，生成当前帧三分图分生成当前帧前景软分割图像，再对当前帧前景软分割图像进行处理得到当前帧三分图，8素，若深度图像上某一像素的深度值在该有效深度范围内或小于该深度阈值且大于零时，Colort-1和历史帧对应的透明度图Alphat-1拼接起来的历史帧融合图pre_color_alpha，以9[0073]图2是本申请一实施例提供的一种前景抠图方法中步骤S130和S140的实现流程示当前帧彩色图像的第一特征图、历史帧融合图的第二特征图和当前帧三分图的第三特征示，抠图模型包括并联的三个特征提取网络。三个特征提取网络分别对当前帧彩色图像Colort[0076]例如，将当前帧彩色图像Colort输入第一特征提取网络，将历史帧融合图pre_color_alpha输入第二特征提取网络，以及将当前帧三分图Trimapt输入第三特征提取网图像进行合成得到多张不同背景与相同前景组合的执行顺序应以其功能和内在逻辑确定，而不应对本申请实施例的实施过程构成任何限[0096]图4是本申请一实施例提供的一种前景抠图装置的示意框图。所述前景抠图装置前帧前景软分割图进行多次膨胀处理后再减去前景区域，得到当前帧三分图的未知区域；当前帧软分割图中除前景区域和未知区域的部分为当前帧三[0120]示例性的，计算机程序62可以被分割成一个或多个模块/单元，一个或者多个模[0126]在一个实施例中，所称处理器60可以是中央处理单元(CentralProcessingUnit，CPU)，还可以是其他通用处理器、数字信号处理器(DigitalSignalProcessor，还可以用于暂时地存储已经输出或者将要输[0141]集成的模块/单元如果以软件功能单元的形