CN110675409A 图像处理方法及装置、电子设备和存储介质 （上海商汤智能科技有限公司）

2对所述至少一个目标图像区域进行第二分割处对所述第一分割结果及所述待处理图像进行融合根据所述待处理图像，对所述融合结果进行第三分根据所述特征图中的目标的边界框，从所述待基于注意力机制，将第i级上采样得到的第三特征图与第7.根据权利要求1-6中任意一项所述的方法，其特征在于，所述方法通过神经网络实根据预设的训练集训练所述神经网络，所述训练集包括第一分割模块，用于对待处理图像进行第一分割处理，第二分割模块，用于对所述至少一个目标图像区域进行第3融合及分割模块，用于对所述第一分割结果及所述待处理图像进行融合及分割处理，其中，所述处理器被配置为调用所述存储器存储的指令程序指令被处理器执行时实现权利要求1至74[0007]在一种可能的实现方式中，对所述至少一个目标图像区域分别进行第二分割处5别输入与各目标对应的第二分割网络中，输出各个样本图像区域中目标的第一分割结果；6[0022]在本公开实施例中，能够对待处理图像进行分割以确定图像中待处理图像第二分割结果，从而通过多次分割提高待处理图像中目标的分割结果的准确7所说明的任何实施例不必解释为优于或好于8在步骤S12中分别对各个目标图像区域进行第二分割(也即精细分割)，得到各个目标图像割网络可例如采用VNet的编码-解码结构，本公开对各个第二分割网络的具体网络结构不[0050]在一种可能的实现方式中，可在步骤S13中对各个目标图像区域的第一分割结果多个目标的边界框，该第一分割子网络可包括多个下采样层-上采样层(或多个卷积层-反9[0063]在该示例中，可通过第一分割子网络43的PReLU激活层和批量归一化层对该通道及髌骨软骨(PC)图像区域453)。各个目标图像区域的分辨率与待处理图像41的分辨率相[0066]在一种可能的实现方式中，可在步骤S12中分别对待处理图像的各个目标图像区[0073]在一种可能的实现方式中，可通过相应的第二分割网络的N个下采样层(N为大于[0082]基于注意力机制，将第i级上采样得到的第三特征图与第N-i级的第二特征图连[0084]图6示出根据本公开实施例的图像处理方法的特征图连接的示的级数i＝1时，第1级上采样得到的第三特征图可与第4级的第二特征图(通道数为64)连[0087]图7示出根据本公开实施例的图像处理方法的特征图连接的示对于任意一个第二分割网络，该第二分割网络的第二级第二特征图(通道数为16)表示为Ih，对该第二特征图进行第一级上采样得到的第三特征图(通道数为8)表示为第一级的第二特征图(通道数为8)表示为Il，可基于注意力机制对第一级上采样得到的第三特征图IY"与第一级的第二特征图Il进行连接得到连接后的第一级的第三特征[0098]在一种可能的实现方式中，根据本公开实施例的图像处理方法通过神经网络实可包括多个样本图像(也即三维的膝盖图像)，并标注出样本图像中各个膝盖软骨(也即股[0103]将样本图像输入所述第一分割网络中，输出所述样本图像中目标的样本图像区[0105]将各个样本图像区域中目标的第一分割结果以及所述样本图像输入融合分割网[0106]根据多个样本图像的第二分割结果以及标注分割结果，确定所述第一分割网络、S[0114]根据本公开实施例的图像处理方法，通过粗略分割以确定待处理图像中的目标(例如膝关节软骨)的感兴趣区域(ROI)；应用多个平行的分割主体来准确标记其各自感兴束的联合学习。该方法能够满足GPU资源的限制，可以对具有挑战性的数据进行流畅的训[0116]根据本公开实施例的图像处理方法，能够应用于基于人工智能的膝关节炎诊断、[0136]电源组件806为电子设备800的各种组件提供电力。电源组件806可以包括电源管[0137]多媒体组件808包括在所述电子设备800和用户之间的提供一个输出接口的在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通[0139]I/O接口812为处理组件802和外围接口模块之间提供接口，上述外围接口模块可如所述组件为电子设备800的显示器和小键盘，传感器组件814还可以检测电子设备800或[0141]通信组件816被配置为便于电子设备800和其他设备之间有线或无线方式的例性实施例中，通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播机程序指令的存储器804，上述计算机程序指令可由电子设备800的处理器820执行以完成[0145]电子设备1900还可以包括一个电源组件1926被配置为执行电子设备1900的电源出(I/O)接口1958。电子设备1900可以操作基于存储在存储器1932的操作系统，例如[0148]计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形[0149]这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/任意组合编写的源代码或目标代码，所述编程语言包括面向对象的编程语言—诸如[0151]这里参照根据本公开实施例的方法、装置(系统)和计算机程序产品的流程图和/处理装置的处理器执行时，产生了实现流程图和/或框图中的一个或多个方框中规定的功计算机可读介质则包括一个制造品，其包括实现流程图和/或框图中的一个或多个方框中指令实现流程图和/或框图中的一个或多个方框