CN114419319B 图像分割方法和装置 （许菁）

像处理领域，尤其涉及图像分割方法和装置领要分割的原始图像导入编码器，编码后获得N个第一预测结果；将N-1个第一预测结果一一对应分别导入N-1个多尺度特征迭代融合网络；将第一预测结果中的剩余一个第一预测结果导入所述第N-1个多尺度特征迭代融合网络；将所述第N-1个多尺度特征迭代融合网络的输出导入到第直至所述第二个多尺度特征迭代融合网络的输述N-1个多尺度特征迭代融合网络的输出，以及所述第N个第一预测结果分别导入解码器，获得2S3：将N个第一预测结果中的剩余一个第一预测结果S4：将所述第N-1个多尺度特征迭代融合网络的输出S5：重复步骤S4，直至第二个多尺度特征迭S6：将所述N-1个多尺度特征迭代融合网络的输出S102：将所述第一个编码器输出的第一个S103：依次重复步骤S102，直至第N-1个编码器输出S201：将所述第一个编码器输出的第一个第一预测S202：将与所述第二个编码器对应的第二个多尺S203：将所述第一多通道注意力模块的输出和所S204：将所述第三多通道注意力模块的输出作为将所述N-1个多尺度特征迭代融合网络的输出，以及所述第N个第一第一多尺度特征迭代融合模块：用于将N-1个第一预测结果一一第二多尺度特征迭代融合模块：用于将N个第一预测结果中的剩余一个第一预测结果3第三多尺度特征迭代融合模块：将所述第N-1个多尺度特征迭代融合网络的输出导入第一重复模块：用于重复执行第三多尺度特征迭代融合迭代融合网络的输出导入到第一个多尺度特解码模块：用于将所述N-1个多尺度特征迭代融合网络的输出，第一输出模块：用于将所述第一个编码器输出的第一个第一预第三输出模块：将与所述第二个编码器对应的第二个多尺度特征迭代融合网络的输连接模块：用于将所述第一多通道注意力模块的输出和所述第二第四输出模块：将所述第三多通道注意力模块的输出作为将所述N-1个多尺度特征迭代融合网络的输出，以及所述第N个第一4[0002]卷积神经网络CNN作为当今绝大多数计算机视觉系统的核心技术，在图像分类领了广泛的关注。背后的核心思想是应用self-attention机制来捕获长期依赖关系。与CNN[0003]鉴于Transformers与CNN在图像处理领域的优势，有许多方法基于卷积神经网络或Transformers建立医学图像分割模型。ChenJ首次提出TransUNet来探索Transformers赖关系，由于卷积表示法通常包含精确的空间信息并提供分层概念，一层或两层的型的主干。Swin-UNET基于SwinTransformer利用分层transformer块在类似U-Net的体系和self-attention来建立一个最佳5[0028]编码模块：用于将需要分割的原始图像导入编码器，编码后获得N个第一预测结[0030]第二多尺度特征迭代融合模块：用于将N个第一预测结果中的剩余一个第一预测[0031]第三多尺度特征迭代融合模块：将所述第N-1个多尺度特征迭代融合网络的输出尺度特征迭代融合网络的输出导入到第一个多尺度特征6第N-1个第一预测结果分别输出到第N个编码器和第N-1个[0040]下采样模块：用于将所述第一个编码器输出的第一个第一预测结果进行下采样直至获得所述N-1个多尺度特征迭代融合网络的各[0048]级联模块：用于将第N个第一预测结果到第一个第一预测结果进行级联式特征提[0050](1)基于TwinsTransformer块和之前提出的多尺度特征迭代融合MS-FIF(Multi-[0052]应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特7[0082]本发明提出了一种基于自注意力和卷积组合的强大分割模型一nnTwins(not-8个编码器都包括了：两个Transformer编码器、一个patchembed和一个位置编码生成器(positionalencodinggenerator)；所述位置编码生成器夹在两个Transformer编码器中×W/4×64)经过patchembed后9[0118]下采样模块701：用于将所述第一个编码器输出的第一个第一预测结果进行下采[0119]第三输出模块702：将与所述第二个编码器对应的第二个多尺度特征迭代融合网[0120]连接模块703：用于将所述第一多通道注意力模块的输出和所述第二多通道注意[0121]第四输出模块704：将所述第三多通道注意力模块的输出作为第一个多尺度特征3个编码器中的每个编码器按顺序输出还依次导入到下一个编码器中，直到第三个编码器迭代融合网络的输出还导入到3个解码器中。3个多尺度特征迭代融合网络的各自的输入，[0131]如图10所示，设备1000包括计算单元1001，其可以根据存储在只读存储器(ROM)1002中的计算机程序或者从存储单元1008加载到随机访问存储器(RAM)1003中的计算机程通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信[0133]计算单元1001可以是各种具有处理和计算能力的通用和/或专用处理组件。计算算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理[0135]用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来理器或控制器，使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器[0138]可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：局域网过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计