CN113349819B 用于检测医学图像中的异常的方法和系统 （通 用电气精准医疗有限责任公司）

US2018101645A1,2018.0括接受该第一通知的选项和拒绝该第一通知的2在根据第一成像协议对患者进行超声检查期间经由超声探头采集所述患者的医学成在所述超声检查仍在进行的同时，实时地利用人工智能系统通在所述超声检查仍在进行的同时，将关于所述潜在异常第一通知的选项；响应于选择接受所述第一通知的所述选项，将关2.根据权利要求1所述的超声成像方法，其中所述关于所检测到的潜在异常的报告包括用于使用所述第一成像协议来验证所检测到的潜在异3.根据权利要求1所述的超声成像方法，其中所述第一通知还包括推迟所述第一通知响应于自将所述第一通知输出到所述显示器起经过阈值持续时间之后未选择接受所5.根据权利要求4所述的超声成像方法，其中将由所述第一通知给出的所述信息存储7.根据权利要求1所述的超声成像方法，其中输出所述第一通知响应于免干扰设置的8.根据权利要求1所述的超声成像方法，其中所述潜在异常是在所采集的医学成像数利用所述人工智能系统通过评估所采集的医学成像数据来检测所述潜在异常包括在所述3共振成像数据、计算机断层摄影数据、x射线数据和正电子发射断层摄影数据中的至少一处理器，所述处理器被配置有在非暂态存储器中的指令，所述指令在在根据第一成像协议对患者进行超声检查期间经由所述超声探头采集所述患者的超在所述超声检查仍在进行的同时，实时地利用深度神经网络评11.根据权利要求10所述的超声成像系统，其中所述处理器还被配置有在所述非暂态12.根据权利要求10所述的超声成像系统，其中所述处理器还被配置有在所述非暂态定的定时或响应于接收到预定义输入而输出4[0002]超声成像系统通常包括施用到患者身体的超声探头和可操作地联接到该探头的[0007]图2是示出根据实施方案的用于检测和分类医学图像中的异常的图像处理系统的[0008]图3A-图3C示出了根据一个实施方案的用于检测超声图像中的潜在异常并输出关[0009]图4A-图4E示出了根据一个实施方案的具有通知系统的用户界面的示例性显示输提供了用于基于医学成像数据自动检测患者中潜在的身体(例如，解剖/病理)或生理(例5采用图像处理和深度学习算法来检测潜在异常，并且诸如根据图3A-图3C的方法将关于所检测到的潜在异常的一个或多个通知输出给操作者。如图4A-图4E中的示例性显示输出所的指导。该指导可包括用于使用当前超声协议/成像模式采集附加视图或者用于使用否则射器102，该发射器驱动换能器阵列(本文中称为探头106)内的元件(例如，换能器元件)104，以将脉冲超声信号(本文中称为发射脉冲)发射到身体(未示出)中。根据一个实施方信号穿过执行波束形成并输出超声数据的接收波束形成器110，该超声数据可为射频(RF)6图像以用于在显示设备118上显示。根据一个实施方案，处理器116可包括中央处理单元[0018]处理器116适于根据数据上的多个可选超声模态来执行一个或多个处理操作。在在实时或离线操作中以不太实时的方式处理。本公开的一些实施方案可包括多个处理器7[0020]超声成像系统100可以例如10Hz至30Hz的帧速率(例如，每秒10帧至30帧)连续采写入图像存储器以便由显示设备118读取务器中操作，该数据服务器相对于超声成像系统100的其他部件诸如探头106和用户界面头106可包括与手持式超声成像设备进行电子通信以收集原始超声数据的手持式探头。发8[0025]图像处理器231包括处理器204，该处理器被配置为执行存储在非暂态存储器206中，处理器204的一个或多个方面可被虚拟化并由以云计算配置进行配置的可远程访问的现场可编程门阵列和图形板。在另外的实施方案中，处理器204可被配置为图形处理单元[0026]在图2所示的实施方案中，非暂态存储器206存储检测和分类模块212以及医学图的和/或未训练的神经网络并且还可包括与存储在其中的一个或多个神经网络模型相关联[0027]在一些实施方案中，潜在的患者异常可包括在医学图像数据214中成像的解剖特测和分类模块212中的机器学习模型中的一个或多个。训练模块210可从医学图像数据2149[0029]非暂态存储器206还存储医学图像数据214。医学图像数据214包括例如由成像模[0030]在一些实施方案中，非暂态存储器206可以包括设置在两个或更多个设备上的组非暂态存储器206可为影像存档与通信系统(PACS)的一部分，该部分被配置为存储例如患[0032]显示设备233可包括利用任何类型的显示技术的一个或多个显示设备。在一些实影仪或另一种类型的显示设备，该显示设备可使得用户能够查看医学图像和/或与存储在系统100中，或反之亦然(例如，超声成像系统100的至少部分可包括在医学图像处理系统[0036]图3A-图3C示出了用于检测医学图像中的潜在异常并输出用于验证该潜在异常的使用下拉菜单或通过选择虚拟按钮从多个可能的超声协议中选择第一超声协议。另选地，像作为示例，第一超声协议可包括具有B模式的左心室的四腔视图、具有彩色血流成像包括供用户移动、旋转和/或倾斜超声探头以及自动发起和/或终止扫描过程和/或调整超括相对于标准化吹气流速范围的异常高或低的血流速度和/或通过关闭的阀的回流。异常[0042]评估超声图像的潜在异常包括使用人工智能系统来识别和表征在一个或多个超的检测和分类模块212。人工智能系统可被训练以识别和量化通常存在于特定视图中的特括来自经由超声或其他成像模态采集的先前扫描的数据以及在当前扫描期间采集的数据。用于选择第一超声协议的用户界面中，或者可被包括在单独的用户界面中。用户输入设备每个示例中，操作者可选择从与第一超声协议和/或操作者相关联的默认设置切换“免干意所检测到的潜在异常(例如，通知拒绝)或者当前不可用于验证所检测到的潜在异常(例程的所有视图和/或成像模式采集超声数据并且超声探头不再根据第一超声协议主动地发发起第一超声协议和/或第二超声协议中的附加视图，这些视图被设计为经由报告评估潜还是被拒绝。操作者可通过以上文在316处描述的用于接受第一通知的方式经由用户输入[0061]如果第一通知未被拒绝(例如，第一通知被推迟)，则方法300前进至315(参见图特定类型的潜在异常或在特定视图/视图组合中识别的那些潜在异常的重复拒绝，并且可他用户可过滤通知日志中的接受/拒绝/推迟/静默的通知，根据所检测到的异常类型进行[0063]阈值持续时间是指用于显示第一通知并允许操作者在第一通知不再被显示之前择通知中心使得操作者能够浏览多个存储的通知并且选择首先处理哪个通知和/或应用过滤器以仅显示被推迟的异常或不显示被拒绝的异常，同时仍然显示被接受和推迟的异常，[0067]在328处，确定第二通知是否被接受。操作者可通过经由用户输入设备以上文在与如果未被接受、推迟或拒绝则在达到阈值持续时间之后从显示器移除的第一通知不同，使用第一超声协议进行附加采集以验证潜在异常，如在336处任选地指示的。在其他示例[0071]当响应于在316处第一通知被接受或响应于在328处第二通知被接受而生成报告和/或从操作者接收的输入，可在第一超声协议完全完成之前或在第一超声协议完成之后项被选择而生成包括用于在完成第一协议时将泄漏识别为第二超声协议的协议的像素参数值被包括在输出到显示设备的显示图像中，该显示图像可用在334处生成的报动作的结果和/或通过使用人工智能系统确认附加采集中的潜在异常来指示潜在异常是否之后继续将所有检测到的潜在异常记录在日志文件中以用于查4A-图4E示出了响应于人工智能系统检测到患者中的潜在异常而可能发生的显示输出的例可以是例如图1的显示设备118或图2的遮蔽超声图像408或定位在侧边栏406内的多个用户可选虚拟输入412中的任一者、或与其通知消息420被显示在显示设备401的显示区域402中并且包括关于潜在异常的信息。第一择接受图标422，可将关于所检测到的潜在异常的附加信息以及选择用于验证潜在异常的423或拒绝图标424的情况下达到用于显示第一通知消息420的阈值持续时间，如上文相对407与图4A所示的第一示例性显示输出400、图4B所示的第二示例性显示输出403和图4C所图4C所示的第三示例性显示输出405和图4D所示的第四示例性显示输出407问用户可选虚拟输入412并继续观察超声图像4[0085]第二通知消息428还包括接受图标430、推迟图标431和拒绝图标432。响应于(例将关于所检测到的潜在异常和用于验证潜在异常的动作的附加信息输出到显示区域402。医疗保健专业人员，医疗保健专业人员能够调整扫描协议，以确定潜在异常是否存在(例[0087]自动检测医学图像中的潜在异常并基于所检测到的潜在异常提议附加采集协议一通知输出到所述显示器起经过阈值持续时间之后未选择接受所述第一通知的所述选项、知给出的所述信息存储在所述通知中心处包括在所述显示器上在所述通知中心的图标处示例中的任一者或全部的第八示例中，输出所述第一通知响应于免干扰设置的关闭状态。在所述方法的任选地包括所述第一示例至所述第八示例中的任一者或全部的第九示例中，所述人工智能系统分析所述医学成像数据的潜在异常包括在所述采集期间实时分析所述