CN110163899B 图像匹配方法和图像匹配装置 （三星电子株式会社）

US2017091550A1,2017.包括对象的标志点的标志块；从对象的第二图2基于从第一图像提取的所述标志块与从第二图像提取的所述目标响应于对象被确定为活的组织结构和/或识别的用户，允许通过装置的用户接口访问还包括：基于用于捕捉第一图像的第一图像传感器的视场FOV与用于捕捉第二图像的第二计算所述标志块与所述目标块的多个局部区域中的每个局部区将所述多个局部区域之中的具有最高的计算的相似程度的局部区域确定为与所述标局部区域中的每个局部区域中的像素的值与包括在所述标志块中的像素的值之间的相关3确定第一图像中的与对象对应的对象区域的步骤包括：从所述有通道图像与第二图像之间的最小波长差的通道图像确定与对象提取与所述标志块对应的目标块的步骤针对所述多个标志中的每个标确定第二图像中的与所述标志点对应的目标点的步骤针对所述多个标志中的每个标基于第一图像的所述标志点和第二图像的所述目标点，将第一图像19.一种存储指令的非暂时性计算机可读存储介质，其中，当所述指令由处理器执行获得对象的第一图像和对象的第二图像，其中，第一图像表示通从第一图像提取包括对象的标志点的标志块，其中，提取包括对象的从第二图像提取与所述标志块对应的目标块，其中，提取与所述标志4基于从第一图像提取的所述标志块与从第二图像提取的所述目标从对象的第一图像提取包括对象的第一特征点的第一块，其中基于第一块从对象的第二图像提取第二块，其中，第二图像表基于从第一图像提取的第一块与从第二图像提取的第二块之间的匹5[0001]本申请要求于2018年2月12日提交到韩国知识产权局的第10-2018-0017303号韩[0004]提供本发明内容来以简化的形式介绍在下面具体实施方式中进一步描述的构思[0008]所述图像匹配方法还可包括：响应于对象被确定为活的组织结构和/或识别的用[0011]提取目标块的步骤可包括：基于用于捕捉第一图像的第一图像传感器的视场6个局部区域中的像素的值与包括在所述标志块中的像素的值之间的相关程度作为相似程之中的具有通道图像与第二图像之间的最小波长差的通道图像提取所[0017]提取标志块的步骤可包括针对对象的多个标志中的每个标志从第一图像提取所[0024]所述图像匹配方法还可包括：基于所述目标点验证第二图像中存在的对象的活7[0031]图3是示出基于确定的目标点的对象识别和活性(liveness)验证的示例的流程[0038]提供下面的具体实施方式以帮助读者获得对在此描述的方法、装置和/或系统的所述另一元件，或者可存在介于它们之间的一个或多个其他元件。相反，当元件被描述为间的其他元件。8[0044]在此描述的示例的特征可以以如在理解本申请的公开之后将是清楚的各种方式可表示图像的像素的子组或者图像的裁剪或处理的9于可通过被配置为捕捉各自对应的图像的第一图像传感器和第二图像传感器中的每个接[0057]在操作130中，图像匹配装置基于标志块与目标块之间的匹配来确定第二图像中[0063]神经网络表示使用可通过边(例如，通过加权的连接)连接的和/或可例如在实施的卷积操作中应用训练的内核的大量节点的识别模型。神经网络通过硬件或硬件和指令配装置的一个或多个处理器执行时，引起所述一个或多个处理器实施识别模型)的组合来实现。可通过使用存储在图像匹配装置的存储器中的各种数据结构的数据来训练识别模像传感器与第二图像传感器的各自视场(FOV)和第一图像传感器与第二图像传感器之间的中的标志块的位置以及对象与图像匹配装置之间的距离来确定第二图像中的目标块。例图像匹配装置之间的距离，将第一图像中的与第二图像传感器的FOV对应的区域确定为期置响应于在期望的区域中不存在第一图像中标识的标志检索与标志块匹配的局部区域。将参照图5进一步描述检索与标志块匹配的局部区域的示与第二图像进行匹配来对在不同时间点捕捉的图例，图像匹配装置可基于第二图像的目标点来验证第二图像中存在的对象的活性的有效性。例如，图像匹配装置可基于第二图像的目标点来确定对象是否是用户的组织结构(例像匹配装置基于针对第一图像和第二图像中的至少一个的每一帧确定的活性参数来确定减少可能在IR图像中存在的由于眼镜的反射而出现的光斑或聚光[0081]虽然在操作430和操作450之后分别示出图4的操作431和操作451中的预处理操例如，图像匹配装置可确定IR图像中的与彩色图像中的标志块匹配的目标块的局部区域。图像匹配装置可对预处理的标志块和预处理像匹配装置可基于IR图像的特征点和IR图像来标识对[0086]虽然图5示出彩色图像510被用作第一图像以及IR图像520被用作第二图像的示[0089]图像匹配装置获取IR图像520作为第二图像。图像匹配装置的第二图像传感器通像传感器可以是IR传感器。IR传感器的FOV可以比相机传感器的FOV窄或比相机传感器的[0091]图像匹配装置响应于第一图像包括多个颜色通道图像而从多个颜色通道图像中[0092]图像匹配装置从IR图像520提取与彩色图像510的标志块531对应的位置的目标块区域之中的具有最高的计算的相似程度(例如，相关程度)的局部区域确定为与标志块531[0094]图像匹配装置计算包括在目标块541的多个局部区域中的每个中的像素与包括在[0096]图像匹配装置基于标志块531与目标块541之间的匹配确定针对IR图像520的目标置基于确定了目标点561的第二IR图像560来识别对象或验证对象的活性。第二IR图像560的目标点通过对第一图像和第二图像中的至少一个进行变换来将标志点和目标点进行匹的)区域611中存在对象的标志的一部分的示例。由于IR图像620的FOV小于彩色图像610的置可基于彩色图像610的标志点准确地确定与标志对应配装置确定与针对多个标志中的每个的标志点对[0101]在不限于此的情况下，图像匹配装置响应于从第一图像710针对对象检测到多个标志而基于与该多个标志中的一个标志相关联的目标点来确定与第二图像720中的剩余的装置可基于针对标志的一部分确定的目标点来估计与剩余的标志对应800还包括存储器830。处理器820和存储器830还分别代表一个或多个处理器820和一个或[0108]处理器820从第一图像提取包括对象的标志点的标志块，并从第二图像提取与标志块对应的目标块。处理器820基于标志块与目标块之间的匹配来确定第二图像中的与标[0109]存储器830暂时地或半永久地存储用于执行图像匹配方法的数据。例如，存储器[0110]在一个示例中，图像匹配装置800不需要用于每一种图像类型的脸部检测器和脸装置800使用针对单个图像开发的特征点检测器来检测针对不同类型的[0114]参照图10，图像匹配装置可代表或应用于安全管理系统1000(例如，闭路电视[0115]通过硬件组件来实现在此针对图1至图10描述的图像匹配装置800、图像获取器实现执行本申请中描述的操作的硬件组件中的一个或多个。可通过一个或多个处理元件指令以实现期望的结果的任何其他装置或装置的组合)来实现处理器或计算机。在一个示据(MISD)多处理以及多指令多数据(MIMD)多[0116]执行在本申请中描述的操作的方法通过计算硬件(例如，通过一个或多个处理器处理器和一个控制器可执行单个操作或者两个权利要求和它们的等同物的精神和范围的情况下可在这些示例中进行形式和细节的各种同物的范围内的所有变化将被解释为包括在本公开