CN113678164B 图像处理装置、图像处理方法以及计算机可读存储介质 （富士通株式会社）

2021.10.09PCT/JP2019/0168692019.04.19WO2020/213166JA2020.10.22储部存储有在对被拍摄体指示脸部的朝向的变在脸部区域中在规定方向上排列的多个像素的2存储部，其存储有在对被拍摄体指示脸部的朝向的变更时拍摄动作确定部，其从所述时间序列的多个图像分别提取脸部中在规定方向上排列的关于所述脸部图像的二等分线存在于对称位置的2个像素的像素值在所述规定方向上排列的像素的像素值的所述规定方向上的变化特性表示所述规定所述动作确定部进一步对所述脸部区域的像素应用图像校正处理所述动作确定部进一步求出所述脸部区域的纵横比，基于根据所述时所述动作确定部进一步求出所述脸部区域的纵横比，在所述左右对称准左右对称性和所述基准纵横比储存于所述存储部之后求出的左右对称性与所述基准左该图像处理装置还具备选择部，该选择部选择从所述时间在对所述被拍摄体多次指示所述脸部的朝向的变更，并且确定在对所述被拍摄体指示所述脸部的朝向的变更之后，根据在3将在对被拍摄体指示脸部的朝向的变更时拍摄所述被拍摄体而得的时间序列的多个基于在所述脸部区域中在规定方向上排列的关于所述脸部图像的二等分线存在于对称位置的2个像素的像素值的差分来求出在规定方向上排列的像素的像素值的所述规定方基于根据所述时间序列的多个图像分别求出的所述规定方向上的变化特性的时间序将在对被拍摄体指示脸部的朝向的变更时拍摄所述被拍摄体而得的时间序列的多个求出在所述脸部区域中在规定方向上排列的关于所述脸部图像的二等分线存在于对称位置的2个像素的像素值的差分来求出在规定方向上排列的像素的像素值的所述规定方基于根据所述时间序列的多个图像分别求出的所述规定方向上的变化特性的时间序4[0007]在基于现有的脸部特征点的真伪判定中，很难完全地防止使用了照片的冒充攻存储有在对被拍摄体指示脸部的朝向的变更时拍摄被拍摄体而得的的多个像素的像素值的变化特性，基于根据多个图像分别求出的变化特性的时间序列变5[0028]图1表示实施方式的图像处理装置的功能的构成例。图1的图像处理装置101包含[0030]接下来，动作确定部112求出在脸部区域中沿规定方向排列的多个像素的像素值的变化特性(步骤202)，并基于根据多个图像分别求出的变化特性的时间序列变化来确定[0034]拍摄装置302例如是具有CCD(Charged-CoupledDevice：电荷耦合器件)、CMOS6(ComplementaryMetal-Oxide-Semiconductor：互补金属氧化物半导[0035]图像处理装置301例如是生物体认证装置，进行基于登记对象者或者认证对象者[0036]动作指示部314在登记处理或者认证处理中，对被拍摄体指示进行脸部的朝向的[0038]拍摄装置302在被拍摄体进行所指示的动作的期间拍摄被拍摄体的脸部，向图像处理装置301输出所拍摄的影像。图像取得部312从由拍摄装置302输出的影像中取得时间[0039]动作确定部315从各图像331中检测在图像331中摄像的脸部的位置，提取包含脸[0040]图4表示根据图像331生成的脸部图像的例子。在图4的脸部图像中将x轴和y轴设[0041]鼻子位于穿过短边的中点的中心线401上，左右的眼睛排列在与短边平行的直线多个像素的像素值的变化特性，求出根据N张脸部图像求出的像素值的变化特性的时间序[0043]然后，动作确定部315使用像素值的变化特性的时间序列变化和纵横比的时间序像素值的变化特性的时间序列变化和纵横比的时间序列变化来更[0045]在对被拍摄体多次指示脸部的朝向的变更的情况下使用正解计数器334、非正解7[0047]判定部316使用正解计数器334、非正解计数器335和异常计数器336所示的计数[0050]在判定结果337表示真人的情况下，选择部317从根据N张图像331分别生成的N张[0052]在登记处理中，登记部319将所提取的特征信息作为登记对象者的登记生物体信[0054]动作确定部315也可以取代脸部图像区域为脸部整体的图像，而将脸部的部分区域的图像作为脸部图像使用。脸部的部分区域也可以是包含从眼睛到下颌的部分的区域。8为0。动作确定部315也可以使用各像素的RGB、色差信号等来取代各像素的亮度值而计算[0066]图5(a)表示被拍摄体为真人的脸部的情况下的左右对称性的时间序列变化的例[0070]另外，动作确定部315也可以预先记录使不确定的多个人物进行相同的动作时的9[0072](A1)在脸部图像中摄像的鼻子位于比左右的瞳孔的中央的位置靠左的位置的情[0073](A2)动作确定部315比较脸部图像的左侧区域的亮度值的平均值LV与脸部图像的[0074]动作确定部315也可以求出在像各脸部图像的上下的方向那样，在左右以外的方[0079]例如，动作确定部315对在登记处理中根据登记对象者朝向正面的脸部图像而计[0082]也可以预先记录动作指示部314对被拍摄体指示动作的指示次数，基于正解计数器334和非正解计数器335的计数值相对于指示次数的比例，来进行被拍摄体的真伪判定。间序列平滑地变化，但在进行了基于伪造物的被拍摄体的不适当的动作的情况下，如图5作指示部314对被拍摄体指示脸部的朝向的变更等动作(步骤901)，图像取得部312从由拍摄装置302输出的影像中取得时间序列的部图像的一部分或者全部来确定被拍摄体的动作，而生成表示所确定的动作的动作信息情况下，生成表示被拍摄体为伪造物的判定结果337。在不清楚是真人还是伪造物的情况处理为登记处理的情况下，登记部319将所提取的特征信息作为被拍摄体的登记生物体信[0097]图8是表示图7的步骤904中的动作确定处理的例子的流程图。首先，动作确定部315从N张脸部图像中选择1张脸部图像，而计算所选择的脸部图像的左右对称性(步骤1001)。而且，动作确定部315根据左右对称性的时间序列变化来判定脸部的朝向(步骤和纵横比的时间序列变化来判定脸部的朝向(步骤1007)，检查脸部是否朝向正面(步骤出过去的M张脸部图像各自的鲜明性，对于这些脸部图像的左右对称性、纵横比以及鲜明计数器336的计数值比TH3大的情况下(步骤1110、是)，判定部316判定为被拍摄体为伪造在动作指示部314对被拍摄体指示脸部的朝向的变更之后，在根据在规定时间内拍摄的图[0112]图2和图7～图9的流程图仅仅是一例，也可以根据图像处理装置的结构或者条件[0114]在图8的动作确定处理中，在仅基于脸部图像的左右对称性而确定被拍摄体的动[0115]在图9的真伪判定处理中，在不将被拍摄体的不适当的动作用于真伪判定的情况[0116]图4的脸部图像、图5的左右对称性的时间序列变化以及图6的纵横比的时间序列变化仅仅是一例，脸部图像和左右对称性以及纵横比的时间序列变化根据被拍摄体而变[0117]图10表示作为图1的图像处理装置101和图3的图像处理装置301而使用的信息处[0118]存储器1202例如为ROM(ReadOnlyMemory：只读存储器)、RAM(RandomAccess1202能够作为图1的存储部111或者图3的存储部311来使用。[0119]CPU1201(处理器)例如利用存储器1202来执行程序，由此作为图1的动作确定部的动作指示，处理结果也可以是判定结果337。输出装置1204能够作为图3的显示部313使录介质1209为存储设备、软盘、光盘、光磁盘等。便携式记录介质1209也可以是CD-ROM[0123]这样，储存有用于处理的程序和数据的计算机可读取的记录介质是存储器1202、[0124]网络连接装置1207是与LAN(LocalAreaNetwork：局域网)、WAN(WideArea而使用。省略输入装置1203和输出装置1204。在不使用便携式记录介质1209或者通信网络的情况