CN114257723B 摄像设备及其控制方法以及存储介质 （佳能株式会社）

号KR20150029230A,2015.03.18本发明涉及摄像设备及其控制方法以及存述登记单元登记的被摄体与特定日期相关联的单元关联的日期不是当天或未由关联单元关联2其中，所述控制单元进行控制，使得与所述关联单元关联的所所述摄像设备还包括设置单元，所述设置单元被配置为将所述登2.根据权利要求1所述的摄像设备，还包括通知单元，所述通知单元被配置为通知用其中，在检测到所述关联单元关联的日期为当天的被摄体的所述检测通知给用户。其中，与关联日期不是当天或未关联日期的所登记的被摄体相所述控制方法还包括将所登记的被摄体设置为5.一种非暂时性计算机可读存储介质，其存其中，与关联日期不是当天或未关联日期的所登记的被摄体相所述控制方法还包括将所登记的被摄体设置为6.一种计算机程序产品，其包括用于使计算机执3述关联单元关联的所述特定日期不是当天或者未由所述关联单元关联日期的由所述登记4[0019]图13是示出根据本发明的一个或多个方面的与所拍摄图像的数量的比率相关的[0027]参考图1A，摄像设备101设置有用于操作电源开关(在后文中称为电源按钮)的操镜组和用于拍摄图像的图像传感器的壳体的镜头筒102。镜头筒102设置有驱动镜头筒102的抖动角度驱动俯仰旋转单元104和平摇旋转单元105旋转。摄像设备101被配置为校正作间的数据传输。非易失性存储器(电可擦除可编程只读存储器(EEPROM))216存储用于第一的电荷信息作为模拟图像数据输出到图像处理单元207。图像处理单元207对通过模数(A/5D)转换输出的数字图像数据应用诸如失真校正、白平衡调整和颜色插值处理等的图像处[0032]镜头筒旋转驱动单元205驱动俯仰旋转单元104和平摇旋转单元105，以分别在俯[0033]设备抖动检测单元209安装有例如用于检测摄像设备101的3轴方向上的角速度的角速度计(陀螺仪传感器)106和用于检测摄像设备101的3轴方向上的加速度的加速度计(加速度传感器)107。设备抖动检测单元209基于检测到的信号计算摄像设备101的旋转角[0034]音频输入单元213获取通过使用设置在摄像设备101上的麦克风从摄像设备101周由音频处理单元214处理的音频信号发送到存储器215。存储器215临时存储分别由图像处理单元207和音频处理单元214获得的图像信号和音频[0035]图像处理单元207和音频处理单元214分别读取临时存储在存储器215中的图像信号和音频信号，并对图像信号和音频信号进行编码以生成压缩图像信号和压缩音频信号。第一控制单元223将压缩图像信号和压缩音频信号发送到记录[0036]记录/再现单元220将分别由图像处理单元207和音频处理单元214生成的压缩图像信号和压缩音频信号以及其它摄像控制数据记录在记录介质221中。在音频信号不被压单元207生成的压缩图像信号发送到记录/再现单元220，并使记录/再现单元220将这些信[0038]记录/再现单元220读出(再现)记录在记录介质221中的压缩图像信号、压缩音频取的压缩音频信号分别发送到图像处理单元207和音频处理单元214。图像处理单元207和过程对这些信号进行解码，并将解码后的信号发送到视频输出单元217和音频输出单元音场景识别中，音频处理单元214通过使用基于大量音频数据完成机器学习的学习模型来6具体的机器学习算法还包括通过使用神经网络自动生成特征量和绑定权重系数以供学习[0042]与控制摄像设备101的整个主系统的第一控制单元223分开设置的第二控制单元[0043]第一电源单元210和第二电源单元212分别供电以操作第一控制单元223和第二控备抖动检测单元209和音频处理单元214接收信息。第二控制单元211进行用于基于各种输[0044]音频输出单元218例如在摄像期间从摄像设备101的内置扬声器输出预设音频模[0045]发光二极管(LED)控制单元224例如在摄像期间控制设置在摄像设备101上的LED[0046]视频输出单元217包括例如视频输出终端，并且发送图像信号以在连接的外部显示器上显示视频图像。音频输出单元218和视频输出单元217可以是诸如高清多媒体接口终端等的一个组合终端。音频信号以及压缩图像信号等的数据的通信发送和接收。通信单元222还接收包括摄像开摄像设备101通信的外部设备的指令来驱动摄像设备101。在摄像设备101和外部设备之间发送和接收诸如与要由学习处理单元219(如下所述)处理的学习相关的各种参数等的信[0049]图3示出摄像设备101和外部设备智能装置301之间的无线通信系统的示例配置。摄像设备101是具有摄像功能的数字照相机，并且外部设备301(在下文中称为智能装置301)是包括蓝牙通信模块和无线LAN通信模块的[0050]摄像设备101和智能装置301能够通过基于符合电气和电子工程师协会(IEEE)802.11标准系列的无线LAN的通信302、以及具有控制站和从站之间的主从关系的诸如7各个通信设备具有至少两个不同的通信功能。在基于控制站和从站之间的关系的通信中，[0052]将参考图4描述作为外部通信设备的示例的智能装置301的配置。智能装置301是[0053]智能装置301除了包括用于无线LAN的无线LAN控制单元401和用于BLE的BLE控制包括包(packet)发送/接收单元403。无线LAN控制单元401进行与对无线LAN的射频(RF)控无线通信相关的协议处理。公共无线通信符合例如国际多媒体电信(IMT)标准和长期演进接收其中至少之一进行处理。将智能装置301在通信中进行包的发送和接收其中至少之一储例如由控制单元411执行的控制程序和诸如通信所需的参数等的各种信息。在控制单元[0055]电源单元410向智能装置301供电。显示单元407具有输出可通过使用液晶显示器[0056]音频输入/音频处理单元409可被配置为从内置于智能装置301中的通用麦克风来[0057]音频输入/音频处理单元409还经由智能装置301中的专用应用程序通过用户的语音获取音频命令。音频输入/音频处理单元409可以将音频命令登记为用于指示摄像设备101的音频处理单元214经由通过无线LAN进行的通信302来识别特定音频命令的特定音频[0058]GPS接收单元405接收从卫星发送的GPS信号，并分析GPS信号以估计智能装置301的当前位置(经度和纬度信息)。或者，GPS接收单元405可以基于通过使用Wi-Fi定位系统(WPS)从周围无线网络获得的信息来估计智能装置301的当前位置。在获取的当前GPS位置8制单元402将运动信息通知给摄像设备101，以用作用于自动摄像和自动编辑的参数(如下BLE控制单元402将运动信息通知给摄像设备101，以用作自动摄像和自动编辑(如下所述)[0059]如上所述，智能装置301在经由无线LAN控制单元401和BLE控制单元402的通信中频命令登记数据，并基于GPS位置信息发出预定位置检测通知和地点移动通知。智能装置301还经由智能装置301中的专用应用程序发送和接收用于学识别处理的流程图来描述停止自动摄像。在自动摄像被停止的情况下(步骤S501中的是)，[0064]在步骤S502中，第一控制单元223使图像处理单元207对摄像单元206所拍摄的信[0069]还存在通过使用所拍摄图像中的色调或饱和度的直方图来提取特征被摄体的方9223基于由设备抖动检测单元209获取的角速度和加速度信息来计算摄像设备101的绝对角[0076]这使得第一控制单元223能够判断当前状态是否为摄像设备101附接到机动车并[0077]第一控制单元223判断角度是否大幅度改变以判断当前状态是否为摄像设备101[0080]在步骤S505中，第一控制单元223进行被摄体搜索处理。被摄体搜索包括以下处中心的整个圆周上进行区域划分(假设原点O为摄像设备101的位置)。在图8A中的示例中，的面部大小和朝向、检测到面部的概率、针对各个人的面部表情和个人认证结果来计算基于被摄体状态的重要性级别。基于场景状态的重要性级别的示例包括一般物体识别结果、在桌子等上来记录包括用户的许多图像。由于在这种情况下可以通过平摇/俯仰操作来进可以在预定时间段内降低重要性级别。被确定为搜索对象区域，然后计算掌握视角中的搜索对象区域所需的平摇/俯仰搜索目标223基于图像抖动校正量和平摇/俯仰搜索目标角度在控制采样中增加驱动角度以计算平[0090]在步骤S508中，第一控制单元223读取频率参数作为指示自动摄像的容易性的设的情况下所拍摄图像的数量介于频率参数被设置为“低”的情况下所拍摄图像的数量和频[0092]在步骤S510中，第一控制单元223判断自步骤S705(如下所述)中开始频率参数设[0095]现在将描述对自动摄像的判断。第一控制单元223通过判断重要性得分是否超过到重要性得分。假设在重要性得分超过2000分的情况下进行自动摄像的设计的示例情况。由于当检测到具有高优先级的被摄体时加1000分，因此即使直到110秒才进行随着时间的准不限于此。加分标准的示例包括语音音量增大的情况以及姿势和手势的量增大的情况。[0099]如果在中途检测到被摄体，则可以在120秒中使增加重要性得分的时间更早地开得在上述示例中未检测到被摄体的情况下直到进行自动摄像为止需要120秒。尽管在该示可以每秒加2000/60分，或者直到55秒才添加分数并在剩余的5秒中直到60秒为止每秒加[0102]这完成了对是否进行自动摄像的判断的描述。在第一控制单元223判断为进行自发出的声音被输入到摄像设备101的内置麦克风时，音频输入/音频处理单元409进行语音摇/俯仰和变焦操作执行被摄体搜索和摄像处理。停止自动摄像的目的包括停止自动摄像通过使用音频指令发出摄像指令的情况下，停止自动摄像的目的还包括停止平摇/俯仰操下(步骤S604中的是)，处理进入步骤S606。另一方面，在未检测到命令字的情况下(步骤[0109]在步骤S605中，第一控制单元223判断从已检测到唤醒字且进入命令字等待状态该静止图像拍摄命令是用于请求摄像设备101拍摄和记录一个静止图像的命令。在第一控制单元223判断为命令字是静止图像拍摄命令的情况下(步骤S606中的是)，处理进入步骤元207将摄像单元206拍摄的信号转换为JPEG文件，然后图像记录单元208将JPEG文件记录第一控制单元223判断为命令字是被摄体搜索命令的情况下(步骤S608中的是)，处理进入的被摄体搜索处理确定了搜索对象区域，并且已经通过步骤S506中的平摇/俯仰驱动和步[0115]在步骤S611中，第一控制单元223判断检测到的命令字是否是运动图像记录开始单元223判断为命令字是运动图像记录开始命令的情况下(步骤S611中的是)，处理进入步[0117]在步骤S613中，第一控制单元223判断检测到的命令字是否是运动图像记录停止括用于进行用户指定的方向上的平摇/俯仰操作的命令的处理，以及用于改变包括曝光校[0120]在步骤S616和S617中，第一控制单元223对在步骤S602中停止的自动摄像进行重频率设置处理。这是因为，由于在开始运动图像记录之后连续记录来自摄像单元206的信序来进行频率设置。在通过使用专用应用程序进行频率设置的情况下(步骤S701中的是)，如图9中所示智能装置301上的专用应用程序的画面中的自动摄像频率的项中选择“低”、[0127]通过智能装置301的专用应用程序，准备静止图像和运动图像作为要自动拍摄的[0128]用户还可以将针对摄像设备101要拍摄的场景而进行搜索的范围设置作为相对于对于正面方向在向右和向左方向各自上的30度)、180度的范围(相对于正面方向在向右和重要性是根据图像是否包括人、或者诸如对话等的人声是否记录在图像中来数值地计算第一控制单元223判断为语音识别处理调用了频率设置的情况下(步骤S703中的是)，处理[0132]在步骤S704中，第一控制单元223将频率参数设置为与可在步骤S702中设置的频率相比更高的频率。这是因为当用户发出摄像指令时的定时至少是用户期望的摄像的定[0133]在步骤S705中，第一控制单元223将频率提升时间设置为直到在步骤S704中设置在经由通信单元从智能装置301或BLE遥控器发出摄像指令的情况下，第一控制单元223也像设备101中的加速度传感器的特定振动模式相对应的处理的指令的情况下，第一控制单对用户的手的运动进行分析的结果接收到基于手势的手势指令的情况下，第一控制单元[0138]本示例性实施例通过平摇/俯仰和变焦驱动跟踪被摄体，来拍摄用户所期望的图静止图像拍摄指令的情况下能够拍摄至少四个不同的图像，从而避免未拍摄到图像的情过在摄像设备101中预登记关于特定人的信息来与其它人相比优先拍摄特定人的图像的参示出显示在智能装置301的专用应用程序上的人[0146]生日框1004是用于显示识别出的人的生日的区域。生日框1004的默认显示为空[0147]尽管已经在上文中围绕将被摄体的生日登记为与登记的被摄体相关联的特定日[0148]以这种方式输入的被摄体信息经由无线LAN控制单元401或BLE控制单元402从智能装置301发送到摄像设备101。摄像设备101将接收到的被摄体信息记录在非易失性存储[0150]将参考图12描述摄像设备101进行的各个被摄体的优先级的判断方法。当摄像设[0151]在步骤S1201中，第一控制单元223从非易失性存储器216获取识别出的被摄体编[0152]在步骤S1202中，第一控制单元223确认针对各个识别出的被摄体编号的优先设日。更具体地，在第一控制单元223判断为当前日期是特定日期的情况下(步骤S1205中的先设置引起的优先设置值等于通过生日引起的优先级的增加量的情况下，第一控制单元223对通过用户进行的优先设置下的被摄体和不在优先设置下的被摄体(今天是生日)拍摄的情况下，第一控制单元223优先于通过用户进行的优先设置下的被摄体而拍摄今天生日摄体的语音的大小等的其它信息所计算出的值。第一控制单元223还可以使用随时间变化[0161]在自动摄像中使用优先级的目的是以各种方式和以优选构图拍摄更重要被摄体的被摄体中具有最高优先级的被摄体作为跟[0163]第一控制单元223可以使用关于控制要拍摄的图像的数量(如下所述)的信息来确单元223通过使用各个被摄体的优先级的比率作为要拍摄的图像的数量的比率的目标值，元223在进行构图调整(如下所述)之后拍摄图像。尽管该示例使用被摄体相对于所有过去主要拍摄具有高优先级的被摄体，第一控制单元223进行平摇控制和俯仰控制以将视角中制单元223调整变焦位置以实现在视角中的被摄体中具有最高优先级的被摄体的优选大构图的适用方法的示例包括调整照相机的方向和变焦位置以将视角中所包括的被摄体的图5的步骤S512中对是否进行自动摄像的判断的描述中描述了用于确定重要性得分的算元223基于与被摄体相关联的日期和时间信息自动改变被摄体的优先级。这使得能够在更能够以多级方式设置在特定日期被摄体优先级的增加量的摄像设备来描述第二示例性实[0174]除使用多个星标记的方法外的其它适用方法的示例包括通过使用搜索栏或下拉[0175]尽管已经在上文中围绕将被摄体的生日登记为与登记的被摄体相关联的特定日期的方法描述了本示例性实施例，但是与登记的被摄体相关联的特定日期不必限于生日。[0177]将围绕能够使用包括多个被摄体的事件作为特定日期来设置针对各个事件的优[0178]图15示出作为根据本示例性实施例的智能装置301的专用应用程序的画面的事件设置画面。智能装置301的专用应用程序通过顶部画面(未示出)显示用于显示事件设置画[0181]特定日期姓名设置区域1504向用户提供任意设置在事件设置画面中所设置的事[0182]与特定日期相关联的被摄体的优先设置区域1505向用户提供针对参与事件画面根据第二示例性实施例的优先设置项和生日优先设置[0184]在根据第三示例性实施例的事件设置画面中将多个被摄体登记为参与者的情况[0185]确定在特定日期的被摄体优先级的适用方法的示例包括仅在视角中包括多个被[0189]将围绕不仅在特定日期且在包括特定日期前后的若干天增加被摄体的优先级的不仅在特定日期而且在包括特定日期前后的若干天添加被摄体的优先级的方法来描述第[0195]图16A示出在根据上述示例性实施例的优先级已经改变的情况下要显示的通知[0196]通知1601显示在智能装置301的画面上。该消息包括优先级已经改变的被摄体的[0199]第一控制单元223可以基于通知对象被摄体的数量来改变通知1601的显示内容。图16B示出存在多个通知对象被摄体(在该情况下为三个被摄体)的情况。消息1603包括记录在被摄体信息中的通知对象被摄体的姓名(图16A中的“Airi”)和特定日期的事件名称 优先级改变的状态，表示优先级如何改变的字“许多”可以由表示数量的另一合适的诸如括存储在记录介质中的被摄体的图像的方法和不显示被摄体的图像1602的方法。在如图[0203]尽管通知1601是在改变优先级并一旦进行摄像之后发出的，但本发明不限于此。适用方法的示例包括在被摄体信息检测单元检测到被摄体之后立即发出通知1601的方法、[0204]本示例性实施例通过基于与被摄体相关联的日期和时间信息自动改变被摄体优[0205]将围绕用于在特定日期检测到被摄体时向用户询问是否[0206]图17A和17B示出根据上述示例性实施例的用于在改变被摄体的优先级时向用户[0207]通知1701包括被摄体的图像1602、消息1703、用于批准消息170