CN114827458B 摄像设备及其控制方法和存储介质 （佳能株式会社）

201880081863.22018.12.04号US2007211161A1,2007.本发明提供摄像设备及其控制方法和存储2状态检测部件，用于检测与所述摄像设备的移动状态有关的信息控制部件，用于基于所述状态检测部件所检测到的、与所述摄像所述状态检测部件检测与所述摄像设备的移动速度有关的信息作为与所述摄像设备与所述摄像设备被安装的状态有关的信息来对进行在所述摄像设备被安装的状态是从颈部悬挂的状态的情况下与所述移动速度有关的信息来对所述被摄体检测部件搜索被摄体的范3所述第三速度移动的情况下，所述控制部件使所述被摄体检测部件搜索被摄体的范围变像部件用于基于所述被摄体检测部件所检测到的被摄体的信息来使得所述摄像部件进行及用于从所述摄像部件所拍摄到的图像数据中检测被摄体的被摄体检测部件，其特征在状态检测步骤，用于检测与所述摄像设备的移动状态有关的信息控制步骤，用于基于在所述状态检测步骤中检测到的、与所述22.一种存储有程序的计算机可读存储介质，所述程序用于使得计算机执行根据权利4[0003]在无需来自用户的拍摄指示的情况下周期性地进行连续拍照的生活记录照相机[0004]专利文献2公开了在被配置为能够改变拍摄方向的摄像设备中应用的、自动搜索照相机自动平摇和俯仰以搜索到周边的被摄体并按包括所检测到的被摄体的视角进行拍5[0019]图1A是示意性示出用作根据本发明的摄像设备的第一实施例的照相机的外观的[0020]图1B是示意性示出用作根据本发明的摄像设备的第一实施例的照相机的外观的6[0051]图1A和图1B是示意性示出用作根据本发明的摄像设备的第一实施例的照相机的外观的图。图1A所示的照相机101设置有电源开关、以及能够进行照相机操作的操作构件由作为能够相对于固定部103进行转动地驱动的机构的俯仰转动单元104和平摇转动单元[0052]俯仰转动单元104包括能够沿在图1B中示出的纵摇方向转动地驱动镜筒102的马所示的各轴是相对于固定部103的位置定义的。在照相机101的固定部103中布置有角速度计106和加速度计107。照相机101基于来自角速度计106和加速度计107等的输出信号来检测振荡，并且可以通过转动地驱动俯仰转动单元104和平摇转动单元105来校正镜筒102中203包括调整焦点的调焦透镜。调焦驱动控制单元204控制调焦单元203的驱动。摄像单元[0055]图像处理单元207对通过对模拟图像信号进行A/D转换所获得的数字图像数据应图像处理单元207输出的数字图像数据由图像记录单元208转换成诸如JPEG等的记录所用[0056]镜筒转动驱动单元205通过驱动俯仰转动单元104和平摇转动单元105来使得镜筒102沿俯仰方向和平摇方向转动。装置振荡检测单元209包括用于检测照相机101在三个轴7[0057]音频输入单元213经由照相机101中所设置的麦克风从照相机101的周边获得音频理后的音频信号由第一控制单元223发送至存储器215。存储器215临时存储从图像处理单元207和音频处理单元214获得的图像信号和音频[0058]图像处理单元207和音频处理单元214读出存储器215中临时存储的图像信号和音频信号等，并且对该图像信号和音频信号进行编码以生成压缩图像信号和压缩音频信号。第一控制单元223将该压缩图像信号和压缩音频信号发送至记录/重放单[0059]记录/重放单元220将图像处理单元207和音频处理单元214所生成的压缩图像信图像处理单元207所生成的压缩图像信号发送至记录/重放单元220，并且使得将这些信号且能够记录照相机101所生成的诸如压缩图像信号、压缩音频信号和音频信号等的各种数[0061]记录/重放单元220读出(或重放)记录介质221中所记录的压缩图像信号、压缩音压缩音频信号发送至图像处理单元207和音频处理单元214。图像处理单元207和音频处理麦克风所配置于的平面的方向，因而能够进行后面将说明的搜索到被摄体以及自动摄像特定语音命令时，音频处理单元214向第一控制单元223或第二控制单元211等输出检测触[0063]除了控制照相机101整体的主系统的第一控制单元223之外，照相机101还设置有用于控制第一控制单元223的电力供给的第二控制单元211。第一电源单元210和第二电源单元212分别向第一控制单元223和第二控制单元211供给操作所用的电力。响应于按下照相机101中所设置的电源按钮，首先向第一控制单元223和第二控制单元211供给电力。然8自装置振荡检测单元209和音频处理单元214等的信息作为输入。第二控制单元211基于各时指示第一电源单元210向第一控制单元2[0064]音频输出单元218例如在摄像期间等从内置到照相机101中的扬声器输出预先设部装置之间发送和接收诸如(后面所述的)学习[0066]环境传感器226按每个预定周期检测照相机101的周边环境的状态。环境传感器226包括用于检测照相机101周围的温度的温度传感器、用于检测照相机101周围的气压的[0068]图3是示出照相机101和外部装置301之间的无线通信系统的结构的示例的图。照相机101是具有摄像功能的数字照相机，并且外部装置301是包括蓝牙通信模块和无线LAN[0069]照相机101和外部装置301能够使用第一通信302和诸如蓝牙低功耗(以下称为更多个通信功能、并且在根据控制站和从站之间的关系所执行的通信中这些通信功能中的为BLE等的第二通信303相比能够以更高的速度进行通信，并且第二通信303与第一通信302[0070]将参考图4来说明外部装置301的结构。除了无线LAN所用的无线LAN控制单元4019于实现公共无线通信的各种控制的驱动器处理、以及与公共无线通信有关的协议处理等。公共无线通信例如符合IMT(国际多媒体电信)标准或LTE(长期演进)标准等。分组发送/接收单元403执行用于执行与无线LAN和BLE通信以及公共无线通信有关的分组的发送和接收至少之一的处理。尽管本实施例将外部装置301描述为在通信中执行分组的发送和接收至单元404中所存储的控制程序来实现(后面所述[0072]电源单元410向外部装置301供给电力。显示单元407具有使得其能够使用LCD或407和操作单元408例如可以由诸如触摸面板等[0073]音频输入/音频处理单元409例如使用内置到外部装置301中的通用麦克风来获得登记为由照相机101的音频处理单元214经由使用无线LAN的第一通信302所要识别的特定[0074]GPS(全球定位系统)接收单元405接收从卫星通信来的GPS信当前GPS位置信息在预先设置的位置范围内(在以检测位置为中心的具有预定半径的范围[0075]如上所述，照相机101和外部装置301通过使用无线LAN控制单元401和BLE控制单[0077]图5是示出能够与照相机101进行通信的外部装置501的结构的示例的图。照相机[0078]外部装置501例如被配置为能够附接至用户的手臂等，并且配备有用于按预定周[0080]用于检测用户的移动状态的抖动检测单元603例如包括加速计和陀螺仪传感器及诸如LCD或LED监视器等的用于输出从视觉上可识别的信息[0081]图6是示出外部装置501的结构的图。如上所述，外部装置501例如包括控制单元[0082]控制单元607例如通过执行存储单元608中所存储的控制程序来控制外部装置501[0083]电源单元606向外部装置501供给电力。显示单元604具有能够使用LCD或LED等输显示单元604和操作单元605例如可以由诸如触摸面板等的共同构件构成。操作单元605例如使用内置到外部装置501中的通用麦克风来获得用户所发出的语音，并且可被配置为使[0084]由生物信息检测单元602和抖动检测单元603获得且由控制单元607处理后的各种[0086]图7A和7B是示出根据本实施例的照相机101的第一控制单元223所处理的操作的来自检测振荡的传感器(诸如装置振荡检测单元209中的陀螺仪传感器或加速计等)的信处理单元214所检测到的音频信号、针对特定语音识别的检测触发信号、声音方向检测信动检测判断参数、语音检测判断参数和经过时间检测参数)通信至第二控制单元211(子[0110]在响应于使用外部装置301中的专用应用的指示而设置自动图像传送模式、并且基于自前次图像传送起所经过的时间量和过去拍摄图像信息而判断为要自动传送图像的[0120]在基于自前次自动文件删除起所经过的时间量以及记录了图像的非易失性存储[0124]返回到图7A和图7B的说明，如果在步骤S705中判断为操[0129]图8是示出根据本实施例的照相机101的第二控制单元211所处理的操作的示例的[0139]可以基于来自附接至照相机101的加速计107的输出值来检测用户用他或她的指通过设置为特定频率范围的带通滤波器(BPF)，可以提取与由轻击引起的加速度变化相对应的信号范围。基于在带通滤波之后获得的加速度信号在预定时间TimeA内超过预定阈值[0141]可以基于来自附接至照相机101的陀螺仪传感器106和加速计107等的输出值来检等的输出的高频分量，并且利用低通滤波器(LPF)切断低频分量，之后输出被转换成绝对体并且用户正在步行)。也可以通过设置多个判断阈值和判断所使用的计数数量的条件等[0142]以上说明了通过判断来自振荡检测传感器的检测值来检测特定振荡状态的方[0147]使用基于大量音频数据通过机器学习所预先训练的网络[0152]在音频处理单元214内执行所述的判断处理，并且在步骤S805中使用预先学习的[0154]一旦在步骤S807中执行了用于检测所经过的时间量的处理，[0158]关于(1)，通过在步骤S804中执行的特定振荡状态检测处理来判断是否检测到特定振荡。关于(2)，通过在步骤S805中执行的特定声音检测处理来判断是否检测到特定声[0160]另一方面，如果在步骤S806中判断为第一控制单元223开启，则序列进入步骤223内的处理来执行振荡检测和特定声音检于拥有照相机101的用户而言更具用户友好性的照相机操作。后面将说明学习所使用的方后面将说明的学习来改变该判断处理所用的用于识别与预先登记的图案匹配的物体的物转动单元104和平摇转动单元105沿抵消所述绝对角度的角度方向移动来校正图像模糊的GPS位置信息等检测到的照相机角度和照相机移动量等来判断照相机的当前振荡/移动状机角度是否正大幅改变，以判断该状态是否是照相机101几乎未经历振荡的“静止拍摄状拍摄视角内的图像分割成在图10D中由附图标记13断为执行关注于为了面部认证所登记的且具者可以在预定时间量期间降低在后面将说明的步骤S910中拍摄到了图像的区域的重要度1323分别表示被摄体搜索范围。被摄体搜索范围例如被设置为相对于照相机的行进方向[0185]被摄体搜索范围1323表示在人物沿该图所示的方向(行进方向1324)正在移动时尽管图10E仅将被摄体搜索范围示出为在水平方向上改变，但也可以在垂直方向上以相同样频率的图像模糊校正量与基于平摇/俯仰搜索对象角度的驱动角度相加来计算平摇/俯置振荡检测单元209检测持续短时间段的高频加速度，来判断使用轻击操作作为触发的摄法采用从通过蓝牙(Bluetooth)连接至照相机的智能电话等例如使用专用应用发送来的快[0197]另外，可以根据在图7A的步骤S702中加载的第一控制单元223的启动条件来改变理单元219使用诸如图11所示的神经网络等的神经网络以及机器学习算法来执行基于用户以下操作：使用学习来改变用作供输入到神经网络中用的特征数据的被摄体信息(面部认[0237]例如，可以通过用户经由使用外部装置301中的专用应用的通信而手动设置特定[0239]例如，可以通过用户经由使用外部装置301中的专用应用的通信而手动设置要用所有区域的重要度级别或通过将这些区域的重要度级别相加到一起所获得的值等变得小[0245]可以通过根据剩余电池电量改变预定阈值来执行考虑到电池寿命的低电力模式经过的时间量和所拍摄到的图像数量来针对第二控制单元211(子CPU)设置下次取消低电经由使用外部装置301的专用应用的通信而手动设置摄像频度和启动频度[0246]可以采用如下的结构：通过累积针对从接通照相机101的电源按钮起直到断开电基于该校正量在步骤S905中执行平摇/俯仰驱动操作来执行图像模糊校正。在图像模糊校为输出，并且使用拍摄图像时的各种检测信息(通过向输入添加其它信息来进行判断，这些其它信图像中的模糊的平摇/俯仰驱动所需的范围。在曝光期间的运动范围中不存在余量的情况反的方向转动平摇/俯仰角度之后开始曝光，这使得可以确保运动范围并拍摄无模糊的图到拍摄图像为止所获得的检测信息而估计用于拍摄无模糊的被摄体的平摇/俯仰驱动速度执行了个人认证登记的被摄体的人物A和同样作为执行了个人认证登记的被摄体的人物B[0264]作为另一示例，计算作为执行了个人认证登记的人物A与通过普通物体识别所判[0265]另外，在针对作为执行了个人认证登记的被摄体的人物A检测到了高的微笑程度[0274]如参考图3所述，照相机101和外部装置301具有执行第一通信302和第二通信303用浏览照相机101中所保存的图像数据的缩略图图像。用户可以从缩略图图像中选择他或为了判断用户针对各图像的偏好所计算出的得分，将照相机101中的图像按从具有最高得[0282]尽管本实施例说明了用户经由外部装置301针对拍摄图像输入判断值的结构，但机101设置有触摸面板显示器，并且模式被设置为在用户按下触摸面板显示器的画面显示部中所显示的GUI按钮时显示拍摄图像的模式。可以通过用户在确认图像的同时针对各拍容易将这些图像经由公共无线控制单元406上传到共享服务器，因此很有可能包括与用户[0285]外部装置301的控制单元411被配置为能够使用专用应用以与照相机101中的学习[0288]可以经由下载到外部装置301的专用SNS应用获得用户他或她自己上传的图像以参数(神经网络权重、以及要输入到神经网共无线控制单元406获得在专用服务器中设置的学习参数，然后可以将这些学习参数设置[0296]外部装置301中的专用应用可以设置有能够经由用户操作进行手动编辑的功能，[0299]在步骤S704的模式设置判断处理内进行了用以开始学习模式判断的指示的情况判断处理结束。如果在步骤S1401中不存在来自外部装置的登记指示，则序列进入步骤的。如果在步骤S1402中从外部装置进行了学习指示，则序列进入步骤S1408，在该步骤[0302]在步骤S1403中，获得自执行前次学习处理(神经网络的权重的重新计算)起所经量DN(在自执行前次学习处理起所经过的经过时间TimeN期间为了学习所指定的图像的数TimeN小于预定值时的阈值DT的值的DTa被设置为大于作为在TimeN大于预定值时的阈值DT学习所用的数据数量DN是否大于阈值DT。如果数据数量DN大于阈值DT，则序列进入步骤[0306]在图7B的步骤S715中判断为学习模式并且序列进入步骤S716时，图14的序列开步骤S1502中所登记的信息来改变要输入到神经网络的元素。一旦步骤S1503的处理结束，[0309]如果在步骤S1504中不存在来自外部装置301的学习指示，则在步骤S1506中执行果来向文件(记录介质221)中所存储的所有拍中设置学习功能、并且通过将学习所需的数据通信至外部装置301来仅在外部装置侧执行[0324]在如图15C所示附接可穿戴附件1503的情况下，可以根据使用用途来大幅改变控的一个或多个处理器读出并执行该程序。本检测到的所述摄像设备的状态信息，来对所述被摄体检测部件搜索被摄体的范围进行控来自所述状态检测部件的检测结果来改变搜索检测到的所述摄像设备的状态信息，来对所述被摄体检测部件搜索被摄体的范围进行控被摄体的范围设置为相对于所述摄像设备的行进方向左右对称的部悬挂的状态的情况下，所述控制部件对所述被摄体检测部件搜索被摄体的范围进行限[0370]一种摄像设