CN114616823B 电子相机中的动态自然相机过渡的系统和方法 （惠普发展公司有限责任合伙企业）

2022.04.24PCT/US2020/05252320WO2021/062011EN2021.04.01业US2014085404A1,2014.03.27US2019199967A1,2019.06.27电子相机中的动态自然相机过渡的系统和一种令人愉悦地且无需用户输入或控制地地基于预期新场景的中心与当前场景的边界的2基于所述房间中的发言者的所确定的数量、所述房间中的发言者基于对所述平滑还是切换的确定来执行所述如果所述新场景的所述中心不在所述当前场景的边界4.根据权利要求2所述的方法，其中，所述缓动函数以每秒30帧在6.一种用于操作视频会议设备以在视频会议中的房基于所述房间中的发言者的所确定的数量、所述房间中的发言者基于对所述平滑还是切换的确定来执行所述其中，确定所述过渡应该是平滑还是切换是基于确定所述两个9.根据权利要求7所述的方法，其中，所述缓动函数以每秒3基于所述房间中的发言者的所确定的数量、所述房间中的发言者基于对所述平滑还是切换的确定来执行所述过渡到所述新场景，述当前场景的边界内，如果所述新场景的所述中心在所述当前场景的边界内则使用平滑，并且如果所述新场景的所述中心不在所述当前场景的边界内则使其中，确定所述过渡应该是平滑还是切换是基于确定所述两个421.一种用于在视频会议中的房间的场景之间过渡的视频会议设备，所述视频会议设基于所述房间中的发言者的所确定的数量、所述房间中的发言者基于对所述平滑还是切换的确定来执行所述过渡到所述新场景，述当前场景的边界内，如果所述新场景的所述中心在所述当前场景的边界内则使用平滑，并且如果所述新场景的所述中心不在所述当前场景的边界内则使且24.根据权利要求22所述的视频会议设备，其中，所述26.一种用于在视频会议中的房间的场景之间过渡的视频会议设备，所述视频会议设5基于所述房间中的发言者的所确定的数量、所述房间中的发言者基于对所述平滑还是切换的确定来执行所述过渡到所述新场景，29.根据权利要求27所述的视频会议设备，其中，所述所述处理器执行权利要求6至10中任一项6[0003]具有麦克风阵列的语音跟踪相机可以帮助在视频会议期间朝向正在发言的参与[0004]如美国专利第8,248,448号中公开的一种解决方案(其通过引用并入本文)是使用[0006]在根据本发明的实施例中，令人愉悦地完成场景改变并且无需用户输入或控发言者的位置以及基于当前场景和预期场景的重叠，决定是执行平滑过渡还是进行切换。7视频编码解码器32的视频模块30。这些模块20/30可操作地联接到控制模块40和网络模块中的一个或多个麦克风捕获音频并将该音频提供给音频模块20和音频编码解码器22进行[0021]单独地，具有正交布置的麦克风62的麦克风阵列60A-B也捕获音频并将该音频提[0023]图3是端点10的以硬件为中心的框图。示例性视频会议设备80包括处理单元5028易失性部分两者的存储器504包括执行连接到处理单元502的期望模块506(诸如音频模块以太网接口)连接到处理单元502以允许与远端通信。输入/输出(I/O)接口510连接到处理[0024]通过对上述视频会议端点和部件的理解，现在讨论转向所公开的端点10的操作。150在视频会议期间使用视频处理160和音频处理170两者来控制相机50的操作。视频处理160和音频处理170可以个体完成或组合在一起以增强端点10的操作。虽然在下面简要描视频处理160和音频处理170优选地是存储在模块506中并在处理单元502上执行来自端点的扬声器的联接声音。音频处理170还使用过滤来从语音跟踪中消除非语音音频[0027]音频处理170可以使用来自附加音频提示的处理，诸如使用桌面麦克风元件或盒(28)可以具有定位在不同方向的若干麦克风，所以可以确定音频源相对于那些方向的方[0028]当参与者最初发言时，麦克风盒(28)可以获得参与者相对于麦克风盒(28)的方向。这可以在映射表等中映射到利用阵列(60A-B)获得的参与者的位置。在稍后的某个时9y[0033]用于在特定时间t内将变量v从值A过渡为值B的一种方法是标准化(t)的值范围并值函数(f(t))将定义感知到的运动随变量(v[0034]在EPTZ相机运动的情况下，如果将该技术同时应用于用于描述两个相机场景(A、[0035]通常在图形动画中使用的运动效果在应用于视频输出时用于模拟自然相机移[0037]存在将产生具有独特加速度和减速度的不同类型的运动的无尽的多项式和三角视频流，因此优选方法是将值基于相机的帧速率(fps或每秒帧数)。例如，如果帧速率为AA)BB)ABAB6t5-15t4+10t的缓入缓出函数的80帧(以每秒30帧(30fps))提供令人愉悦的过渡。从60到[0053]针对当前场景(场景A)的宽度和高度评估场景A和B的中心点被用作初始计算以确[0059]计算该容差的另一种方法是计算两个场景的交叉的区域并且使该决定基于与该频模块20和视频模块30协作的控制模块40或与视频处理160和音频处理170协作的控制方基于发言者的位置以及当前场景和预期场景的重叠，决定是执行平滑过渡还是进行切换。平滑过渡的优选值是在80帧上执行过渡，但60-100帧的值也适合提供令人愉悦的观看体形地体现程序指令的非暂时性可编程存储设备(有时称为计算机可读介质)包括但不限于：[0069]优选和其他实施例的前述描述不旨在限制或约束申请人构思的发明概念的范围