CN119451734A 用于基于真实世界活动或游戏情境调整耳机除噪的方法 （索尼互动娱乐股份有限公司）

2024.11.21PCT/US2023/0188392023.04.17WO2023/235063EN2023.12.07用于基于真实世界活动或游戏情境调整耳与所呈现的视频和音频的交互而产生的用户输2执行交互式应用程序，其中执行所述交互式应用程序包括渲染虚拟环境的视频和音从感测所述用户所处的本地环境的至少一个传感器接收2.如权利要求1所述的方法，其中所述主动除噪被配置为在通过所述耳机呈现所述虚拟环境的所述音频期间降低来自所述本地环境3.如权利要求1所述的方法，其中所述至少一个传感器包括捕获所述本地环境的图像4.如权利要求1所述的方法，其中识别所述活动包括识别在所述本地环境中的附加的5.如权利要求1所述的方法，其中响应于识别到所述附加的人员而配置对所述主动除6.如权利要求1所述的方法，其中识别所述活动包括识别所述本地环境中的对象与所7.如权利要求1所述的方法，其中响应于识别到所述对象与所述用户的所述接近度而执行视频游戏，其中执行所述视频游戏生成游戏状态，所述游戏状态基于所述游戏状态来确定所述耳机要应用的主动呈现所述虚拟环境的所述音频期间降低来自所述本地14.一种在其上体现有程序指令的非暂时性计算机可读介质，所述程序指令在由至少3一个计算装置执行时使所述至少一个计算装置执行执行交互式应用程序，其中执行所述交互式应用程序包括渲染虚拟环境的视频和音从感测所述用户所处的本地环境的至少一个传感器接收15.如权利要求14所述的非暂时性计算机可读介质，其中所述主动除噪被配置为在通16.如权利要求14所述的非暂时性计算机可读介质，其中所述至少一个传感器包括捕17.如权利要求14所述的非暂时性计算机可读介质，其中识别所述活动包括识别在所18.如权利要求14所述的非暂时性计算机可读介质，其中响应于识别到所述附加的人19.如权利要求14所述的非暂时性计算机可读介质，其中识别所述活动包括识别在所20.如权利要求14所述的非暂时性计算机介质，其中响应于识别到所述对象与所述用4[0005]本公开的实现方式包括涉及基于真实世界活动或游戏情境来调整耳机除噪的方分析环境输入包括分析所捕获的图像以识别在本5除噪被配置为在通过耳机呈现虚拟环境的音频期间降低来自本地环境的[0022]图2示出了根据本公开的实现方式的用户参与视频游戏的游戏过程并且遇到ANC[0024]图4概念性地示出了根据本公开的实现方式的使用机器学习(ML)模型来确定耳机[0025]图5概念性地示出了根据本公开的实现方式的用于在视频游戏的执行期间控制主[0027]本公开的以下实现方式提供了用于基于真实世界活动或游戏情境来调整耳机除括由一个或多个装置检测用户的环境。可以使用一个或多个相机和/或运动检测器来监测6[0032]由计算装置102执行视频游戏包括渲染视频游戏的虚拟环境的视频和音频。视频当用户100参与和视频游戏的交互时，用户100可以操作用户输入装置(诸如所示实现方式[0033]由视频游戏产生的音频通过由用户100佩戴的耳机108来呈现。耳机108可是有线[0035]虽然ANC用于通过阻挡可能干扰用户体验的环境声音来增强游戏体验的沉浸感，公开的实现方式响应于情景因素和视频游戏本身而自动动态调整ANC7并且由耳机108且更具体地说由ANC控制器126应用，以控制由ANC电路124实现的ANC水平。[0039]图2示出了根据本公开的实现方式的用户参与视频游戏的游戏过程并且遇到ANC可以存在距用户100的各种距离处定义的多个邻近区域204，其中邻近区域与各种ANC水平8[0048]在一些实现方式中，可以基于用户玩视频游戏的当前进度位置来设置或调整ANC戏的故事线中不断前进，根据针对用户当前游戏过程的特定进度点设置的参数来调整ANC户控制的角色的位置或由用户在游戏过程中控制的其他实体)位于虚拟环境的特定区域于用户在场景A的虚拟环境中的位置而动态调整AN可用于选择性地增强视频游戏的虚拟环境中的某[0054]图4概念性地示出了根据本公开的实现方式的使用机器学习(ML)模型来确定耳机9训练数据来训练ML模型400。ML模型400可以在一些实现方式中由前面提到的计算装置102[0056]ML模型400可以被配置为基于执行的视频游戏的游戏状态数据406来执行游戏辨例而非限制的方式，游戏状态数据406可以包括诸如用户/控制器输入、游戏进度/场景信[0057]ML模型400还可以被配置为使用环境数据408来执行环境辨识404，以辨识在本地环境中发生的对象/人和事件。这种环境数据408的示例包括捕获的本地环境的图像或视[0058]基于在执行的视频游戏和用户所处的本地环境中发生的事件，ML模型400可以动[0061]图5概念性地示出了根据本公开的实现方式的用于在视频游戏的执行期间控制主玩家所处的本地环境。在方法操作510处，基于对本地环境的检测来识别本地环境中的活式，游戏过程期间的任何给定时刻应用的ANC量由视频游戏和玩家本地环境中的活动状态程序和任选地操作系统的中央处理单元(CPU)602。CPU602可以由一个或多个同构或异构使用具有微处理器架构的一个或多个CPU来实施其他实施方案，所述微处理器架构特别适化来向客户端远程流式传输游戏过程的许多服务[0067]存储器604存储供由CPU602使用的应用程序和数据。存储装置606提供用于应用程序和数据的非易失性存储装置和其他计算机可读介质，并且可以包括固定磁盘驱动器、用于辨识姿势的跟踪装置和/或传声器。网络接口614允许装置600经由电子通信网络与其他计算机系统通信，并且可包括通过局域网和广域网(诸如互联网)进行的有线或无线通输出图像的数据和/或指令可存储在存储器604和/或图形存储器618中。在一个实施方案据生成输出图像的像素数据的3D渲染能力。GPU616还可包括能够执行着色器程序的一个[0069]图形子系统614周期性地从图形存储器618输出图像的像素数据以显示在显示装定游戏引擎片段提供与图形处理单元(GPU)相关联的虚拟机，因为它将进行大量相对简单一个或多个更高功率中央处理单元(CPU不依赖于控制器本身以外的任何附加硬件或处理的输入可以经由网络从控制器直接发送获的视频或音频，这些视频或音频可以在发送到云游戏服务器之前由客户端装置进行处以检测控制器的位置和运动，随后客户端装置会将所述位置和运动传达到云游戏服务器。[0078]在一个实施方案中，可通过头戴式显示器(HMD)使用虚拟环境来实施各种技术示用户控制)做出实时响应的方式观看虚拟空间以向用户提供在虚拟空间或元宇宙中的感由此使HMD同样地转动时，就会在HMD上渲染该侧在虚拟空间中的视图。HMD可以类似于眼户的注视方向以及用户关注或有兴趣与其交互的VR场景中的特定虚拟对象和内容项相关