基于用户的交互区的检测动态地调整声音的方法和系统技术方案

用于为用户处理音频的方法和系统包括当用户正与视频游戏交互时识别所述用户在真实世界环境中的交互区。监视所述真实世界环境以检测可能影响所述交互区的任何改变。响应于检测到改变，动态地调整针对耳机的一侧或两侧的音频的音量，所述耳机的一侧或两侧向用户的一只或两只耳朵提供音频。对音频的调整是为了防止用户在与视频游戏交互时分心。止用户在与视频游戏交互时分心。止用户在与视频游戏交互时分心。

【技术实现步骤摘要】
基于用户的交互区的检测动态地调整声音的方法和系统


[0001]本公开涉及向用户提供由交互式应用生成的音频，并且更具体地涉及根据与用户的每只耳朵相关联的听觉属性以及用户正在其中操作的交互区的当前状态来调整向用户的每只耳朵提供的音频。

技术介绍

[0002]随着视频游戏(即，交互式应用)的日益普及以及用户在不同装置上可用的视频游戏数量不断增加，及时向用户提供适当反馈变得尤为重要。视频游戏接收来自用户的游戏输入，更新游戏状态，并且向用户提供包括当前状态的游戏内容。游戏内容包括游戏场景和游戏音频。游戏音频可以通过耦合到游戏输入装置或计算装置的耳机提供给用户，游戏输入和/或游戏内容通过所述游戏输入装置或计算装置提供。游戏输入装置可以是控制器、键盘、触摸屏装置、头戴式显示器(HMD)上定义的控制输入或任何其他输入装置。
[0003]用户可以使用HMD来选择视频游戏并与其交互。HMD用于提供游戏输入，在HMD的显示屏上呈现视频游戏的游戏场景，以及通过耳机提供与玩游戏过程相关的音频。有时候，为了具有完全沉浸式体验，HMD可以被配置为压低或完全阻挡来自真实世界环境的声音。因此，用户可能完全沉浸在视频游戏中，并且可能不太注意或可能不知道用户附近的真实世界环境状况。当人员或宠物或真实世界对象接近用户时，用户甚至可能没有意识到人员、宠物或对象。在此类情况下，当人员或宠物或对象靠近用户或直接与用户交互时，用户可以才意识到所述人员或宠物或对象。尤其是当用户参与高强度游戏的玩游戏过程时，来自人员或宠物或对象的这种突然交互可能会使用户分心，并且因此影响用户的玩游戏过程。
[0004]正是在此背景下提出了本公开的实施方案。

技术实现思路

[0005]本公开的实施方式涉及用于调整交互式应用提供给用户的音频以向用户通知用户正在其中操作交互式应用的真实世界环境的当前状态的系统和方法。用户可以选择交互式应用(例如，视频游戏)并开始与视频游戏交互(例如，玩游戏过程)。视频游戏在玩游戏过程期间接收来自用户的用户输入并生成游戏内容。游戏内容包括游戏音频和包括游戏场景的游戏视频。游戏视频被转发到用户的显示屏上进行呈现，并且游戏音频被转发到用户使用的耳机。用于呈现游戏场景的显示屏和用于呈现游戏音频的耳机与用户用来选择视频游戏并与其交互的客户端装置相关联。响应于用户选择要玩的视频游戏，在真实世界环境中建立用户的交互区。交互区识别用户正访问视频游戏并与其交互的地理位置。在耳机和/或客户端装置(例如，头戴式显示器)的帮助下，用户全神贯注于视频游戏并且可能不太注意真实世界环境中发生的事情。当在真实世界环境发生影响交互区的改变时，所述改变可能会在用户与视频游戏交互时导致用户分心或干扰用户。分心或干扰可能影响视频游戏的玩游戏过程并导致用户的玩游戏体验不尽如人意。
[0006]为了避免这种分心或干扰并确保用户获得最佳的玩游戏体验，系统监视真实世界
环境以检测正在发生或预期会发生的可能影响用户交互区的任何改变。当检测到或预期到影响交互区的改变时，系统和/或视频游戏向用户提供预先或及时的通知。可以通过自动调整经由耳机提供给用户的游戏音频的音量来提供通知，以便阻挡由改变引起的一些不期望的环境声音。另外或替代地，系统可以输出针对正在影响或预期影响用户的交互区的人员或对象(例如，宠物)的声音。输出声音可以是针对人员或对象的指示用户在视频游戏中的沉浸程度的通知的形式。监视交互区并向用户或人员/对象提供通知可以帮助用户获得不受打扰的最佳玩游戏体验。
[0007]在一种实施方式中，公开了一种用于调整提供给用户的声音的方法。所述方法包括检测用户正在与视频游戏交互的真实世界环境中的交互区。视频游戏提供用于呈现给用户的游戏内容。游戏内容包括游戏场景和与游戏场景相关联的音频。在所述用户与所述视频游戏交互时监视所述真实世界环境以检测可影响所述交互区的任何改变。响应于检测到影响所述交互区的改变，动态地调整针对耳机的一侧或两侧的音频的音量，所述耳机的一侧或两侧提供针对所述用户的一只耳朵或两只耳朵的游戏音频。对音频的调整量是为了警告用户在真实世界环境中正发生或预计发生影响交互区中的用户的改变。
[0008]在另一种实施方式中，公开了一种用于向人员提供警告的方法。所述方法包括检测用户正在与视频游戏交互的真实世界环境中的交互区。视频游戏提供用于呈现给用户的游戏内容。游戏内容包括游戏视频和与游戏视频相关联的游戏音频。在所述用户与所述视频游戏交互时监视所述真实世界环境以检测影响所述交互区的改变。影响交互区的改变是由人员从第一方向接近交互区中的用户引起的。响应于检测到所述改变而动态地调整针对耳机的第一侧的游戏音频的音量，所述耳机的第一侧向所述用户的第一只耳朵提供所述游戏音频。耳机用于向用户提供游戏音频。除了调整音量外，还会自动生成声音并且所述声音是针对作为改变的原因的人员的。所述声音包括指示用户在视频游戏中的沉浸程度的通知。
[0009]从结合附图进行的以示例方式示出本公开的原理的以下详细描述中，本公开的其他方面和优点将变得显而易见。
附图说明
[0010]结合附图参考以下描述，可最好地理解本公开。
[0011]图1A示出了根据本公开的一种实施方式的用于执行向用户提供游戏场景和游戏音频的视频游戏的系统的简化框图。
[0012]图1B示出了根据本公开的一种实施方式的简化的概念性游戏云系统，其可由来自不同地理位置的多个用户访问并且生成提供游戏音频以呈现给每个用户的视频游戏的游戏内容。
[0013]图2示出了根据本公开的一种实施方式的在作为游戏云系统的一部分的游戏云服务器上执行的简化音频处理引擎，其用于处理从执行视频游戏生成的游戏音频。
[0014]图3A
‑
1和图3A
‑
2示出了根据本公开的一种实施方式的响应于在用户正与视频游戏交互时人员接近用户的交互区而提供给用户的游戏音频。
[0015]图3B
‑
1和图3B
‑
2示出了根据本公开的一种实施方式的提供给用户的游戏音频和所生成的用于吓唬宠物离开交互区的声音。
[0016]图4示出了根据本公开的一种实施方式的用于处理由视频游戏生成的游戏音频的方法的操作的简化流程。
[0017]图5示出了根据本公开的一种实施方式的用于提供为交互式应用生成的音频的简化的概念性游戏云系统。
具体实施方式
[0018]在以下描述中，阐述多个具体细节以提供对本公开的透彻理解。然而，对于本领域的技术人员将显而易见的是，可以在没有一些或所有这些具体细节的情况下实践本公开。在其他情况下，没有详细描述公知的过程步骤以免使本公开不清楚。
[0019]随着交互式应用(例如，视频游戏、元宇宙)的数量不断增加，以及时方式向用户提供适当的游戏内容和适当的通知对于允许用户具有丰富的交互体验很重要。用户可能正在玩视频游戏或在元宇宙空间中进行交互。由视频游戏生成的游戏内容包括游戏场景和与视频游戏的游戏场景相关联的游戏音频。游本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于为用户处理音频的方法，其包括：检测所述用户正与视频游戏交互的真实世界环境内的交互区，所述视频游戏提供游戏内容以呈现给所述用户，其中所述游戏内容包括游戏场景和与所述游戏场景相关联的音频；在所述用户与所述视频游戏交互时监视所述真实世界环境以检测可能影响所述交互区的改变；以及响应于检测到所述改变而动态地调整针对耳机的一侧或两侧的音频的音量，所述耳机的一侧或两侧提供针对所述用户的一只耳朵或两只耳朵的音频，其中所述方法的操作由计算装置的处理器执行。2.根据权利要求1所述的方法，其中动态地调整所述音量包括：识别在所述真实世界环境中检测到改变的方向，所述方向是与所述用户相关地识别的；以及沿在所述真实世界环境中发生所述改变的所述方向自动地调整所述视频游戏的传输到所述用户的耳朵的音频的音量。3.根据权利要求2所述的方法，其中通过使用以下任一者或组合执行所述用户正在其中操作的所述真实世界环境的听觉空间映射来识别所述方向：用于向所述视频游戏提供输入的控制器内可用的传声器阵列；或执行或提供所述视频游戏的所述游戏内容的游戏控制台；或在所述真实世界环境中靠近所述交互区设置的外部传声器。4.根据权利要求2所述的方法，其中根据为所述用户的所述耳朵定义的声音分数自动地调整所述音量，所述声音分数是从所述用户的用户配置文件中检索的并且指定所述用户的每只耳朵对不同声音和噪声水平的耐受水平。5.根据权利要求2所述的方法，其中调整所述音频的所述音量包括增大针对所述用户的沿所述改变的所述方向的所述耳朵的音频的音量，并且维持针对所述用户的另一只耳朵的音频的音量。6.根据权利要求2所述的方法，其还包括生成声音并将所述声音引导到接近所述用户的所述交互区的人员或宠物，所述声音包括指示所述用户在所述视频游戏中的沉浸程度的通知，以及生成警告并将所述警告提供给所述用户以向所述用户通知所述人员或所述宠物与所述交互区的相对接近度。7.根据权利要求1所述的方法，其还包括自动地生成信息消息并将所述信息消息转发给接近在所述交互区中交互的所述用户的人员，所述信息消息被提供以指示所述用户在所述视频游戏中的沉浸程度，并且其中通过由所述用户用于向所述视频游戏提供输入的控制器的扬声器或经由执行所述视频游戏的系统或使用设置在头戴式显示器上的灯可视地将所述信息消息作为声音或语音输出而提供。8.根据权利要求7所述的方法，其中根据由所述用户定义的设置转发所述信息消息，所述设置根据所述用户的所述沉浸程度而定义。9.根据权利要求7所述的方法，其中转发所述信息消息的频率和速度是基于当检测到所述改变时所述用户当前参与的视频游戏或视频游戏部分的强度。
10.根据权利要求1所述的方法，其中在所述真实世界环境中检测到的所述改变是由于人员或宠物接近所述交互区所致。11.根据权利要求1所述的方法，其中针对所述用户的每只耳朵的音频的音量是根据...

【专利技术属性】
技术研发人员：V，
申请(专利权)人：索尼互动娱乐股份有限公司，
类型：发明
国别省市：