用于创建音频场景的设备和方法技术

本发明专利技术提供一种用于创建音频场景的设备和方法。该用于为虚拟环境中的化身创建音频场景的设备包括：音频处理器，其可进行操作以创建包括来自位于所述化身的听觉范围的一部分中的对象的音频的加权音频流；和关联装置，其可进行操作以将所述加权音频流与表示所述听觉范围的所述部分在所述虚拟环境中的位置的数据关联起来，其中，所述加权音频流和所述数据表示所述音频场景。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术总体上涉及，并且具体地但决不是专门地应用于创建虚拟环境的音频场景。
技术介绍
近年来在创建视觉沉浸式虚拟环境方面已取得显著的进步。这些进步已经导致了大规模多玩家角色扮演游戏的广泛应用，在这种游戏中参与者可以进入公共的虚拟环境(如战场)，并在虚拟环境中由化身来代表，化身通常采用动画人物的形式。在采用战场形式的虚拟环境的情况下，化身可以是士兵。视觉沉浸式虚拟环境的广泛应用部分地是由于图像处理技术的显著提高，图像处理技术使得可以生成非常详细并且逼真的图形虚拟环境。三维声卡的普及提供了在虚拟环境中向参与者提供高质量声音的能力。然而，尽管大量使用三维声卡，但是现在的视觉沉浸式虚拟环境通常不能为参与者提供逼真的机制以相互进行通信。许多环境使用诸如基于文本的聊天或步话机式话音的非沉浸式通信机制。定义以下给出了对在本说明书中使用的各种术语的定义。加权音频流-包括一条或更多条音频信息的音频信息，每条音频信息都具有基于源与音频信息的接受者之间距离而调节(增大或减小)的振幅。非加权音频流-包括一条或更多条音频信息的音频信息，但是与加权音频流不同，在非加权音频流中各条音频信息的振幅与原始振幅相比是不经修改的。音频场景-包括组合的多个声音(例如，属于虚拟环境内的其他化身和其他声音源的多个话音)的音频信息，空间地布置这些声音，并且可能根据源与声音的接受者之间距离来使这些声音衰减。音频场景可能还包括代表环境的声音特性的声音效果。
技术实现思路
根据本专利技术的第一方面，提供了一种用于为虚拟环境中的化身创建音频场景的设备，该设备包括音频处理器，其可进行操作以创建加权音频流，该加权音频流包括来自位于所述化身的听觉范围的一部分中的对象的音频；和关联装置，其可进行操作以将所述加权音频流与表示所述听觉范围的所述部分在所述虚拟环境中的位置的数据关联起来，其中，所述加权音频流和所述数据表示所述音频场景。根据本专利技术第一方面的设备具有几个优点。一个优点在于，通过将听觉范围分成一个或更多个部分，可以将音频场景的保真度调节到所需水平。听觉范围中的部分的数量越大，音频场景的保真度就越高。可以想像，本设备并不限于一个部分的单个加权音频流。事实上，本设备能够创建多个加权音频流，每个加权音频流都包括位于听觉范围的其他部分的对象的音频。本设备的另一个优点在于，加权音频流可以复制诸如由于在对象与接受者之间的传播距离而导致音频的衰减的特性。本专利技术的还一优点在于，可以将音频流再现成好像它是从该位置发出来的。由此，如果数据表示对象的位置是接受者的右手侧，则可以使用立体声音系统的右音道对该音频进行再现。优选地，所述音频处理器还可进行操作以创建所述加权音频流，使得所述加权音频流包括未加权音频流，所述未加权音频流包括来自位于所述化身的所述听觉范围的所述部分内的另一对象的音频。在加权音频流中包括未加权音频流的优点在于，提供了用于表示来自位于所述化身的所述听觉范围的所述部分周围的一个或更多个其他对象的音频的方法。未加权音频流的优点在于，可以对未加权音频流进行重用，以创建许多化身的音频场景，这可以减小用于创建音频场景的总处理需求。优选地，所述音频处理器可进行操作以根据预定混合操作和权重信息来创建所述加权音频流，所述预定混合操作包括标识了所述对象和/或所述其他多个对象的标识信息，所述权重信息可以由所述音频处理器使用来设定所述加权音频流中的所述音频和所述未加权音频流的振幅。优选地，所述设备还包括可进行操作以通过通信网络接收所述音频、所述未加权音频流以及所述混合操作的通信装置，所述通信装置还可进行操作以通过所述通信网络来发送所述加权音频流和所述数据。使用该通信装置是有利的，因为它使得可以在分布式环境中使用所述设备。根据本专利技术的第二方面，提供了一种可进行操作以为虚拟环境中的化身创建用于音频场景的音频信息的设备，该设备包括音频处理器，其可进行操作以创建未加权音频流，该未加权音频流包括来自位于所述化身的听觉范围的一部分中的对象的音频；和关联装置，其可进行操作以将所述未加权音频流与表示所述对象在所述虚拟环境中的近似位置的数据关联起来，其中，所述未加权音频流和所述数据表示所述音频信息。根据本专利技术第二方面的设备具有几个优点，其中两个优点类似于本专利技术的第一方面的上述第一和第二优点。优选地，所述音频处理器可进行操作以根据预定混合操作来创建所述未加权音频流，所述预定混合操作包括标识了所述对象的标识信息。优选地，所述设备还包括可进行操作以通过通信网络接收所述音频和所述预定混合操作的通信装置，所述通信装置还可进行操作以通过所述通信网络来发送所述未加权音频流和所述数据。使用该通信装置是有利的，因为它使得可以在分布式环境中使用所述设备。根据本专利技术的第三方面，提供了一种用于获得可以被用来为虚拟环境中的化身创建音频场景的信息的设备，该设备包括标识装置，其可进行操作以确定位于所述化身的听觉范围的一部分中的对象的标识符；加权装置，其可进行操作以确定待施加给来自所述对象的音频的权重；以及定位装置，其可进行操作以确定所述部分在所述虚拟环境中的位置，其中，所述标识符、所述权重以及所述位置表示可以被用来创建所述音频场景的所述信息。由于以下几个原因，本专利技术的第三方面的获取权重和位置的能力是有利的。第一，可以使用权重来创建包括来自对象的音频的加权音频流。在这方面，当将音频插入加权音频流时，可以使用所述权重来设定该音频的振幅。第二，可以使用所述位置来对音频进行再现，就好像该音频来自该位置一样。例如，如果该位置表示对象的位置在接受者的右手侧，则可以使用立体声音系统的右音道来再现出该音频。优选地，所述设备还包括通信装置，所述通信装置可进行操作以通过通信网络向多个系统中的一个发送所述标识符、所述权重以及所述位置，以进行处理。使用该通信装置是有利的，因为它使得可以在分布式环境中使用所述设备。此外，它使得所述设备可以将所述标识符、所述权重以及所述位置发送给具有执行所需处理所需要的资源(处理能力)的系统。优选地，所述通信装置还可进行操作以创建用于所述通信网络的择路信息，其中，所述择路信息是如下信息所述通信网络可以使用所述择路信息将所述音频择路到所述多个系统中的所述一个系统，以进行处理。能够提供择路信息是有利的，因为它使得所述设备可以在通信网络中有效地选择将用于传送音频的多个链路。优选地，所述标识装置、所述加权装置以及所述定位装置可进行操作以通过对所述虚拟环境的表示进行处理来分别确定所述标识符、所述权重以及所述位置。优选地，所述标识装置可进行操作以通过以下步骤来确定所述听觉范围的所述部分 选择所述虚拟环境中的多个化身中的第一化身；标识出所述多个化身中的最接近于所述多个化身中的所述第一化身的第二化身；确定是否可以将所述多个化身中的所述第二化身包括在已有群集中；当确定可以将所述多个化身中的所述第二化身包括在所述已有群集中时，将所述第二化身包括在所述已有群集中；当确定不能将所述多个化身中的所述第二化身包括在所述已有群集中时，创建包括所述多个化身中的所述第二化身的新群集，从而创建多个群集；确定所述多个群集中的两个群集之间的角间隙；创建基本上位于所述角间隙中的另一群集；以及将所述多个化身中的至少一个化身包括在所述另一群集中。另选地，所述标识本文档来自技高网...

【技术保护点】
一种用于为虚拟环境中的化身创建音频场景的设备，该设备包括：　　　　音频处理器，其可进行操作以创建加权音频流，该加权音频流包括来自位于所述化身的听觉范围的一部分中的对象的音频；和　　　　关联装置，其可进行操作以将所述加权音频流与表示所述听觉范围的所述部分在所述虚拟环境中的位置的数据关联起来，其中，所述加权音频流和所述数据表示所述音频场景。

【技术特征摘要】
【国外来华专利技术】...

【专利技术属性】
技术研发人员：保罗安德鲁鲍斯特德，法尔扎德撒菲伊，迈赫兰多拉沙齐，
申请(专利权)人：斯玛特网络技术CRC有限公司，
类型：发明
国别省市：AU[澳大利亚]