实景空间中的音频处理方法、电子终端及存储介质技术

本申请实施例提供一种实景空间中的音频处理方法、电子终端及存储介质。在本申请实施例中，在实景空间中加载虚拟音频源和漫游相机并建立漫游相机与音频接收器之间的位置绑定关系，便于用户在实景空间中的各漫游位置上都能接收到虚拟音频输出的音频信息，进一步，还可以根据陀螺仪获取到的漫游相机的位姿变化量，计算出虚拟音频源朝向处于当前位姿的漫游相机所需的目标旋转向量，然后根据目标旋转向量控制音频源朝向漫游相机输出音频信号，以供音频接收器在漫游相机当前所处位置上接收到正对音频接收器的音频信号，提高了用户在实景空间中的沉浸感，在听觉上可以给用户带来身临其境的感觉。其境的感觉。其境的感觉。

【技术实现步骤摘要】
实景空间中的音频处理方法、电子终端及存储介质


[0001]本申请涉及空间音频
，尤其涉及一种实景空间中的音频处理方法、电子终端及存储介质。

技术介绍

[0002]随着虚拟现实(Virtual Reality，VR)技术的发展，虚拟现实技术目前已广泛应用于基于三维空间的全景看房中。在全景看房过程中，为了让用户更加清楚地了解房屋详情，推出了语音形式的房屋讲解服务。具体地，预先录制用于介绍房屋详情信息的音频讲解文件，并在三维空间中设置用于触发语音讲解服务的触发控件；在用户点击该触发控件的情况下，电子终端可响应该点击操作，获取预先录制的音频讲解文件，并在三维空间中播放该音频讲解文件，从而实现以语音方式向用户介绍房屋详情信息的目的。但是，现有语音形式的房屋讲解服务的效果不够理想，缺少了沉浸感，在听觉上难易给用户带来身临其境的感觉。

技术实现思路

[0003]本申请的多个方面提供一种实景空间中的音频处理方法、电子终端及存储介质，便于用户在实景空间中的各漫游位置上都能接收到虚拟音频输出的音频信息，提高了用户在实景空间中的沉浸感，在听觉上可以给用户带来身临其境的感觉。
[0004]本申请实施例提供一种实景空间中的音频处理方法，通过安装有陀螺仪的电子终端提供图形用户界面，图形用户界面上展示有目标空间对应的实景空间，实景空间中包括多个漫游点位置；该方法包括：基于电子终端中配置的初始化数据中对象描述字段，在实景空间中加载虚拟音频源和漫游相机，并建立漫游相机与音频接收器之间的位置绑定关系；响应用户在图形用户界面上发起的与实景空间之间的交互操作，根据交互操作在图形用户界面上产生的轨迹信息，动态改变漫游相机的位姿；以及在位姿改变过程中，基于陀螺仪获取漫游相机从上一位姿变化到当前位姿的位姿变化量，并根据位姿变化量，计算虚拟音频源朝向处于当前位姿的漫游相机所需的目标旋转向量；根据目标旋转向量，控制音频源朝向漫游相机输出音频信号，以供音频接收器在漫游相机当前所处位置上接收音频信号。
[0005]本申请实施例还提供一种电子终端，所述电子终端包括陀螺仪和显示屏，所述显示屏上提供图形用户界面，图形用户界面上展示有目标空间对应的实景空间，实景空间中包括多个漫游点位置；该电子终端还包括：存储器和处理器；其中，存储器，用于存储计算机程序；处理器耦合至存储器，用于执行计算机程序以用于执行：基于电子终端中配置的初始化数据中对象描述字段，在实景空间中加载虚拟音频源和漫游相机，并建立漫游相机与音频接收器之间的位置绑定关系；响应用户在图形用户界面上发起的与实景空间之间的交互操作，根据交互操作在图形用户界面上产生的轨迹信息，动态改变漫游相机的位姿；以及在位姿改变过程中，基于陀螺仪获取漫游相机从上一位姿变化到当前位姿的位姿变化量，并根据位姿变化量，计算虚拟音频源朝向处于当前位姿的漫游相机所需的目标旋转向量；根
据目标旋转向量，控制音频源朝向漫游相机输出音频信号，以供音频接收器在漫游相机当前所处位置上接收音频信号。
[0006]本申请实施例还提供一种存储有计算机指令的计算机可读存储介质，当计算机指令被一个或多个处理器执行时，致使一个或多个处理器执行以上方法中的步骤。
[0007]本申请实施例提供的技术方案，电子终端提供图形用户界面，图形用户界面上展示目标空间对应的实景空间，基于电子终端配置的初始化数据中的对象描述字段，可以在实景空间中加载虚拟音频源和漫游相机，虚拟音频源用于在实景空间中播放音频信息，漫游相机用于让用户在实景空间中实现漫游；并建立漫游相机与音频接收器之间的位置绑定关系，以便用户在实景空间中的各漫游位置上都能接收到虚拟音频源输出的音频信息；进一步，为了在听觉上让用户更加具有沉浸感，在本申请技术方案中，还可以响应用户在图形用户界面上发起的与实景空间之间的交互操作，根据该交互操作在图形用户界面上产生的轨迹信息动态改变漫游相机的位姿，并根据陀螺仪获取到的漫游相机的位姿变化量，计算出虚拟音频源朝向处于当前位姿的漫游相机所需的目标旋转向量，然后根据目标旋转向量控制音频源朝向漫游相机输出音频信号，以供音频接收器在漫游相机当前所处位置上接收到正对音频接收器的音频信号，提高了用户在实景空间中的沉浸感，在听觉上可以给用户带来身临其境的感觉。
附图说明
[0008]此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：
[0009]图1为本申请一示例性实施例提供的实景空间中的音频处理方法的流程示意图；
[0010]图2示出了本申请一实施例提供的电子终端的结构示意图。
具体实施方式
[0011]为使本申请的目的、技术方案和优点更加清楚，下面将结合本申请具体实施例及相应的附图对本申请技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
[0012]以下结合附图，详细说明本申请各实施例提供的技术方案。
[0013]目前，在在线全景看房过程中，通过获取预先录制的音频讲解文件，并在三维空间中播放该音频讲解文件，从而实现以语音方式向用户介绍房屋详情信息的目的。但是，现有语音形式的房屋讲解服务的效果不够理想，缺少了沉浸感，在听觉上难易给用户带来身临其境的感觉。为此，在本申请的一些实施例中，针对任意实景空间，在实景空间中加载虚拟音频源和漫游相机，并将虚拟音频源对应的音频接收器与漫游相机进行绑定，之后可借助于电子终端上的陀螺仪跟踪漫游相机的位姿变化，根据漫游相机的位姿变化量得到虚拟音频源相对漫游相机的旋转向量，以此旋转向量控制虚拟音频源输出朝向漫游相机的音频信号，以供音频接收器在漫游相机当前所处位置上接收该音频信号，这种方式输出的音频信号可以实时跟随用户，提高用户在实景空间中的沉浸感，在听觉上可以给用户带来身临其境的感觉。
[0014]以下结合附图，详细说明本申请各实施例提供的技术方案。
[0015]图1为本申请一示例性实施例提供的实景空间中的音频处理方法的流程示意图。本申请实施例提供的音频处理方法可以运行于电子终端。其中，电子终端可以为本地电子终端，本地电子终端存储有应用程序并用于呈现应用界面。本地电子终端用于通过图形用户界面与用户进行交互，即，常规的通过电子设备下载安装应用程序并运行。该本地电子终端将图形用户界面提供给用户的方式可以包括多种，例如，可以渲染显示在终端的显示屏上，或者，通过全息投影提供给用户。举例而言，本地电子终端可以包括显示屏和处理器，该显示屏用于呈现图形用户界面，该图形用户界面包括应用画面，该处理器用于运行该应用程序、生成图形用户界面以及控制图形用户界面在显示屏上的显示。
[0016]其中，当电子终端为本地电子终端时，其可以是台式电脑、笔记本电脑、平板电脑、移动终端以及虚拟现实(Virtual Reality，VR)设备本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种实景空间中的音频处理方法，其特征在于，通过安装有陀螺仪的电子终端提供图形用户界面，所述图形用户界面上展示有目标空间对应的实景空间，所述实景空间中包括多个漫游点位置；所述方法包括：基于所述电子终端中配置的初始化数据中对象描述字段，在所述实景空间中加载虚拟音频源和漫游相机，并建立所述漫游相机与音频接收器之间的位置绑定关系；响应用户在所述图形用户界面上发起的与所述实景空间之间的交互操作，根据所述交互操作在所述图形用户界面上产生的轨迹信息，动态改变所述漫游相机的位姿；以及在位姿改变过程中，基于所述陀螺仪获取所述漫游相机从上一位姿变化到当前位姿的位姿变化量，并根据所述位姿变化量，计算所述虚拟音频源朝向处于当前位姿的所述漫游相机所需的目标旋转向量；根据所述目标旋转向量，控制所述虚拟音频源朝向所述漫游相机输出音频信号，以供所述音频接收器在所述漫游相机当前所处位置上接收所述音频信号。2.根据权利要求1所述的方法，其特征在于，所述交互操作为漫游操作，则响应用户在所述图形用户界面上发起的与所述实景空间之间的交互操作，根据所述交互操作在所述图形用户界面上产生的轨迹信息，动态改变所述漫游相机的位姿，包括：响应用户在所述图形用户界面上发起的漫游操作，根据所述图形用户界面上被触发的屏幕位置，从所述多个漫游点位置中确定目标漫游点位置，并控制所述漫游相机沿着漫游轨迹向所述目标漫游点位置移动，所述漫游轨迹包括多个第一轨迹点。3.根据权利要求2所述的方法，其特征在于，所述在位姿改变过程中，获取所述漫游相机从上一位姿变化到当前位姿的位姿变化量，包括：在所述漫游相机从上一第一轨迹点移动至当前第一轨迹点时，根据所述上一第一轨迹点和当前第一轨迹点的空间坐标，生成所述漫游相机在当前第一轨迹点上的位置向量和运动向量；相应地，所述根据所述位姿变化量，计算所述虚拟音频源朝向处于当前位姿的所述漫游相机所需的目标旋转向量，包括：根据所述漫游相机在当前第一轨迹点上的位置向量和运动向量，计算所述虚拟音频源朝向处于当前第一轨迹点上的所述漫游相机所需的目标旋转向量。4.根据权利要求1所述的方法，其特征在于，所述交互操作为旋转操作，则响应用户在所述图形用户界面上发起的与所述实景空间之间的交互操作，根据所述交互操作在所述图形用户界面上产生的轨迹信息，动态改变所述漫游相机的位姿，包括：响应用户在所述图形用户界面上发起的旋转操作，获取所述旋转操作在所述图形用户界面上产生的旋转轨迹，并控制所述漫游相机沿着旋转轨迹旋转，所述旋转轨迹包括多个第二轨迹点。5.根据权利要求4所述的方法，其特征在于，所述在位姿改变过程中，获取所述漫游相机从上一位姿变化到当前位姿的位姿变化量，包括：在所述漫游相机从上一第二轨迹点旋转至当前第二轨迹点时，读取所述电子终端上的陀螺仪数据；根据所述陀螺仪数据，生成所述漫游相机从上一第二轨迹点旋转至当前第二轨迹点产生的旋转向量；
相应地，所述根据所述位姿变化量，计算所述虚拟音频...

【专利技术属性】
技术研发人员：ꢀ七四专利代理机构，
申请(专利权)人：北京城市网邻信息技术有限公司，
类型：发明
国别省市：