一种音效控制的方法、装置、电子设备及存储介质制造方法及图纸

本公开提供了一种音效控制的方法、装置、电子设备及存储介质，其中，该方法包括：获取增强现实AR设备采集的真实场景图像；根据真实场景图像，确定AR设备所处的当前环境类型；基于AR设备所处的当前环境类型，生成AR音效数据；根据AR音效数据，进行AR场景下的声音播放。本公开实施例由于播放的声音是结合当前环境类型所确定的，因而更为符合真实场景图像所呈现的视觉效果，从而达到了AR场景下视觉和听觉的统一，提升了AR应用的服务质量。

【技术实现步骤摘要】
一种音效控制的方法、装置、电子设备及存储介质
本公开涉及计算机应用
，具体而言，涉及一种音效控制的方法、装置、电子设备及存储介质。
技术介绍
增强现实(AugmentedReality，AR)技术作为一种根据实时计算的摄像机影像的位置及角度，在影像上叠加相应的图像、视频、三维(3-Dimensional，3D)模型以实现虚拟世界与现实世界融合的技术，从视觉上将用户体验提升到了一个新高度。目前，用户处于沉浸式AR场景中可以感受到周围的真实场景，然而，听到的却是AR的背景音频。如果AR的背景音频与周围真实环境冲突，则用户会产生视觉和听觉的冲突感，降低体验。
技术实现思路
本公开实施例至少提供一种音效控制的方案，结合AR设备所处的当前环境进行音效控制，实现了视听统一，提升了AR应用的服务质量。主要包括以下几个方面：第一方面，本公开实施例提供了一种音效控制的方法，所述方法包括：获取增强现实AR设备采集的真实场景图像；根据所述真实场景图像，确定所述AR设备所处的当前环境类型；基于所述AR设备所处的当前环境类型，生成AR音效数据；根据所述AR音效数据，进行AR场景下的声音播放。采用上述音效控制的方法，其首先可以根据AR设备采集的真实场景图像确定AR设备所处的当前环境类型，这里的环境类型例如可以是嘈杂环境等，这样，基于所处的当前环境类型，可以生成对应的AR音效数据，例如，对于嘈杂环境，可以生成更高音量的音效数据进而进行声音播放，上述音效控制的方法，由于播放的声音是结合当前环境类型所确定的，因而更为符合真实场景图像所呈现的视觉效果，从而达到了AR场景下视觉和听觉的统一，提升了AR应用的服务质量。在一种可能的实施方式中，所述根据所述真实场景图像，确定所述AR设备所处的当前环境类型，包括：根据所述真实场景图像，以及预先构建的三维场景地图，确定所述AR设备在所述三维场景地图中的位置信息；基于所述AR设备在所述三维场景地图中的位置信息，以及所述三维场景地图，确定所述AR设备所处的当前环境类型。这里，首先确定AR设备在三维场景地图中的位置信息，这样，基于三维场景地图所预先标注的相关信息(例如POI)即可以确定AR设备在当前位置所处的当前环境类型，这主要是考虑到利用预先标注的信息可以确定与真实环境相关的信息，进而使得确定的环境类型更为符合AR体验的真实视觉效果。在一种可能的实施方式中，所述基于所述AR设备在所述三维场景地图中的位置信息，以及所述三维场景地图，确定所述AR设备所处的当前环境类型，包括：基于所述AR设备在所述三维场景地图中的位置信息，从所述三维场景地图包括的各个兴趣点POI中查找与所述位置信息对应的目标POI；基于所述目标POI的属性信息，确定所述AR设备所处的当前环境类型。在一种可能的实施方式中，所述AR场景为AR导航场景，所述确定所述AR设备在所述三维场景地图中的位置信息之后，还包括：基于所述AR设备在所述三维场景地图中的位置信息，以及AR设备与虚拟导航员之间的预设位置关系，确定虚拟导航员在所述三维场景地图中的位置信息；根据所述虚拟导航员在所述三维场景地图中的位置信息，通过所述AR设备展示AR场景图像。本公开实施例提供的音效控制的方法可以应用于AR导航场景，这样，基于AR设备与虚拟导航员之间的预设位置关系，以及AR设备的位置信息，即可以确定虚拟导航员的位置信息，进而可以呈现带有虚拟导航员的AR场景图像。在一种可能的实施方式中，所述根据所述AR音效数据，进行AR场景下的声音播放，包括：在通过所述AR设备展示AR场景图像的过程中，控制所述虚拟导航员按照预设的动画数据执行目标口型动作，并播报所述AR音效数据。这里，基于AR场景图像的展示，可以使得播报的声音与口型动作相配合，整个AR场景更为逼真。在一种可能的实施方式中，所述基于所述AR设备所处的当前环境类型，生成AR音效数据，包括：基于所述AR设备所处的当前环境类型，确定与所述当前环境类型匹配的音效控制方式；按照所述音效控制方式，以及预设的音效数据，确定调整后的音效数据，将所述调整后的音效数据作为所述AR音效数据。这里，首先可以确定与当前环境类型匹配的音效控制方式，然后基于音效控制方式进行音效数据的调整，调整后的音效数据更为符合真实环境，进一步提升视听统一的体验度。在一种可能的实施方式中，所述音效控制方式包括：控制音量、进度音乐类型中的一种或多种。在一种可能的实施方式中，所述基于所述AR设备所处的当前环境类型，确定与所述当前环境类型匹配的音效控制方式，包括：将所述AR设备所处的当前环境类型输入训练好的音效控制模型中，得到与所述当前环境类型匹配的音效控制方式；其中，所述音效控制模型由各个环境类型以及每个所述环境类型所匹配的预设音效控制方式训练得到。这里，可以基于训练好的音效控制模块快速的确定与AR设备所处的当前环境类型匹配的音效控制方式。在一种可能的实施方式中，所述基于所述AR设备所处的当前环境类型，确定与所述当前环境类型匹配的音效控制方式，包括：获取所述AR设备对应的AR用户属性信息；基于所述AR设备所处的当前环境类型，以及获取的所述AR用户属性信息，确定所述音效控制方式。这里，可以结合AR用户属性信息来确定音效控制方式，进一步提升AR音效体验。在一种可能的实施方式中，所述基于所述AR设备所处的当前环境类型，生成AR音效数据，包括：基于预设的不同的环境类型分别对应的音效数据，确定与所述AR设备所处的当前环境类型匹配的所述AR音效数据。第二方面，本公开实施例还提供了一种音效控制的装置，所述装置包括：获取模块，用于获取增强现实AR设备采集的真实场景图像；确定模块，用于根据所述真实场景图像，确定所述AR设备所处的当前环境类型；生成模块，用于基于所述AR设备所处的当前环境类型，生成AR音效数据；控制模块，用于根据所述AR音效数据，进行AR场景下的声音播放。第三方面，本公开实施例还提供了一种电子设备，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，所述处理器用于执行所述存储器中存储的机器可读指令，当电子设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行如第一方面及其各种实施方式任一项所述的音效控制的方法的步骤。第四方面，本公开实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被电子设备运行时，所述电子设备执行如第一方面及其各种实施方式任一项所述的音效控制的方法的步骤。关于上述音效控制的装置、电子设备、及计算机可读存储介质的效果描述参见上述音效控制的方法的说明，这里不再赘述。为使本公开的上述目的、特征和优点能更明显易懂，下文特举较佳本文档来自技高网...

【技术保护点】
1.一种音效控制的方法，其特征在于，所述方法包括：/n获取增强现实AR设备采集的真实场景图像；/n根据所述真实场景图像，确定所述AR设备所处的当前环境类型；/n基于所述AR设备所处的当前环境类型，生成AR音效数据；/n根据所述AR音效数据，进行AR场景下的声音播放。/n

【技术特征摘要】
1.一种音效控制的方法，其特征在于，所述方法包括：
获取增强现实AR设备采集的真实场景图像；
根据所述真实场景图像，确定所述AR设备所处的当前环境类型；
基于所述AR设备所处的当前环境类型，生成AR音效数据；
根据所述AR音效数据，进行AR场景下的声音播放。


2.根据权利要求1所述的方法，其特征在于，所述根据所述真实场景图像，确定所述AR设备所处的当前环境类型，包括：
根据所述真实场景图像，以及预先构建的三维场景地图，确定所述AR设备在所述三维场景地图中的位置信息；
基于所述AR设备在所述三维场景地图中的位置信息，以及所述三维场景地图，确定所述AR设备所处的当前环境类型。


3.根据权利要求2所述的方法，其特征在于，所述基于所述AR设备在所述三维场景地图中的位置信息，以及所述三维场景地图，确定所述AR设备所处的当前环境类型，包括：
基于所述AR设备在所述三维场景地图中的位置信息，从所述三维场景地图包括的各个兴趣点POI中查找与所述位置信息对应的目标POI；
基于所述目标POI的属性信息，确定所述AR设备所处的当前环境类型。


4.根据权利要求2或3所述的方法，其特征在于，所述AR场景为AR导航场景，所述确定所述AR设备在所述三维场景地图中的位置信息之后，还包括：
基于所述AR设备在所述三维场景地图中的位置信息，以及所述AR设备与虚拟导航员之间的预设位置关系，确定所述虚拟导航员在所述三维场景地图中的位置信息；
根据所述虚拟导航员在所述三维场景地图中的位置信息，通过所述AR设备展示AR场景图像。


5.根据权利要求4所述的方法，其特征在于，所述根据所述AR音效数据，进行AR场景下的声音播放，包括：
在通过所述AR设备展示AR场景图像的过程中，控制所述虚拟导航员按照预设的动画数据执行目标口型动作，并播报所述AR音效数据。


6.根据权利要求1-5任一所述的方法，其特征在于，所述基于所述AR设备所处的当前环境类型，生成AR音效数据，包括：
基于所述AR设备所处的当前环境类型，确定与所述当前环境类型匹配的音效控制方式；
按照所述音效控制方式，以及预设的音效数据，确定调整后的音效数...

【专利技术属性】
技术研发人员：李思远，刘章，
申请(专利权)人：深圳市慧鲤科技有限公司，
类型：发明
国别省市：广东;44