System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 音频处理方法和系统技术方案_技高网

音频处理方法和系统技术方案

技术编号:40786998 阅读:6 留言:0更新日期:2024-03-28 19:18
本申请实施例提供了一种音频处理方法和系统,其中,所述的音频处理方法包括:通过获取第一头部数据,并根据所述第一头部数据确定标准音频合成参数;获取第二头部数据,并根据所述第一头部数据和所述第二头部数据,确定所述头部的偏移量;根据所述偏移量调整所述标准音频合成参数,得到目标音频合成参数;根据所述目标音频合成参数对音频数据进行处理,以输出环绕声音效。从而通过持续将目标音频合成参数与头部的姿态数据的偏移值进行同步,即可使人佩戴耳机时感受到与真实世界坐标相对固定的空间音频,达到实时根据头部的姿态将四周的多个环绕声道在立体声耳机中模拟出来的目的。

【技术实现步骤摘要】

本申请实施例涉及计算机网络,尤其涉及一种音频处理方法、系统、计算机设备及计算机可读存储介质。


技术介绍

1、现有技术中,全球有许多声学实验室研究并推出了许多适用于耳机的传统hrtf(head related transfer functions,头部相关传输函数)技术,如杜比实验室的dolbyatmos for headphone、dts公司的dts headphone:x等,还有一些系统自带的hrtf技术如windows的xaudio等,这些适用于耳机的hrtf利用原始的环绕声音频,通过一系列音频模拟算法将四周的多个环绕声道在立体声耳机中模拟出来,使听众可以感觉到四周仿佛都有发声源。

2、然而,因为环绕声源几乎都是以屏幕内容为前方参考去决定原始声音和环绕音响的对应关系,即当摄像头后方发出声音,则对应后方音响发出声音,而传统hrtf技术是假设听众正对屏幕而进行模拟的,播放设备和耳机可以自由地相对移动,这可能会让用户对三维空间音频的感知产生不利的影响,所以一旦观众头部发生运动或为正对前方,则通过传统hrtf技术模拟出来的音频效果会变差,甚至会导致模拟出的音频效果不如原始音频的情况。


技术实现思路

1、本申请实施例的目的是提供一种音频处理方法、系统、计算机设备及计算机可读存储介质,用于解决以下问题:由于用户的头部发生运动而导致传统hrtf技术模拟出的音频效果变差。

2、本申请实施例的一个方面提供了一种音频处理方法,包括:

3、获取第一头部数据,并根据所述第一头部数据确定标准音频合成参数;

4、获取第二头部数据,并根据所述第一头部数据和所述第二头部数据,确定所述头部的偏移量;

5、根据所述偏移量调整所述标准音频合成参数,得到目标音频合成参数;

6、根据所述目标音频合成参数对音频数据进行处理,以输出环绕声音效。

7、可选地,所述第一头部数据为在初始时间点的用于校准的头部姿态数据,所述第二头部数据为任一时间点的实时头部姿态数据。

8、可选地,所述获取第一头部数据,包括:

9、获取包含所述头部的第一图像数据或第一景深数据;

10、根据所述第一图像数据或第一景深数据确定第一头部数据。

11、可选地,所述获取第二头部数据,包括:

12、按照预设周期获取包含所述头部的第二图像数据或第二景深数据;

13、根据所述第二图像数据或第二景深数据确定第二头部数据。

14、可选地,所述第一头部数据包含三维笛卡尔坐标系中的第一位置和球坐标系中的第一欧拉角;所述第二头部数据包含三维笛卡尔坐标系中的第二位置和球坐标系中的第二欧拉角。

15、可选地,所述根据所述第一头部数据和所述第二头部数据,确定所述头部的偏移量,包括:

16、确定所述第一位置和所述第二位置之间的差值,得到所述头部的位移偏移量;

17、确定所述第一欧拉角和所述第二欧拉角之间的差值,得到所述头部的旋转偏移量。

18、可选地,所述根据所述目标音频合成参数对音频数据进行处理,以输出环绕声音效,包括:

19、通过hrtf技术根据所述目标音频合成参数对音频数据进行处理,以输出环绕声音效。

20、本申请实施例的一个方面又提供了一种音频处理装置,包括:

21、音频合成参数确定模块,用于获取第一头部数据,并根据所述第一头部数据确定标准音频合成参数;

22、偏移量确定模块,用于获取第二头部数据,并根据所述第一头部数据和所述第二头部数据,确定所述头部的偏移量;

23、音频合成参数调整模块,用于根据所述偏移量调整所述标准音频合成参数,得到目标音频合成参数;

24、音频数据处理模块,用于根据所述目标音频合成参数对音频数据进行处理,以输出环绕声音效。

25、可选地,所述第一头部数据为在初始时间点的用于校准的头部姿态数据,所述第二头部数据为任一时间点的实时头部姿态数据。

26、可选地,所述音频合成参数确定模块,包括:

27、第一数据获取子模块,用于获取包含所述头部的第一图像数据或第一景深数据;

28、第一头部数据确定子模块,用于根据所述第一图像数据或第一景深数据确定第一头部数据。

29、可选地,所述偏移量确定模块,包括:

30、第二数据获取子模块,用于按照预设周期获取包含所述头部的第二图像数据或第二景深数据;

31、第二头部数据确定子模块,用于根据所述第二图像数据或第二景深数据确定第二头部数据。

32、可选地,所述第一头部数据包含三维笛卡尔坐标系中的第一位置和球坐标系中的第一欧拉角;所述第二头部数据包含三维笛卡尔坐标系中的第二位置和球坐标系中的第二欧拉角。

33、可选地,所述偏移量确定模块,包括:

34、位移偏移量确定子模块,用于确定所述第一位置和所述第二位置之间的差值,得到所述头部的位移偏移量;

35、旋转偏移量确定子模块,用于确定所述第一欧拉角和所述第二欧拉角之间的差值,得到所述头部的旋转偏移量。

36、可选地,所述音频数据处理模块,包括:

37、音频数据处理子模块,用于通过hrtf技术根据所述目标音频合成参数对音频数据进行处理,以输出环绕声音效。

38、可选地,所述标准音频合成参数包含第一监听点坐标,所述音频合成参数调整模块,包括:

39、监听点坐标调整子模块,用于根据所述偏移量对所述第一监听点坐标进行调整,得到第二监听点坐标;

40、监听点坐标替换子模块,用于将所述标准音频合成参数中的第一监听点坐标替换为所述第二监听点坐标,得到目标音频合成参数。

41、本申请实施例的一个方面又提供了一种计算机设备,所述计算机设备包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如上述的音频处理方法的步骤。

42、本申请实施例的一个方面又提供了一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序可被至少一个处理器所执行,以使所述至少一个处理器执行所述计算机程序时实现如上述的音频处理方法的步骤。

43、本申请实施例提供的音频处理方法、系统、设备及计算机可读存储介质,通过获取第一头部数据,并根据所述第一头部数据确定标准音频合成参数;获取第二头部数据,并根据所述第一头部数据和所述第二头部数据,确定所述头部的偏移量;根据所述偏移量调整所述标准音频合成参数,得到目标音频合成参数;根据所述目标音频合成参数对音频数据进行处理,以输出环绕声音效。从而通过持续将目标音频合成参数与用户头部的姿态数据的偏移值进行同步,即可使人佩戴耳机时感受到与真实世界坐标相对固定的空间音频,达到实时根据用户头部的姿态将四周的多个环绕声道在立体声耳机中模拟出来本文档来自技高网...

【技术保护点】

1.一种音频处理方法,其特征在于,包括:

2.根据权利要求1所述的音频处理方法,其特征在于,所述第一头部数据为在初始时间点的用于校准的头部姿态数据,所述第二头部数据为任一时间点的实时头部姿态数据。

3.根据权利要求1或2所述的音频处理方法,其特征在于,所述获取第一头部数据,包括:

4.根据权利要求1或2所述的音频处理方法,其特征在于,所述获取第二头部数据,包括:

5.根据权利要求1所述的音频处理方法,其特征在于,所述第一头部数据包含三维笛卡尔坐标系中的第一位置和球坐标系中的第一欧拉角;所述第二头部数据包含三维笛卡尔坐标系中的第二位置和球坐标系中的第二欧拉角。

6.根据权利要求5所述的音频处理方法,其特征在于,所述根据所述第一头部数据和所述第二头部数据,确定所述头部的偏移量,包括:

7.根据权利要求1所述的音频处理方法,其特征在于,所述根据所述目标音频合成参数对音频数据进行处理,以输出环绕声音效,包括:

8.根据权利要求1所述的音频处理方法,其特征在于,所述标准音频合成参数包含第一监听点坐标,所述根据所述偏移量调整所述标准音频合成参数,得到目标音频合成参数,包括:

9.一种音频处理装置,其特征在于,包括:

10.一种计算机设备,所述计算机设备包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时用于实现权利要求1至8中任意一项所述的音频处理方法的步骤。

11.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序可被至少一个处理器所执行,以使所述至少一个处理器执行权利要求1至8中任意一项所述的音频处理方法的步骤。

...

【技术特征摘要】

1.一种音频处理方法,其特征在于,包括:

2.根据权利要求1所述的音频处理方法,其特征在于,所述第一头部数据为在初始时间点的用于校准的头部姿态数据,所述第二头部数据为任一时间点的实时头部姿态数据。

3.根据权利要求1或2所述的音频处理方法,其特征在于,所述获取第一头部数据,包括:

4.根据权利要求1或2所述的音频处理方法,其特征在于,所述获取第二头部数据,包括:

5.根据权利要求1所述的音频处理方法,其特征在于,所述第一头部数据包含三维笛卡尔坐标系中的第一位置和球坐标系中的第一欧拉角;所述第二头部数据包含三维笛卡尔坐标系中的第二位置和球坐标系中的第二欧拉角。

6.根据权利要求5所述的音频处理方法,其特征在于,所述根据所述第一头部数据和所述第二头部数据,确定所述头部的偏移量,包括:

7.根据权利...

【专利技术属性】
技术研发人员:朱俊炜
申请(专利权)人:上海哔哩哔哩科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1