频谱正交音频分量处理制造技术

一种使用频谱正交的声音分量来处理音频信号的系统。该系统包括从音频信号的左声道和右声道生成中间分量和侧分量的电路装置。该电路装置生成超中间分量，超中间分量包括从中间分量的频谱能量中移除侧分量的频谱能量。该电路装置对超中间分量进行滤波，诸如以提供空间提示处理，包括平移或双耳处理、动态范围处理或其他类型的处理。该电路装置使用滤波后的超中间分量生成左输出声道和右输出声道。中间分量生成左输出声道和右输出声道。中间分量生成左输出声道和右输出声道。

【技术实现步骤摘要】
【国外来华专利技术】频谱正交音频分量处理


[0001]本公开总体上涉及音频处理，并且更具体地涉及空间音频处理。

技术介绍

[0002]从概念上讲，左右立体声信号的侧(或“空间”)分量可以被认为是左右声道中包括空间信息的部分(即，立体声信号中出现在声场中心左右任意位置的声音)。相反，左右立体声信号的中间(或“非空间”)分量可以被认为是左右声道中包括非空间信息的部分(即，立体声信号中出现在声场中心的声音)。虽然中间分量包含立体声信号中被感知为非空间的能量，但它通常也具有来自立体声信号中在感知上没有位于声场中心的元素的能量。类似地，虽然侧分量包含立体声信号中被感知为空间的能量，但它通常也具有来自立体声信号中在感知上位于声场中心的元素的能量。为了增强处理音频的可能性范围，需要对在频谱上彼此“正交”的中间分量和侧分量的部分进行隔离和操作。

技术实现思路

[0003]实施例涉及使用频谱正交音频分量的音频处理，诸如立体声音频信号或其他多声道音频信号的超中间分量、超侧分量、残余中间分量或残余侧分量。超中间分量和超侧分量在频谱上彼此正交，并且残余中间分量和残余侧分量在频谱上彼此正交。
[0004]一些实施例包括一种用于处理音频信号的系统。该系统包括从音频信号的左声道和右声道生成中间分量和侧分量的电路装置。该电路装置生成包括从中间分量的频谱能量中移除侧分量的频谱能量的超中间分量。该电路装置对超中间分量进行滤波，诸如以提供空间提示处理，包括平移或双耳处理、动态范围处理或其他类型的处理。该电路装置使用滤波后的超中间分量生成左输出声道和右输出声道。
[0005]在一些实施例中，该电路装置对中间分量和侧分量应用傅里叶变换以将中间分量和侧分量转换到频域。该电路装置通过从频域中的中间分量的大小中减去频域中的侧分量的大小来生成超中间分量。
[0006]在一些实施例中，该电路装置对超中间分量进行滤波以对超中间分量的子带进行增益调节或时间延迟。在一些实施例中，该电路装置对超中间分量进行滤波以对超中间分量应用动态范围处理。在一些实施例中，该电路装置对超中间分量进行滤波以调节超中间分量的频率相关幅度或频率相关延迟。在一些实施例中，该电路装置对超中间分量进行滤波以对超中间分量应用基于机器学习的风格转移、转换或重新合成。
[0007]在一些实施例中，该电路装置生成包括从中间分量的频谱能量中移除超中间分量的频谱能量的残余中间分量，对残余中间分量进行滤波，并且使用滤波后的残余中间分量生成左输出声道和右输出声道。
[0008]在一些实施例中，该电路装置对残余中间分量进行滤波以对残余中间分量的子带进行增益调节或时间延迟。在一些实施例中，该电路装置对残余中间分量进行滤波以对残余中间分量应用动态范围处理。在一些实施例中，该电路装置对残余中间分量进行滤波以
调节残余中间分量的频率相关幅度或频率相关延迟。在一些实施例中，该电路装置对残余中间分量进行滤波以对残余中间分量应用基于机器学习的风格转移、转换或重新合成。
[0009]在一些实施例中，该电路装置对中间分量应用傅里叶变换以将中间分量转换到频域。该电路装置通过从频域中的中间分量的大小中减去频域中的超中间分量的大小来生成残余中间分量。
[0010]在一些实施例中，该电路装置对超中间分量应用傅里叶逆变换以将频域中的超中间分量转换到时域，通过对中间分量进行时间延迟来生成延迟中间分量，通过从时域中的延迟中间分量中减去时域中的超中间分量来生成残余中间分量，对残余中间分量进行滤波，并且使用滤波后的残余中间分量生成左输出声道和右输出声道。
[0011]在一些实施例中，该电路装置生成包括从侧分量的频谱能量中移除中间分量的频谱能量的超侧分量，对超侧分量进行滤波，并且使用滤波后的超侧分量生成左输出声道和右输出声道。
[0012]在一些实施例中，该电路装置对中间分量和侧分量应用傅里叶变换以将中间分量和侧分量转换到频域。该电路装置通过从频域中的侧分量的大小中减去频域中的中间分量的大小来生成超侧分量。
[0013]在一些实施例中，该电路装置对超侧分量进行滤波以对超侧分量的子带进行增益调节或时间延迟。在一些实施例中，该电路装置对超侧分量进行滤波以对超侧分量应用动态范围处理。在一些实施例中，该电路装置对超侧分量进行滤波以调节超侧分量的频率相关幅度或频率相关延迟。在一些实施例中，该电路装置对超侧分量进行滤波以对超侧分量应用基于机器学习的风格转移、转换或重新合成。
[0014]在一些实施例中，该电路装置生成包括从侧分量的频谱能量中移除中间分量的频谱能量的超侧分量，生成包括从侧分量的频谱能量中移除超侧分量的频谱能量的残余侧分量，对残余侧分量进行滤波，并且使用滤波后的残余侧分量生成左输出声道和右输出声道。
[0015]在一些实施例中，该电路装置对残余侧分量进行滤波以对残余侧分量的子带进行增益调节或时间延迟。在一些实施例中，该电路装置对残余侧分量进行滤波以对残余侧分量应用动态范围处理。在一些实施例中，该电路装置对残余侧分量进行滤波以调节残余侧分量的频率相关幅度或频率相关延迟。在一些实施例中，该电路装置对残余侧分量进行滤波以对残余侧分量应用基于机器学习的风格转移、转换或重新合成。
[0016]在一些实施例中，该电路装置对侧分量应用傅里叶变换以将侧分量转换到频域。该电路装置通过从频域中的侧分量的大小中减去频域中的超侧分量的大小来生成残余侧分量
[0017]在一些实施例中，该电路装置生成包括从侧分量的频谱能量中移除中间分量的频谱能量的超侧分量，对超侧分量应用傅里叶逆变换以将超中间分量转换到时域，通过对侧分量进行时间延迟来生成延迟侧分量，通过从时域中的延迟侧分量中减去时域中的超侧分量来生成残余侧分量，对残余侧分量进行滤波，并且使用滤波后的残余侧分量生成左输出声道和右输出声道。
[0018]一些实施例包括一种包括存储的程序代码的非暂态计算机可读介质。该程序代码在由至少一个处理器执行时将至少一个处理器配置为从音频信号的左声道和右声道生成中间分量和侧分量，生成包括从中间分量的频谱能量中移除侧分量的频谱能量的超中间分
量，对超中间分量进行滤波，并且使用滤波后的超中间分量生成左输出声道和右输出声道。
[0019]一些实施例包括一种用于由电路装置处理音频信号的方法。该方法包括从音频信号的左声道和右声道生成中间分量和侧分量，生成包括从中间分量的频谱能量中移除侧分量的频谱能量的超中间分量，对超中间分量进行滤波，并且使用滤波后的超中间分量生成左输出声道和右输出声道。
附图说明
[0020]所公开的实施例具有从详细描述、所附权利要求和附图(或图)将更容易很清楚的其他优点和特征。下面是对附图的简要介绍。
[0021]图(FIG.)1是根据一个或多个实施例的音频处理系统的框图。
[0022]图2A是根据一个或多个实施例的正交分量生成器的框图。
[0023]图2B是根据一个或多个实施例的正交分量生成器的框图。
[0024]图2C是根据一个或多个实本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种用于处理音频信号的系统，包括：电路装置，被配置为：从所述音频信号的左声道和右声道生成中间分量和侧分量；生成包括从所述中间分量的频谱能量中移除所述侧分量的频谱能量的超中间分量；对所述超中间分量进行滤波；以及使用滤波后的所述超中间分量生成左输出声道和右输出声道。2.根据权利要求1所述的系统，其中：所述电路装置还被配置为对所述中间分量和所述侧分量应用傅里叶变换以将所述中间分量和所述侧分量转换到频域；以及所述电路装置被配置为生成所述超中间分量包括：所述电路装置被配置为从所述频域中的所述中间分量的大小中减去所述频域中的所述侧分量的大小。3.根据权利要求1所述的系统，其中所述电路装置被配置为对所述超中间分量进行滤波包括：所述电路装置被配置为对所述超中间分量的子带进行增益调节或时间延迟中的至少一项。4.根据权利要求1所述的系统，其中所述电路装置被配置为对所述超中间分量进行滤波包括：所述电路装置被配置为对所述超中间分量应用动态范围处理。5.根据权利要求1所述的系统，其中所述电路装置被配置为对所述超中间分量进行滤波包括：所述电路装置被配置为调节所述超中间分量的频率相关幅度或频率相关延迟。6.根据权利要求1所述的系统，其中所述电路装置被配置为对所述超中间分量进行滤波包括：所述电路装置被配置为对所述超中间分量应用基于机器学习的风格转移、转换或重新合成。7.根据权利要求1所述的系统，其中所述电路装置还被配置为：生成残余中间分量，所述残余中间分量包括从所述中间分量的所述频谱能量中移除所述超中间分量的频谱能量；对所述残余中间分量进行滤波；以及使用滤波后的所述残余中间分量生成所述左输出声道和所述右输出声道。8.根据权利要求7所述的系统，其中所述电路装置被配置为对所述残余中间分量进行滤波包括：所述电路装置被配置为对所述残余中间分量的子带进行增益调节或时间延迟中的至少一项。9.根据权利要求7所述的系统，其中所述电路装置被配置为对所述残余中间分量进行滤波包括：所述电路装置被配置为对所述残余中间分量应用动态范围处理。10.根据权利要求7所述的系统，其中所述电路装置被配置为对所述残余中间分量进行滤波包括：所述电路装置被配置为调节所述残余中间分量的频率相关幅度或频率相关延迟。11.根据权利要求7所述的系统，其中所述电路装置被配置为对所述残余中间分量进行滤波包括：所述电路装置被配置为对所述残留中间分量应用基于机器学习的风格转移、转换或重新合成。12.根据权利要求7所述的系统，其中：所述电路装置还被配置为对所述中间分量应用傅里叶变换以将所述中间分量转换到
频域；以及所述电路装置被配置为生成包括从所述中间分量的所述频谱能量中移除所述超中间分量的频谱能量的所述残余中间分量包括：所述电路装置被配置为从所述频域中的所述中间分量的大小中减去所述频域中的所述超中间分量的大小。13.根据权利要求1所述的系统，其中所述电路装置还被配置为：对所述超中间分量应用傅里叶逆变换以将频域中的所述超中间分量转换到时域；通过对所述中间分量进行时间延迟来生成延迟中间分量；通过从所述时域中的所述延迟中间分量中减去所述时域中的所述超中间分量来生成残余中间分量；对所述残余中间分量进行滤波；以及使用滤波后的所述残余中间分量生成所述左输出声道和所述右输出声道。14.根据权利要求1所述的系统，其中所述电路装置还被配置为：生成包括从所述侧分量的所述频谱能量中移除所述中间分量的所述频谱能量的超侧分量；对所述超侧分量进行滤波；以及使用滤波后的所述超侧分量生成所述左输出声道和所述右输出声道。15.根据权利要求14所述的系统，其中：所述电路装置还被配置为对所述中间分量和所述侧分量应用傅里叶变换以将所述中间分量和所述侧分量转换到频域；以及所述电路装置被配置为生成包括从所述侧分量的所述频谱能量中移除所述中间分量的所述频谱能量的所述超侧分量包括：所述电路装置被配置为从所述频域中的所述侧分量的大小中减去所述频域中的所述中间分量的大小。16.根据权利要求14所述的系统，其中所述电路装置被配置为对所述超侧分量进行滤波包括：所述电路装置被配置为对所述超侧分量的子带进行增益调节或时间延迟中的至少一项。17.根据权利要求14所述的系统，其中所述电路装置被配置为对所述超侧分量进行滤波包括：所述电路装置被配置为对所述超侧分量应用动态范围处理。18.根据权利要求14所述的系统，其中所述电路装置被配置为对所述超侧分量进行滤波包括：所述电路装置被配置为调节所述超侧分量的频率相关幅度或频率相关延迟。19.根据权利要求14所述的系统，其中所述电路装置被配置为对所述超侧分量进行滤波包括：所述电路装置被配置为对所述超侧分量应用基于机器学习的风格转移、转换或重新合成。20.根据权利要求1所述的系统，其中所述电路装置还被配置为：生成包括从所述侧分量的所述频谱能量中移除所述中间分量的所述频谱能量的超侧分量；生成包括从所述侧分量的所述频谱能量中移除所述超侧分量的频谱能量的残余侧分量；对所述残余侧分量进行滤波；以及使用滤波后的所述残余侧分量生成所述左输出声道和所述右输出声道。
21.根据权利要求20所述的系统，其中所述电路装置被配置为对所述残余侧分量进行滤波包括：所述电路装置被配置为对所述残余侧分量的子带进行增益调节或时间延迟中的至少一项。22.根据权利要求20所述的系统，其中所述电路装置被配置为对所述残余侧分量进行滤波包括：所述电路装置被配置为对所述残余侧分量应用动态范围处理。23.根据权利要求20所述的系统，其中所述电路装置被配置为对所述残余侧分量进行滤波包括：所述电路装置被配置为调节所述残余侧分量的频率相关幅度或频率相关延迟。24.根据权利要求20所述的系统，其中所述电路装置被配置为对所述残余侧分量进行滤波包括：所述电路装置被配置为对所述残余侧分量应用基于机器学习的风格转移、转换或重新合成。25.根据权利要求20所述的系统，其中：所述电路装置还被配置为对所述侧分量应用傅里叶变换以将所述侧分量转换到频域；以及所述电路装置被配置为生成包括从所述侧分量的所述频谱能量中移除所述超侧分量的所述频谱能量的所述残余侧分量包括：所述电路装置被配置为从所述频域中的所述侧分量的大小中减去所述频域中的所述超侧分量的大小。26.根据权利要求1所述的系统，其中所述电路装置还被配置为：生成包括从所述侧分量的所述频谱能量中移除所述中间分量的所述频谱能量的超侧分量；对所述超侧分量应用傅里叶逆变换以将频域中的所述超中间分量转换到时域；通过对所述侧分量进行时间延迟来生成延迟侧分量；通过从所述时域中的所述延迟侧分量中减去所述时域中的所述超侧分量来生成残余侧分量；对所述残余侧分量进行滤波；以及使用滤波后的所述残余侧分量生成所述左输出声道和所述右输出声道。27.一种非暂态计算机可读介质，包括存储的程序代码，所述程序代码在由至少一个处理器执行时将所述至少一个处理器配置为：从音频信号的左声道和右声道生成中间分量和侧分量；生成包括从所述中间分量的频谱能量中移除所述侧分量的频谱能量的超中间分量；对所述超中间分量进行滤波；以及使用滤波后的所述超中间分量生成左输出声道和右输出声道。28.根据权利要求27所述的非暂态计算机可读介质，其中：所述程序代码还将所述至少一个处理器配置为对所述中间分量和所述侧分量应用傅里叶变换以将所述中间分量和所述侧分量转换到频域；以及将所述至少一个处理器配置为生成所述超中间分量的所述程序代码包括正交分量生成器还将所述至少一个处理器配置为：从所述频域中的所述中间分量的大小中减去所述频域中的所述侧分量的大小。29.根据权利要求27所述的非暂态计算机可读介质，其中将所述至少一个处理器配置为对所述超中间分量进行滤波的所述程序代码还将所述至少一个处理器配置为：对所述超
中间分量的子带进行增益调节或时间延迟中的至少一项。30.根据权利要求27所述的非暂态计算机可读介质，其中将所述至少一个处理器配置为对所述超中间分量进行滤波的所述程序代码还将所述至少一个处理器配置为：对所述超中间分量应用动态范围处理。31.根据权利要求27所述的非暂态计算机可读介质，其中将所述至少一个处理器配置为对所述超中间分量进行滤波的所述程序代码还将所述至少一个处理器配置为：调节所述超中间分量的频率相关幅度或频率相关延迟。32.根据权利要求27所述的非暂态计算机可读介质，其中将所述至少一个处理器配置为对所述超中间分量进行滤波的所述程序代码还将所述至少一个处理器配置为：对所述超中间分量应用基于机器学习的风格转移、转换或重新合成。33.根据权利要求27所述的非暂态计算机可读介质，其中所述程序代码还将所述至少一个处理器配置为：生成包括从所述中间分量的所述频谱能量中移除所述超中间分量的频谱能量的残余中间分量；对所述残余中间分量进行滤波；以及使用滤波后的所述残余中间分量生成所述左输出声道和所述右输出声道。34.根据权利要求33所述的非暂态计算机可读介质，其中将所述至少一个处理器配置为对所述残余中间分量进行滤波的所述程序代码还将所述至少一个处理器配置为：对所述残余中间分量的子带进行增益调节或时间延迟中的至少一项。35.根据权利要求33所述的非暂态计算机可读介质，其中将所述至少一个处理器配置为对所述残余中间分量进行滤波的所述程序代码还将所述至少一个处理器配置为：对所述残余中间分量应用动态范围处理。36.根据权利要求33所述的非暂态计算机可读介质，其中将所述至少一个处理器配置为对所述残余中间分量进行滤波的所述程序代码还将所述至少一个处理器配置为：调节所述残余中间分量的频率相关幅度或频率相关延迟。37.根据权利要求33所述的非暂态计算机可读介质，其中将所述至少一个处理器配置为对所述残余中间分量进行滤波的所述程序代码还将所述至少一个处理器配置为：对所述残留中间分量应用基于机器学习的风格转移、转换或重新合成。38.根据权利要求33所述的非暂态计算机可读介质，其中：所述程序代码还将所述至少一个处理器配置为：对所述中间分量应用傅里叶变换以将所述中间分量转换到频域；将所述至少一个处理器配置为生成包括从所述中间分量的所述频谱能量中移除所述超中间分量的频谱能量的所述残余中间分量的所述程序代码还将所述至少一个处理器配置为：从所述频域中的所述中间分量的大小中减去所述频域中的所述超中间分量的大小。39.根据权利要求27所述的非暂态计算机可读介质，其中所述...

【专利技术属性】
技术研发人员：Z，
申请(专利权)人：博姆云三六零公司，
类型：发明
国别省市：