选择用于帧间时间偏移变异的通道调整方法技术

本文提供一种用于多通道音频或话音信号处理的方法，其包含：接收参考通道及目标通道，确定第一失配值与第二失配值之间的变异，及将所述变异与第一阈值进行比较，所述第一阈值可具有预定值或可基于帧类型或平滑化因数而调整。所述方法还包含基于所述变异且基于所述比较调整所述目标通道的一组目标样本以产生一组经调整目标样本。调整所述一组目标样本包含基于所述变异选择第一内插及第二内插当中的一者。所述方法进一步包含基于一组参考样本及所述一组经调整目标样本产生至少一个经编码通道。所述方法还包含将所述至少一个经编码通道发射到第二装置。

Selecting channel adjustment method for inter frame time offset variation

【技术实现步骤摘要】
【国外来华专利技术】选择用于帧间时间偏移变异的通道调整方法相关申请案的交叉参考本申请案请求2017年9月12日申请的标题为“选择用于帧间时间偏移变异的通道调整方法(SELECTINGCHANNELADJUSTMENTMETHODFORINTER-FRAMETEMPORALSHIFTVARIATIONS)”的美国临时专利申请案第62/557,373号及2018年8月28日申请的标题为“选择用于帧间时间偏移变异的通道调整方法(SELECTINGCHANNELADJUSTMENTMETHODFORINTER-FRAMETEMPORALSHIFTVARIATIONS)”的美国专利申请案第16/115,166号的优先权，所述申请案以全文引用的方式并入本文中。
本专利技术大体上涉及选择用于帧间时间偏移变异的通道调整方法。
技术介绍
技术的进步已产生更小且更强大的计算装置。举例来说，多种便携式个人计算装置(包含例如移动及智能型电话的无线电话、平板电脑及膝上型计算机)体积小、重量轻且易于用户携带。这些装置可经由无线网络传达语音及数据包。另外，许多这类装置并入有额外功能，例如数码相机、数码摄像机、数字记录器及音频文件播放器。而且，这些装置可处理可执行指令，所述指令包含可用以存取因特网的软件应用程序，例如网页浏览器应用程序。因而，这些装置可包含重要的计算及网络连接能力。例如无线电话的电子装置可包含用以接收音频信号的多个麦克风。在许多情形下，相比第二麦克风，声源(例如说话的个人、音乐源等)可更接近第一麦克风。在这类情形下，从第二麦克风接收的第二音频信号相对于从第一麦克风接收的第一音频信号可延迟。用以编码音频信号的一种编码形式为立体声编码。在立体声编码中，来自麦克风的音频信号可经编码以产生中间通道(例如对应于第一音频信号与第二音频信号的总和的信号)及侧通道(例如对应于第一音频信号与第二音频信号之间的差值的信号)。由于第一音频信号与第二音频信号的接收之间的延迟，音频信号可能在时间上未对准，其可增大第一音频信号与第二音频信号之间的差值。由于第一音频信号与第二音频信号之间的差值的增大，可使用更大数目的位来编码侧通道。为降低第一音频信号与第二音频信号之间的差值(且为降低用以编码侧通道的位的数目)，第一音频信号与第二音频信号可在时间上对准。举例来说，第二音频信号的帧可经时移以使第二音频信号的帧与第一音频信号的对应帧在时间上对准。由于声源与麦克风之间的距离可改变，因此偏移量(例如，第二音频信号经移位的样本量)可取决于帧而改变。如果两个帧之间的偏移值不同，那么可在两个帧之间的边界处引入不连续性。举例来说，归因于偏移值的差值，一或多个样本可经跳过或从一个帧重复到下一个。音频信号的帧边界处的不连续可在音频信号的播放期间产生可听见的咔呖声或其它音频伪声。
技术实现思路
根据一个实施方案，一种装置包含经配置以接收参考通道及目标通道的编码器。参考通道包含一组参考样本，且目标通道包含一组目标样本。编码器还经配置以确定第一失配值与第二失配值之间的变异。第一失配值指示所述一组参考样本中的第一参考样本与所述一组目标样本中的第一目标样本之间的时间失配的量。第二失配值指示所述一组参考样本中的第二参考样本与所述一组目标样本中的第二目标样本之间的时间失配的量。编码器经配置以将变异与第一阈值进行比较。编码器经配置以基于变异且基于比较调整所述一组目标样本以产生一组经调整目标样本。编码器经配置以基于所述一组参考样本及所述一组经调整目标样本产生至少一个经编码通道。装置包含经配置以发射至少一个经编码通道的网络接口。根据另一实施方案，一种无线通信的方法包含在第一装置处接收参考通道及目标通道。参考通道包含一组参考样本，且目标通道包含一组目标样本。所述方法还包含确定第一失配值与第二失配值之间的变异。第一失配值指示所述一组参考样本中的第一参考样本与所述一组目标样本中的第一目标样本之间的时间失配的量。第二失配值指示所述一组参考样本中的第二参考样本与所述一组目标样本中的第二目标样本之间的时间失配的量。所述方法包含将变异与第一阈值进行比较。所述方法还包含基于变异且基于比较调整所述一组目标样本以产生一组经调整目标样本。所述方法进一步包含基于所述一组参考样本及所述一组经调整目标样本产生至少一个经编码通道。所述方法还包含将所述至少一个经编码通道发射到第二装置。根据另一实施方案，一种设备包含用于接收参考通道的装置及用于接收目标通道的装置。参考通道包含一组参考样本，且目标通道包含一组目标样本。所述设备还包含用于确定第一失配值与第二失配值之间的变异的装置。第一失配值指示所述一组参考样本中的第一参考样本与所述一组目标样本中的第一目标样本之间的时间失配的量。第二失配值指示所述一组参考样本中的第二参考样本与所述一组目标样本中的第二目标样本之间的时间失配的量。所述设备包含用于将变异与第一阈值进行比较的装置。所述设备还包含用于基于变异且基于比较调整所述一组目标样本以产生一组经调整目标样本的装置。所述设备进一步包含用于基于所述一组参考样本及所述一组经调整目标样本产生至少一个经编码通道的装置。所述设备还包含用于发射所述至少一个经编码通道的装置。根据另一实施方案，一种非暂时性计算机可读媒体存储指令，所述指令在由处理器执行时使得处理器执行包含在第一装置处接收参考通道及目标通道的操作。参考通道包含一组参考样本，且目标通道包含一组目标样本。所述操作还包含确定第一失配值与第二失配值之间的变异。第一失配值指示所述一组参考样本中的第一参考样本与所述一组目标样本中的第一目标样本之间的时间失配的量。第二失配值指示所述一组参考样本中的第二参考样本与所述一组目标样本中的第二目标样本之间的时间失配的量。所述操作包含将变异与第一阈值进行比较。所述操作还包含基于变异且基于比较调整所述一组目标样本以产生一组经调整目标样本。所述操作进一步包含基于所述一组参考样本及所述一组经调整目标样本产生至少一个经编码通道。所述操作还包含将所述至少一个经编码通道发射到第二装置。本专利技术的其它实施方案、优势及特征将在审阅整个申请案之后变得显而易见，所述申请案包含以下部分：附图说明、具体实施方式及权利要求书。附图说明图1为系统的特定实施方案的框图，所述系统包含经配置以基于失配值之间的变异调整音频样本的装置；图2为示出可基于失配值之间的变异而调整的样本的第一特定实例的图式；图3为示出可基于失配值之间的变异而调整的样本的第二特定实例的图式；图4为系统的第二特定实施方案的框图，所述系统包含经配置以基于失配值之间的变异调整音频样本的装置；图5为经配置以使用经调整样本编码多个通道的系统的图式；图6为用以确定参考通道的状态机的实例的图式；图7为示出可基于失配值之间的变异而调整的样本的第三特定实例的图式；图8为示出可基于失配值之间的变异而调整的样本的第四特定实例的图式；图9为示出使用经调整样本编码多个通道的特定方法的流程图；图10为无线装置的框图，所述无线装置可操作以执行根本文档来自技高网...

【技术保护点】
1.一种用于多通道音频信号的译码的方法，所述方法包括：/n在第一装置处接收参考通道及目标通道，所述参考通道包含一组参考样本，且所述目标通道包含一组目标样本；/n在所述第一装置处确定第一失配值与第二失配值之间的变异，所述第一失配值指示所述一组参考样本中的第一参考样本与所述一组目标样本中的第一目标样本之间的时间失配的量，所述第二失配值指示所述一组参考样本中的第二参考样本与所述一组目标样本中的第二目标样本之间的时间失配的量；/n在所述第一装置处将所述变异与第一阈值进行比较；/n在所述第一装置处基于所述变异且基于所述比较调整所述一组目标样本以产生一组经调整目标样本；/n在所述第一装置处基于所述一组参考样本及所述一组经调整目标样本产生至少一个经编码通道；及/n将所述至少一个经编码通道从所述第一装置发射到第二装置。/n

【技术特征摘要】
【国外来华专利技术】20170912 US 62/557,373;20180828 US 16/115,1661.一种用于多通道音频信号的译码的方法，所述方法包括：
在第一装置处接收参考通道及目标通道，所述参考通道包含一组参考样本，且所述目标通道包含一组目标样本；
在所述第一装置处确定第一失配值与第二失配值之间的变异，所述第一失配值指示所述一组参考样本中的第一参考样本与所述一组目标样本中的第一目标样本之间的时间失配的量，所述第二失配值指示所述一组参考样本中的第二参考样本与所述一组目标样本中的第二目标样本之间的时间失配的量；
在所述第一装置处将所述变异与第一阈值进行比较；
在所述第一装置处基于所述变异且基于所述比较调整所述一组目标样本以产生一组经调整目标样本；
在所述第一装置处基于所述一组参考样本及所述一组经调整目标样本产生至少一个经编码通道；及
将所述至少一个经编码通道从所述第一装置发射到第二装置。


2.根据权利要求1所述的方法，其中基于所述变异且基于所述比较调整所述一组目标样本包括：
响应于确定所述变异不超过所述第一阈值，基于所述变异对所述一组目标样本执行第一内插；或
响应于确定所述变异超过所述第一阈值，基于所述变异对所述一组目标样本执行第二内插，其中所述第一内插不同于所述第二内插。


3.根据权利要求2所述的方法，其中执行所述第一内插包括执行辛格内插及拉格朗日内插当中的至少一者。


4.根据权利要求2所述的方法，其中执行所述第一内插包括执行混合内插，所述混合内插包含使用辛格内插及拉格朗日内插两者。


5.根据权利要求2所述的方法，其中执行所述第二内插包括执行重叠及相加内插。


6.根据权利要求5所述的方法，其中执行所述重叠及相加内插是基于所述第一失配值及所述第二失配值。


7.根据权利要求6所述的方法，其中执行所述重叠及相加内插是基于第一窗函数及第二窗函数，其中所述第二窗函数与所述第一窗函数相关。


8.根据权利要求1所述的方法，其进一步包括基于所述一组目标样本的帧类型确定所述第一阈值。


9.根据权利要求8所述的方法，其中所述帧类型指示所述一组目标样本对应于话音、音乐及噪声当中的至少一者。


10.根据权利要求9所述的方法，其中基于指示所述一组目标样本的帧类型的信息确定所述第一阈值包括响应于确定所述帧类型对应于音乐而降低所述第一阈值。


11.根据权利要求1所述的方法，其进一步包括基于平滑化因数确定所述第一阈值，所述平滑化因数指示交叉相关值的平滑度设置。


12.根据权利要求1所述的方法，其进一步包括：
减少采样所述参考通道以产生参考经减少采样通道；
减少采样所述目标通道以产生目标经减少采样通道；及
基于所述参考经减少采样通道与所述目标经减少采样通道的比较确定所述第一失配值及所述第二失配值。


13.根据权利要求1所述的方法，其进一步包括基于所述变异、参考通道指示符、所述参考通道的能量与所述目标通道的能量及瞬态检测器当中的一者确定是否调整所述一组目标样本。


14.根据权利要求1所述的方法，其中所述一组目标样本的第一部分相对于所述一组参考样本的第一部分经时移基于所述第一失配值的量，且其中所述一组目标样本的第二部分相对于所述一组参考样本的第二部分经时移基于所述第二失配值的量。


15.根据权利要求2所述的方法，其中对对应于扩展因数的多个样本执行所述第一内插。


16.根据权利要求15所述的方法，其中所述扩展因数的值小于或等于所述目标通道的帧中的样本的数目。


17.根据权利要求1所述的方法，其中所述第一失配值对应于经由第一麦克风接收第一音频信号的帧与经由第二麦克风接收第二音频信号的对应帧之间的时间延迟的量，其中所述第一音频信号对应于所述参考通道或所述目标通道中的一者，且其中所述第二音频信号对应于所述参考通道或所述目标通道中的另一者。


18.根据权利要求1所述的方法，其中所述至少一个经编码通道包含中间通道、侧通道或两者。


19.根据权利要求1所述的方法，其中第一音频信号包含右通道或左通道中的一者，且其中第二音频信号包含所述右通道或所述左通道中的另一者，其中所述第一音频信号对应于所述参考通道或所述目标通道中的一者，且其中所述第二音频信号对应于所述参考通道或所述目标通道中的另一者。


20.根据权利要求1所述的方法，其中所述第一装置集成于移动装置或基站中。


21.一种多通道音频译码装置，其包括：
编码器，其经配置以：
接收参考通道及目标通道，所述参考通道包含一组参考样本，且所述目标通道包含一组目标样本；
确定第一失配值与第二失配值之间的变异，所述第一失配值指示所述一组参考样本中的第一参考样本与所述一组目标样本中的第一目标样本之间的时间失配的量，所述第二失配值指示所述一组参考样本中的第二参考样本与所述一组目标样本中的第二目标样本之间的时间失配的量；
将所述变异与第一阈值进行比较；
基于所述变异且基于所述比较调整所述一组目标样本以产生一组经调整目标样本；及
基于所述一组参考样本及所述一组经调整目标样本产生至少一个经编码通道；及
网络接口，其经配置以发射所述至少一个经编码通道。


22.根据权利要求21所述的多通道音频译码装置，其中所述编码器包含样本调整器，其经配置以：
响应于确定所述变异不超过所述第一阈值，基于所述变异对所述一组目标样本执行第...

【专利技术属性】
技术研发人员：V·S·C·S·奇比亚姆，V·阿提，
申请(专利权)人：高通股份有限公司，
类型：发明
国别省市：美国;US