音频处理的方法、装置、设备、介质及产品制造方法及图纸

本公开提供了音频处理方法、装置、设备、介质及产品，涉及数据处理领域，尤其涉及语音技术、信息流领域。具体实现方案为：音频处理方法，包括：按照第一时间周期，周期性获取音频数据；按照第二时间周期，将获取到的音频数据进行音频组装，得到组装音频数据，所述第二时间周期为所述第一时间周期的整数倍；对所述组装音频数据，进行混音处理；向音频播放设备发送混音处理后的音频数据。本公开能够将周期性获取到的音频数据，进行组装，并对组装后的音频数据进行混音处理，能够减少进行混音处理的次数，节省音频处理时间，从而减少音频播放的延迟。迟。迟。

【技术实现步骤摘要】
音频处理的方法、装置、设备、介质及产品


[0001]本公开涉及数据处理
，尤其涉及语音技术、信息流


技术介绍

[0002]随着技术的发展进步，电子设备在用户的生活中得到广泛的应用，用户可以通过电子设备进行视频或者语音的交流。例如，用户可以使用电子设备在线进行语音通话、多人会议、直播互动等场景，麦克风等声音采集设备采集说话人的声音、现场的声音，将采集到的声音信号进行传输，发送至播放装置进行播放。
[0003]由于音频在系统设备之间的传输产生，声音信号会产生延迟，此外，对采集的音频信号需经过编码传输、混音合成等处理，其过程繁琐，导致音频播放产生延时。

技术实现思路

[0004]本公开提供了一种用于音频处理的方法、装置、设备、介质及产品。
[0005]根据本公开的一方面，提供了一种音频处理方法，包括：按照第一时间周期，周期性获取音频数据；按照第二时间周期，将获取到的音频数据进行音频组装，得到组装音频数据，所述第二时间周期为所述第一时间周期的整数倍；对所述组装音频数据，进行混音处理；向音频播放设备发送混音处理后的音频数据。
[0006]根据本公开的另一方面，提供了一种音频处理装置，包括：获取模块，用于按照第一时间周期，周期性获取音频数据；组装模块，用于按照第二时间周期，将获取到的音频数据进行音频组装，得到组装音频数据，所述第二时间周期为所述第一时间周期的整数倍；处理模块，用于对所述组装音频数据，进行混音处理；发送模块，用于向音频播放设备发送混音处理后的音频数据。
>[0007]根据本公开的又一方面，提供了一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行本公开中任一项所述的音频处理方法。
[0008]根据本公开的又一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行本公开中任一项所述的音频处理方法。
[0009]根据本公开的又一方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现本公开中任一项所述的音频处理方法。
[0010]应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0011]附图用于更好地理解本方案，不构成对本公开的限定。其中：
[0012]图1是根据本公开的音频处理方法的流程示意图；
[0013]图2是根据本公开的将获取到的音频帧进行音频组装，得到组装音频数据的方法的流程示意图；
[0014]图3是根据本公开的向音频播放设备发送混音处理后的音频数据的方法的流程示意图；
[0015]图4是根据本公开的音频处理方法的流程示意图；
[0016]图5是根据本公开的获取音频数据的方法的流程示意图；
[0017]图6是根据本公开的采集温度的装置的框图；
[0018]图7是根据本公开的采集温度的装置的框图；
[0019]图8是用来实现本公开实施例的采集温度方法的电子设备的框图。
具体实施方式
[0020]以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
[0021]随着科技的进步，虚拟现实(Virtual Reality，VR)逐渐进入人们的生活，VR技术，即将现实与虚拟相互结合，通过计算机技术模拟出来的现实中的世界，利用计算机生成一种模拟环境，创建体验虚拟世界的计算机仿真系统，使用户沉浸于虚拟环境中。VR技术利用现实生活中的数据，通过计算机技术产生的电子信号，将其与各种输出设备结合，转化为能够让人们感受到的现象。可以是现实中真实存在的物体，也可以是肉眼不可见的物质、通过三维模型表现出来。
[0022]通过VR技术，用户可以在虚拟现实世界体验到最真实的感受，得到身临其境的感觉，真正实现了人机交互，用户在操作过程中，可以随意操作并且得到环境最真实的反馈，受到了越来越多用户的认可。
[0023]VR技术中，为了带给用户听觉体验中逼真、具有空间感的沉浸式感受，需要进行大量用户实时声音的还原，拟真，使用户通过耳机等，体验到声临其境的效果。
[0024]鉴于此，本公开实施例提供了一种音频处理方法，能够节省声音混合处理的时间，减少由混音产生的延迟。
[0025]图1是根据本公开的音频处理方法的流程示意图。如图1所示，音频处理方法包括以下步骤。
[0026]在步骤S101中，按照第一时间周期，周期性获取音频数据。
[0027]在本公开实施例中，对采集到的音频进行混音处理，并将处理后的音频进行播放，以第一时间周期进行音频数据的获取。采集的音频可以是来自不同的声源，例如，人声、环境音等，声源的位置也可以不同。每间隔第一时间周期的时长，进行一次音频数据的获取，可以理解地，获取到的音频数据以帧为单位。第一时间周期可以是根据需求确定。例如，第一时间周期为20ms时，则在0时刻、20ms时刻、40ms时刻，
……
等时刻进行音频数据的获取。
[0028]在步骤S102中，按照第二时间周期，将获取到的音频数据进行音频组装，得到组装音频数据，第二时间周期为第一时间周期的整数倍。
[0029]对于步骤S101中获取到的音频数据进行组装，得到组装音频数据，音频数据以第
一时间周期为周期进行获取，并按照第二时间周期进行组装，第二时间周期为大于第一时间周期的周期，且为第一时间周期的整数倍。仍以第一时间周期为20ms为例，则第二周期可以为40ms、60ms、80ms 等。可以理解地，经过对音频数据的组装，得到的单位音频数据的长度大于接收到的音频数据的长度。
[0030]在本公开实施例中，还包括音频数据完整性校验，例如，通过音频数据的时间长度等信息校验其是否完整，确保用于组装的音频数据是完整的音频数据。
[0031]在步骤S103中，对组装音频数据，进行混音处理。
[0032]在步骤S104中，向音频播放设备发送混音处理后的音频数据。
[0033]将组装音频数据，进行混音、叠加等处理，并且将混音处理得到的音频数据想音频播放设备进行发送，以在音频播放设备处进行音频数据的播放。
[0034]综上，根据本公开的音频处理方法，将以第一时间周期进行周期性获取得到的音频数据，进行组装，得到第一时间周期整数倍的组装音频数据，并对组装后的音频数据进行混音处理，能够减少进行混音处理的处理次数，从而节省音频处理时间，提高处理效率，进而减少本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种音频处理方法，包括：按照第一时间周期，周期性获取音频数据；按照第二时间周期，将获取到的音频数据进行音频组装，得到组装音频数据，所述第二时间周期大于所述第一时间周期，且第二时间周期为所述第一时间周期的整数倍；对所述组装音频数据，进行混音处理；向音频播放设备发送混音处理后的音频数据。2.根据权利要求1所述的方法，其中，获取的音频数据中包括有至少一个音频数据流，且所述至少一个音频数据流具有流标识以及时间戳；将获取到的音频帧进行音频组装，得到组装音频数据，包括：基于所述第二时间周期，确定进行音频组装的音频数据数量；基于所述音频数据数量，依次在当前获取到的音频数据中，确定与当前时间对应的时间戳，以及与所述时间戳对应的音频数据流，得到第一时间戳，以及与所述第一时间戳对应的第一音频数据流，其中，所述第一时间戳的数量为所述音频数据数量；按照所述第一时间戳的先后顺序，将所述第一音频数据流，依次组装得到组装音频数据。3.根据权利要求1或2所述的方法，其中，向音频播放设备发送混音处理后的音频数据，包括：将所述混音处理后的音频数据按照所述第一时间周期进行拆分；向所述音频播放设备发送拆分后的音频数据。4.根据权利要求1所述的方法，还包括：确定待接收音频数据队列中包括的待接收音频数据的数量；响应于所述音频数据队列中待接收音频数据数量超出预设数量，从所述音频数据队列中删除所述预设数量的待接收音频数据。5.根据权利要求1所述的方法，其中，获取音频数据，包括：基于卡夫卡消息系统，确定所述音频数据在远程字典服务中的存储位置；基于所述存储位置，从所述远程字典服务中获取所述音频数据。6.一种音频处理装置，包括：获取模块，用于按照第一时间周期，周期性获取音频数据；组装模块，用于按照第二时间周期，将获取到的音频数据进行音频组装，得到组装音频数据，所述第二时间周期为所述第一时间周期的整数倍；处理模块，用于对所述组装音频数据，进行混音处理；发送模块，用于向音频播放设备发送混音处理后的音...

【专利技术属性】
技术研发人员：廖覃思，林道正，符云，
申请(专利权)人：北京百度网讯科技有限公司，
类型：发明
国别省市：