一种音视频信息传输方法、系统、终端设备及存储介质技术方案

本申请涉及一种音视频信息传输方法、系统、终端设备及存储介质，涉及音视频传输的技术领域，其方法包括：获取待传输信息，所述待传输信息包括视频数据包、音频数据包和文本数据包；基于预设的传输优先级规则传输所述待传输信息；接收所述待传输信息中的已传输信息，基于所述已传输信息生成待处理信息，所述已传输信息包括所述视频数据包、音频数据包和文本数据包中的一个或者多个；将所述待处理信息进行转发和/或输出。本申请具有较为全面和完整地传输信息，减少硬件和传输环境导致的负面影响的效果。的效果。的效果。

【技术实现步骤摘要】
一种音视频信息传输方法、系统、终端设备及存储介质


[0001]本申请涉及音视频传输的
，尤其是涉及一种音视频信息传输方法、系统、终端设备及存储介质。

技术介绍

[0002]音视频传输是将音视频信号通过有线或者无线方式从发送端传输到接收端或者终端，随着科技的不断发展，音视频传输在大多科技领域都成为了不可或缺的一部分。
[0003]在传统技术中，音视频传输普遍是将音频信号和视频信号进行打包，通过网络进行统一传输，在传输网络环境较好的情况下，接收端能够获取到完整的音视频信号。
[0004]然而，采用传统技术的传输方法，在安防监控、卫星通信等系统硬件功能有限或者传输网络环境较差的场景下，接收端获取到的音频信号或者视频信号均会出现不规则断断续续的情况，导致接收端不能够获取连续完整的信号，获取的信息并不全面，因此十分不便。

技术实现思路

[0005]为了较为全面和完整地传输信息，减少硬件和传输环境导致的负面影响，本申请提供一种音视频信息传输方法、系统、终端设备及存储介质。
[0006]第一方面，本申请提供一种音视频信息传输方法，采用如下的技术方案：一种音视频信息传输方法，包括：获取待传输信息，所述待传输信息包括视频数据包、音频数据包和文本数据包；基于预设的传输优先级规则传输所述待传输信息；接收所述待传输信息中的已传输信息，基于所述已传输信息生成待处理信息，所述已传输信息包括所述视频数据包、音频数据包和文本数据包中的一个或者多个；将所述待处理信息进行转发和/或输出。
[0007]通过采用上述技术方案，将视频数据包、音频数据包和文本数据包作为待传输信息，相较于现有技术，增加了文本数据包，能够减少由于音视频信息传输偏差导致的信息获取不全面的可能性；设定视频数据包、音频数据包和文本数据包的传输优先级规则，进一步保证信息传输的完整性；根据已传输信息生成待处理信息，从而将待处理信息进行输出和/或转发，能够基于实际情况，最大程度地减少硬件和传输环境导致的负面影响，尽可能地得到较为完整的信息。
[0008]可选的，所述获取待传输信息包括：基于预设的数字信号处理装置获取视频信息和音频信息；基于预设的语音识别系统对所述音频信息进行语音识别，得到文本信息；将所述视频信息、所述音频信息和所述文本信息分别进行编码压缩，得到视频数据包、音频数据包和文本数据包。
[0009]通过采用上述技术方案，将音频信息转化为占用空间更小，占用传输带宽更小的
文本信息，利于信息的传输。
[0010]可选的，所述传输优先级规则为：所述文本数据包为第一优先级，所述音频数据包为第二优先级，所述视频数据包为第三优先级。
[0011]通过采用上述技术方案，优先传输文本数据包，其次是音频数据包，最后是视频数据包，能够尽可能的保全所有的信息，减少硬件和传输环境导致的负面影响。
[0012]可选的，所述接收所述待传输信息中的已传输信息，基于所述已传输信息生成待处理信息包括：当接收到所述文本数据包、所述音频数据包和所述视频数据包时，分析所述视频数据是否连续稳定，获取第一分析结果，基于所述第一分析结果生成待处理信息；当接收到所述文本数据包和所述音频数据包时，分析所述音频数据是否连续稳定，获取第二分析结果，基于所述第二分析结果生成待处理信息；当接收到所述文本数据包时，基于所述文本数据包生成待处理信息。
[0013]可选的，所述分析所述视频数据是否连续稳定，获取第一分析结果，基于所述第一分析结果生成待处理信息包括：获取视频数据包传输后的视频数据丢包率，基于所述视频数据丢包率分析视频数据是否连续稳定；若是，则基于所述视频数据包获取所述视频信息，基于所述音频数据包获取所述音频信息，基于所述文本数据包获取所述文本信息，将所述视频信息、所述音频信息和所述文本信息作为第一待处理信息；或者，基于所述视频数据包获取所述视频信息，基于所述音频数据包获取所述音频信息，基于所述文本数据包获取所述文本信息，基于所述文字信息为所述视频信息配置字幕信息，基于所述视频信息、所述音频信息和所述字幕信息生成第二待处理信息；若否，则获取预设的固定背景，基于所述视频数据包获取所述视频信息，基于所述音频数据包获取所述音频信息，基于所述文本数据包获取所述文本信息，基于所述文字信息为所述固定背景配置字幕信息，基于所述固定背景、所述字幕信息和所述音频信息生成第三待处理信息；从所述第一待处理信息、所述第二待处理信息和所述第三待处理信息中获取目标待处理信息。
[0014]通过采用上述技术方案，可以根据视频数据的传输情况制定相应策略，具有一定的适应性，且最大程度的减少了信息丢失的可能性。
[0015]可选的，所述分析所述音频数据是否连续稳定，获取第二分析结果，基于所述第二分析结果生成待处理信息包括：获取音频数据包传输后的音频数据丢包率，基于所述音频数据丢包率分析音频数据是否连续稳定；若是，则基于所述音频数据包获取所述音频信息，基于所述文本数据包获取所述文本信息，将所述音频信息和所述文本信息作为第四待处理信息；或者，获取预设的固定背景，基于所述文本数据包获取所述文本信息，基于所述文本信息为所述固定背景配置字幕信息，基于所述音频数据包获取所述音频信息，基于所述固定背景、所述字幕信息和所述音频信息生成视频信息，基于所述视频信息生成第五待处
理信息；若否，则基于所述文本数据包获取文本信息，基于所述文本信息获取语音信息，获取预设的固定背景，基于所述文本信息为所述固定背景配置字幕信息，基于所述固定背景、所述字幕信息和所述语音信息生成第六待处理信息，生成第六待处理信息；从所述第四待处理信息、所述第五待处理信息和所述第六待处理信息中获取目标待处理信息。
[0016]通过采用上述技术方案，可以根据音频数据的传输情况和接收端的实际情况制定相应的策略，较为方便。
[0017]可选的，所述基于所述文本数据包生成待处理信息包括：基于所述文本数据包获取所述文本信息，将所述文本信息作为第七待处理信息；或者，基于所述文本数据包获取所述文本信息，基于所述文本信息获取语音信息，基于所述语音信息生成第八待处理信息；或者，获取预设的固定背景，基于所述文字信息为所述固定背景配置字幕信息，基于所述文本信息获取语音信息，基于所述语音信息、所述固定背景和所述字幕信息生成第九待处理信息；从所述第七待处理信息、所述第八待处理信息和所述第九待处理信息中获取目标待处理信息。
[0018]通过采用上述技术方案，可以根据接收端的实际情况生成不同的待处理信息，从而具有适应能力，较为方便。
[0019]第二方面，本申请还提供一种音视频信息传输系统，采用如下的技术方案：一种音视频信息传输系统，包括：发送端，用于获取待传输信息，所述待传输信息包括视频数据包、音频数据包和文本数据包；传输端，用于基于预设的传输优先级规则传输所述待传输信息；接收端，用于接收所述待传输信息中的已传输信息，基于所述已传输信息生成待处理信息，所述已传输信息为所述视频数据包、音频数据包和文本数据包中的一个或者本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种音视频信息传输方法，其特征在于，包括：获取待传输信息，所述待传输信息包括视频数据包、音频数据包和文本数据包；基于预设的传输优先级规则传输所述待传输信息；接收所述待传输信息中的已传输信息，基于所述已传输信息生成待处理信息，所述已传输信息包括所述视频数据包、音频数据包和文本数据包中的一个或者多个；将所述待处理信息进行转发和/或输出。2.根据权利要求1所述的一种音视频信息传输方法，其特征在于，所述获取待传输信息包括：基于预设的数字信号处理装置获取视频信息和音频信息；基于预设的语音识别系统对所述音频信息进行语音识别，得到文本信息；将所述视频信息、所述音频信息和所述文本信息分别进行编码压缩，得到视频数据包、音频数据包和文本数据包。3.根据权利要求2所述的一种音视频信息传输方法，其特征在于，所述传输优先级规则为：所述文本数据包为第一优先级，所述音频数据包为第二优先级，所述视频数据包为第三优先级。4.根据权利要求3所述的一种音视频信息传输方法，其特征在于，所述接收所述待传输信息中的已传输信息，基于所述已传输信息生成待处理信息包括：当接收到所述文本数据包、所述音频数据包和所述视频数据包时，分析所述视频数据是否连续稳定，获取第一分析结果，基于所述第一分析结果生成待处理信息；当接收到所述文本数据包和所述音频数据包时，分析所述音频数据是否连续稳定，获取第二分析结果，基于所述第二分析结果生成待处理信息；当接收到所述文本数据包时，基于所述文本数据包生成待处理信息。5.根据权利要求4所述的一种音视频信息传输方法，其特征在于，所述分析所述视频数据是否连续稳定，获取第一分析结果，基于所述第一分析结果生成待处理信息包括：获取视频数据包传输后的视频数据丢包率，基于所述视频数据丢包率分析视频数据是否连续稳定；若是，则基于所述视频数据包获取所述视频信息，基于所述音频数据包获取所述音频信息，基于所述文本数据包获取所述文本信息，将所述视频信息、所述音频信息和所述文本信息作为第一待处理信息；或者，基于所述视频数据包获取所述视频信息，基于所述音频数据包获取所述音频信息，基于所述文本数据包获取所述文本信息，基于所述文字信息为所述视频信息配置字幕信息，基于所述视频信息、所述音频信息和所述字幕信息生成第二待处理信息；若否，则获取预设的固定背景，基于所述视频数据包获取所述视频信息，基于所述音频数据包获取所述音频信息，基于所述文本数据包获取所述文本信息，基于所述文字信息为所述固定背景配置字幕信息，基于所述固定背景、所述字幕信息和所述音频信息生成第三待处理信息；从所述第一待处理信息、所述第二待处理信息和所述第三待处理信息中获取目标待处理信息。...

【专利技术属性】
技术研发人员：陈亚刚，孔祥海，汪洋，王增栋，张新成，
申请(专利权)人：上海金桥信息科技有限公司，
类型：发明
国别省市：