视音频数据的发送方法、显示方法、发送端及接收端技术

本申请实施例涉及数据传输领域，公开了一种视音频的发送方法，应用于发送端，方法包括：对采集到的音频数据和视频数据进行编码；根据网络质量的实时检测结果，采用与实时检测结果对应的视音频发送策略，进行视音频数据的发送；其中，实时检测结果至少包括第一质量等级和第二质量等级；第二质量等级的网络质量低于第一质量等级；与第二质量等级对应的视音频发送策略包括：将编码后的音频数据以及编码后的部分视频数据发送至所述接收端，所述部分视频数据包括至少部分关键帧和未传输的视频帧的运动信息。上述过程旨在解决弱网、网络切换等的环境下出现的视音频数据传输效果不理想从而导致的视音频画面卡顿、花屏和中断等问题。花屏和中断等问题。花屏和中断等问题。

【技术实现步骤摘要】
视音频数据的发送方法、显示方法、发送端及接收端


[0001]本申请实施例涉及数据传输领域，特别涉及一种视音频数据的发送方法、显示方法、发送端、接收端、电子设备、存储介质。

技术介绍

[0002]随着视音频技术、移动互联网技术的不断发展，视音频数据的传输系统已经被广泛应用在人们的日常生活中，视频会议、视频聊天等典型的视音频系统的受众人群也越来越广。与此同时，也出现了一个问题，现有的网络环境中的大量弱网环境的存在，并不能时刻满足视音频数据同时传输的需求，例如，在电梯、地下车库、公共交通上、高铁上、人群聚集场所、第五代移动通信/第四代移动通信等网络切换等的场景下，经常会出现视音频画面卡顿、花屏甚至直接中断的情况，导致用户体验差。

技术实现思路

[0003]本申请实施例的主要目的在于解决上述问题，提供一种视音频数据的发送方法、显示方法、发送端、接收端、电子设备及计算机可读存储介质，以解决在弱网、网络切换等的环境下出现的视音频数据传输效果不理想导致的视音频画面卡顿、花屏和中断等导致用户体验差的问题。
[0004]为解决上述技术问题本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视音频数据的发送方法，其特征在于，应用于发送端，包括：对采集到的音频数据和视频数据进行编码；根据网络质量的实时检测结果，采用与所述实时检测结果对应的视音频发送策略，进行视音频数据的发送；其中，所述实时检测结果至少包括第一质量等级和第二质量等级；所述第二质量等级的网络质量低于所述第一质量等级；与所述第二质量等级对应的视音频发送策略包括：将编码后的音频数据以及编码后的部分视频数据发送至所述接收端，所述部分视频数据包括至少部分关键帧和未传输的视频帧的运动信息。2.根据权利要求1所述的视音频数据的传输方法，其特征在于，所述实时检测结果还包括第三质量等级，所述第三质量等级的网络质量低于所述第二质量等级；与所述第三质量等级对应的视音频发送策略包括：仅将编码后的音频数据发送至所述接收端。3.根据权利要求1所述的视音频数据的传输方法，其特征在于，在所述根据网络质量的实时检测结果，采用与所述实时检测结果对应的视音频发送策略之前，还包括：根据固定的量化步长提取所述视频帧的关键点和雅克比矩阵，并将提取的所述关键点和雅克比矩阵作为所述视频帧的运动信息。4.根据权利要求1至3中任一项所述的视音频数据的发送方法，其特征在于，与所述第一质量等级对应的视音频发送策略包括：将编码后的音频数据和编码后的视频数据发送至接收端。5.根据权利要求1至3中任一项所述的视音频数据的发送方法，其特征在于，在所述根据网络质量的实时检测结果，采用与所述实时检测结果对应的视音频发送策略之前，还包括实时检测传输网络的质量指标，其中，所述质量指标包括以下之一或其任意组合：丢包率、延时、抖动、错报率、往返时延RTT、带宽。6.一种视音频数据的显示方法，其特征在于，应用于接收端，包括：接收编码数据；对接收的编码数据进行解码；在经解码后得到的数据包括音频数据以及部分视频数据的情况下，根据未传输的视频帧的运动信息，对未传输的视频帧进行重构，得到重构后的视频帧；其中，所述部分视频数据包括至少部分关键帧和未传输的视频帧的运动信息；将所述重构后的视频帧、所述解码后得到的数据中的关键帧和所述音频数据进行渲染显示。7.根据权利要求6所述的视音频数据的显示方法，其特征在于，在所述对接收的编码数据进行解码之后，还包括：在经解码后得到的数据仅包括音频数据的情况下，根据所述音频数据驱动虚拟人模型，生成随所述音频数据变化动作的虚拟人动态视频帧；将所述虚拟人动态...

【专利技术属性】
技术研发人员：刘志龙，石挺干，
申请(专利权)人：中兴通讯股份有限公司，
类型：发明
国别省市：