一种音视频会议的实现方法及系统技术方案

技术编号:41906720 阅读:26 留言:0更新日期:2024-07-05 14:11
本申请涉及音视频会议技术领域,公开了一种音视频会议的实现方法及系统。所述方法包括:采用时间平移模块与二维卷积神经网络对第一用户终端采集的原始音视频数据流进行预处理和时间视觉特征同步,得到第一音视频数据流;进行自注意力和交叉注意力处理,得到第二音视频数据流;采用动态三元组损失和多项式损失函数进行编码并通过ModEFormer模型进行音频和视频嵌入特征提取,得到第三音视频数据流;构建得到每个第二用户终端的音视频同步和分发路径;定义数据传输和数据加密策略并将第三音视频数据流分发至多个第二用户终端,同时,通过多个第二用户终端进行音视频展示,本申请提高了会议的音视频展示效果并提高了会议的安全性。

【技术实现步骤摘要】

本申请涉及音视频会议,尤其涉及一种音视频会议的实现方法及系统


技术介绍

1、音视频会议系统作为现代通信的一个重要组成部分,随着远程工作和虚拟交互的普及,其应用范围和技术要求不断扩大。尽管技术的快速进步使得音视频会议的质量和效率有了显著的提升,但在实际应用中仍面临多种挑战。其中,音视频同步性问题是尤为突出的一个,用户常常会遭遇音频延迟或提前于视频,影响会议的流畅性和交流的自然度。此外,随着会议参与者数量的增加,如何保证每个参与者都能获得高质量的音视频体验也是一个技术难题。

2、此外,现有的音视频会议系统在处理高动态、复杂场景的音视频数据流时,往往需要消耗大量的计算资源,同时,音视频数据的安全性和隐私保护也是用户和服务提供者极为关注的问题,如何在保证数据安全的前提下实现高效的数据传输和处理,是现有技术亟待解决的重大挑战。


技术实现思路

1、本申请提供了一种音视频会议的实现方法及系统,用于提高了会议的音视频展示效果并提高了会议的安全性。

2、第一方面,本申请提供了一种音视频会议的实现方法,本文档来自技高网...

【技术保护点】

1.一种音视频会议的实现方法,其特征在于,所述音视频会议的实现方法包括:

2.根据权利要求1所述的音视频会议的实现方法,其特征在于,所述采用时间平移模块与二维卷积神经网络对第一用户终端采集的原始音视频数据流进行预处理和时间视觉特征同步,得到第一音视频数据流,包括:

3.根据权利要求1所述的音视频会议的实现方法,其特征在于,所述对所述第一音视频数据流进行自注意力和交叉注意力处理,得到第二音视频数据流,包括:

4.根据权利要求1所述的音视频会议的实现方法,其特征在于,所述采用动态三元组损失和多项式损失函数对所述第二音视频数据流进行编码,并通过ModEFor...

【技术特征摘要】

1.一种音视频会议的实现方法,其特征在于,所述音视频会议的实现方法包括:

2.根据权利要求1所述的音视频会议的实现方法,其特征在于,所述采用时间平移模块与二维卷积神经网络对第一用户终端采集的原始音视频数据流进行预处理和时间视觉特征同步,得到第一音视频数据流,包括:

3.根据权利要求1所述的音视频会议的实现方法,其特征在于,所述对所述第一音视频数据流进行自注意力和交叉注意力处理,得到第二音视频数据流,包括:

4.根据权利要求1所述的音视频会议的实现方法,其特征在于,所述采用动态三元组损失和多项式损失函数对所述第二音视频数据流进行编码,并通过modeformer模型进行音频和视频嵌入特征提取,得到第三音视频数据流,包括:

5.根据权利要求1所述的音视频会议的实现方法,其特征在于,所述基于注意力的数据同步和分发机制对多个第二用户终端进行音视频同步和分发路径构...

【专利技术属性】
技术研发人员:庞文超
申请(专利权)人:深圳市顺恒利科技工程有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1