一种音视频流分布式同步方法技术

技术编号:28384708 阅读:60 留言:0更新日期:2021-05-08 00:13
本发明专利技术公开了一种音视频流分布式同步方法。本发明专利技术抽象音视频帧组概念,以逻辑时钟为基准,同步音视频帧组开始时间,音频设备以逻辑时钟为基准,组内自适应调整处理频率;视频设备基于逻辑时钟和音频时钟,实现帧组内自适应调整处理频率。在无需引入第三方设备和专业传输线的情况下,实现局域网内的音视频多设备同步。针对音频播放时延的平滑处理,可有效减少丢帧或快进概率,与视频保持一致。本发明专利技术在多设备之间以帧组粒度进行同步,降低了整体通信量,帧组内自适应调整频率,将时间平摊至多帧,进一步有效降低快进或花屏概率。该发明专利技术可实现在普适场景下实现音频分流,突破设备、通信和性能瓶颈,打造智能家庭影院。

【技术实现步骤摘要】
一种音视频流分布式同步方法
本专利技术涉及一种音视频流分布式同步方法,可实现从终端设备通过局域网分别将音视频近场投放至不同设备,同时保持音视频同步分流。
技术介绍
传统家庭影院,通常采用多个音箱与TV相连,音箱播放立体声音乐,TV播放视频;但传统音箱与TV需采用专线相连,使用场景受阻的同时安装复杂。随着智能终端发展,智能播放设备层出不穷,智能家庭影院开始使用智能音箱替换传统音箱播放立体声音乐、智能TV播放视频,因此音频和视频的分布式同步成为了亟待解决的问题。目前,苹果将音视频数据共享或传输到AppleTV,通过专线将音视频数据传输至TV送显,并通过WIFI将音频传输至音箱,实现音视频同步的立体环绕音家庭影院效果。但该技术同步过程需通过AppleTV盒子,并借助传输专线实现,因此场景应用受限,不支持从任一设备将音视频投放到音箱和TV的视频分流需求。以音频帧时间为基准同步视频、以视频帧时间为基准同步音频,并以一定阈值对齐播放时间,或以第三方时钟作为基准,将音频与视频帧数据打上时间戳,采用放缓播放、加速播放或丢弃数据的方式同步外部时钟本文档来自技高网...

【技术保护点】
1.一种音视频流分布式同步方法,其特征在于该方法包括以下步骤:/n步骤1:局域网内设备组建资源池,并将池内设备按功能分组;/n同一局域网内的设备组建设备资源池,用户可在任意设备上发起多媒体流向其它设备分布式同步传输和处理命令;/n选择用户发起多媒体流数据的设备为source端,接收多媒体流数据的设备为sink端,source端设备与sink端设备建立数据流通道和控制流通道,其中的数据流用于音视频数据传输,控制流用于控制信息传输;/nsource端设备将处理视频的sink设备分为视频设备组,将处理音频的sink设备分为音频设备组;/n根据用户视频数据对视频帧进行分组,并以视频帧组为基准,对音频帧...

【技术特征摘要】
1.一种音视频流分布式同步方法,其特征在于该方法包括以下步骤:
步骤1:局域网内设备组建资源池,并将池内设备按功能分组;
同一局域网内的设备组建设备资源池,用户可在任意设备上发起多媒体流向其它设备分布式同步传输和处理命令;
选择用户发起多媒体流数据的设备为source端,接收多媒体流数据的设备为sink端,source端设备与sink端设备建立数据流通道和控制流通道,其中的数据流用于音视频数据传输,控制流用于控制信息传输;
source端设备将处理视频的sink设备分为视频设备组,将处理音频的sink设备分为音频设备组;
根据用户视频数据对视频帧进行分组,并以视频帧组为基准,对音频帧进行分组;
步骤2:分组设备之间分布式协商音频和视频帧组开始时间;
source端设备与视频设备组协商视频帧组开始时间:视频设备获取本地信息同步给source端,source端设备根据收到的多个视频设备组信息预估下一未播放帧组的开始时间,并通知相关视频设备;
source端设备与音频设备组协商音频帧组开始时间:音频设备获取本地信息同步给source端,source端设备根据收到的多个音频设备组信息以及视频帧组开始时间预估下一未播放帧组的开始时间,并通知相关音频设备;
步骤3:音频设备以逻辑时钟为基准,自适应调整帧组播放频率,实现平滑播放;
步骤4:视频设备基于逻辑时钟和音频时钟,自适应调整帧组播放频率,实现平滑播放。


2.根据权利要求1所述的一种音视频流分布式同步方法,其特征在于:
步骤1中的视频帧分组后的每个视频帧组包括mv个帧;而后以视频帧组为基准,对音频帧进行分组,音频的一帧为包括n个采样点的一段数据,音频帧组包括ma帧。


3.根据权利要求1所述的一种音视频流分布式同步方法,其特征在于:
步骤2中采用多数原则或平均原则预估视频设备组下一个未播放视频帧组的开始时间;
采用多数原则或平均计算原则预估音频设备组下一个音频帧组的开始时间。


4.根据权利要求1所述的一种音视频流分布式同步方法,其特征在于:
步骤3中自适应调整帧组播放频率具体是:
3-1、获取当前音频播放信息,包括当前送入播放器或解码器的时间、逻辑上送入播放器或解码器的时间,根据当前送入播放器时间...

【专利技术属性】
技术研发人员:曾艳吴吉央张纪林万健周丽
申请(专利权)人:杭州电子科技大学
类型:发明
国别省市:浙江;33

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1