面向混合网络的伴音与视频协同呈现系统技术方案

本申请实施例提供一种面向混合网络的伴音与视频协同呈现系统，包括：视频链路模块，用于获取视频流，在视频流中插入时间戳，计算视频全链路的延迟时间；音频链路模块，用于获取与视频流相对应的音频流，根据音频流生成不同延迟时间的多路延迟音频流；同时，在音频流中插入可视化时间戳，生成延迟测算信号流；应用网关模块，用于根据延迟测算信号流计算音频全链路的延迟时间，根据视频全链路的延迟时间和音频全链路的延迟时间，确定一路延迟音频流并控制音频链路模块发送至移动终端。本申请实施例提供的呈现系统在面向电视伴音与频道视频主信号通过不同网络独立分发时，可以通过对延迟的计算和主动对齐，实现音画准实时同步播放。放。放。

【技术实现步骤摘要】
面向混合网络的伴音与视频协同呈现系统


[0001]本申请涉及移动媒体
，尤其涉及一种面向混合网络的伴音与视频协同呈现系统。

技术介绍

[0002]近年来，随着超高清户外大屏、移动媒体的快速发展，新的广播电视传播方式也随之改变，内容的呈现形式与分发方法也日趋多样。一方面，数字电视、IPTV等广播或专用网络的视频传输仍然是电视节目传输的主要手段；另一方面，随着互联网/移动互联网的网络质量和速度不断提升，WebRTC/QUIC/SRT等众多低延迟传输协议发展，可以利用互联网/移动互联网实现可媲美广播专用网络传输质量的视音频分发。
[0003]但是，现有的技术实现并没有考虑基于分发端的统一控制、不同网络的分发延迟以及不同的频道自动切换，伴随着用户所使用的移动终端多样化及复杂的网络环境，经常会出现“音画不同步”的现象，在体验上会给用户带来一种不舒服感。

技术实现思路

[0004]为了解决上述技术缺陷之一，本申请实施例中提供了一种面向混合网络的伴音与视频协同呈现系统。
[0005]根据本申请实施例的第一个方面，提供了一本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种面向混合网络的伴音与视频协同呈现系统，其特征在于，包括：视频链路模块，用于获取视频流，在所述视频流中插入时间戳，计算视频全链路的延迟时间；音频链路模块，用于获取与所述视频流相对应的音频流，根据所述音频流生成不同延迟时间的多路延迟音频流；同时，在所述音频流中插入可视化时间戳，生成延迟测算信号流；应用网关模块，用于根据延迟测算信号流计算音频全链路的延迟时间，根据所述视频全链路的延迟时间和音频全链路的延迟时间，确定一路延迟音频流并控制所述音频链路模块发送至移动终端。2.根据权利要求1所述的面向混合网络的伴音与视频协同呈现系统，其特征在于，所述视频链路模块包括视频编码器、传输分发服务器和机顶盒终端，所述视频编码器、所述传输分发服务器和所述机顶盒终端依次连接；所述视频编码器，用于计算所述视频流传输至视频编码器的延迟时间，记为第一视频延迟时间；所述机顶盒终端，用于基于所述时间戳计算所述视频流经视频编码器传输至机顶盒终端的延迟时间，记为第二视频延迟时间；计算所述视频流由所述机顶盒终端传输至户外大屏的延迟时间，记为第三视频延迟时间；所述传输分发服务器，用于根据所述第一视频延迟时间、所述第二视频延迟时间和所述第三视频延迟时间，得到视频全链路的延迟时间并发送至所述应用网关模块。3.根据权利要求2所述的面向混合网络的伴音与视频协同呈现系统，其特征在于，所述视频编码器在所述视频流的SEI信息中插入时间戳，具体的，将SEI信息放在主编码图像数据之前，位于每个关键帧的前部。4.根据权利要求1所述的面向混合网络的伴音与视频协同呈现系统，其特征在于，所述音频链路模块包括音频编码服务器、音频延迟服务器、音频直播服务器，所述音频编码服务器、所述音频延迟服务器和所述音频直播服务器依次连接；所述音频编码服务器，用于计算所述音频流传输至音频编码器的延迟时间，记为第一音频延迟时间；所述音频延迟服务器，用于计...

【专利技术属性】
技术研发人员：姜文波，顾军，刘玓，王振中，马健，赵旭，卢冠宇，孙剑，刘永强，顿子振，王汗青，李婵，田浩，喻庆杰，刘寒，
申请(专利权)人：中央广播电视总台，
类型：发明
国别省市：