时间戳处理方法、装置、电子设备及计算机存储介质制造方法及图纸

技术编号:23772281 阅读:64 留言:0更新日期:2020-04-12 00:56
本发明专利技术实施例提供了一种时间戳处理方法、装置、电子设备及计算机存储介质,以目标视频的第一个视频帧的时间戳为起始时间戳,以第一时间间隔为视频帧时间戳增量,生成均匀递增的第一视频帧时间戳序列,以及以所述目标视频的第一个音频帧的时间戳为起始时间戳,以第二时间间隔为音频帧时间戳增量,生成均匀递增的第一音频帧时间戳序列,并将第一视频帧时间戳序列中各视频帧的时间戳和第一音频帧时间戳序列中各音频帧的时间戳按照从小到大的顺序进行排序。保证输出的视频帧时间戳均匀递增,输出的音频帧时间戳均匀递增,且各音视频帧相互交错递增,规范时间戳,进而提高目标视频的上线转码成功率,提高目标视频的播放质量。

Time stamp processing method, device, electronic equipment and computer storage medium

【技术实现步骤摘要】
时间戳处理方法、装置、电子设备及计算机存储介质
本专利技术涉及视频
,尤其涉及一种时间戳处理方法、装置、电子设备及计算机存储介质。
技术介绍
视频网站中内容的素材来源非常丰富,包括自制,用户上传,电视台信号收录,直播转点播等等。由于不同素材的编码方式、封装格式以及音视频的排列方式存在不同的情况,如果原素材的音视频时间戳不规范,在这些素材经过转码成运营码流后,容易产生音视频时间戳不均匀递增的问题,上线转码的成功率低。
技术实现思路
本专利技术实施例的目的在于提供一种时间戳处理方法、装置、电子设备及计算机存储介质,以实现目标视频音视频时间戳均匀递增。具体技术方案如下:在本专利技术实施的第一方面,首先提供了一种时间戳处理方法,包括:以目标视频的第一个视频帧的时间戳为起始时间戳,以第一时间间隔为视频帧时间戳增量,生成均匀递增的第一视频帧时间戳序列,以及以所述目标视频的第一个音频帧的时间戳为起始时间戳,以第二时间间隔为音频帧时间戳增量,生成均匀递增的第一音频帧时间戳序列;将所述第一视频帧时间戳序列中各视频帧的时间戳和所述第一音频帧时间戳序列中各音频帧的时间戳按照从小到大的顺序进行排序,得到对应于所述目标视频的第一时间戳序列。在本专利技术实施的第二方面,还提供了一种时间戳处理装置,包括:生成模块,用于以目标视频的第一个视频帧的时间戳为起始时间戳,以第一时间间隔为视频帧时间戳增量,生成均匀递增的第一视频帧时间戳序列,以及以所述目标视频的第一个音频帧的时间戳为起始时间戳,以第二时间间隔为音频帧时间戳增量,生成均匀递增的第一音频帧时间戳序列;第一排序模块,用于将所述第一视频帧时间戳序列中各视频帧的时间戳和所述第一音频帧时间戳序列中各音频帧的时间戳按照从小到大的顺序进行排序,得到对应于所述目标视频的第一时间戳序列。在本专利技术实施的第三方面,还提供了一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;存储器,用于存放计算机程序;处理器,用于执行存储器上所存放的程序时,实现本专利技术实施例第一方面中所述的方法步骤。在本专利技术实施的又一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述任一所述的时间戳处理方法。在本专利技术实施的又一方面,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一所述的时间戳处理方法。本专利技术实施例提供的时间戳处理方法、装置、电子设备及计算机存储介质,以目标视频的第一个视频帧的时间戳为起始时间戳,以第一时间间隔为时间戳增量均匀递增生成第一视频帧时间戳序列,以目标视频的第一个音频帧的时间戳为起始时间戳,以第二时间间隔为时间戳增量均匀递增生成第一音频帧时间戳序列,并将第一视频帧时间戳序列中各视频帧的时间戳和第一音频帧时间戳序列中各音频帧的时间戳按照从小到大的顺序进行排序。保证输出的视频帧时间戳均匀递增,输出的音频帧时间戳均匀递增,且各音视频帧相互交错递增,规范时间戳,进而提高目标视频的上线转码成功率,提高目标视频的播放质量。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。图1为本专利技术实施例中一种时间戳处理方法的流程图;图2为本专利技术实施例中另一种时间戳处理方法的流程图;图3是本专利技术实施例中一种时间戳处理装置的结构图;图4是本专利技术实施例中另一种时间戳处理装置的结构图;图5是本专利技术实施例中又一种时间戳处理装置的结构图;图6是本专利技术实施例中一种电子设备的结构图。具体实施方式下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行描述。为方便理解,在对本专利技术实施例中的技术方案进行描述时:VSn表示目标视频中各视频帧在第一时间戳序列中的时间戳;Vn表示目标视频中各视频帧在第二时间戳序列中的时间戳,其中,n表示目标视频帧的帧数;Vfirst表示目标视频中第一个视频帧的时间戳;VDelay表示第一时间间隔,即视频帧时间戳增量;ASm表示目标视频中各音频帧在第一时间戳序列中的时间戳,Am表示目标视频中各音频帧在第二时间戳序列中的时间戳,其中m表示目标音频帧的帧数;Afirst表示目标视频中第一个音频帧的时间戳;ADelay表示第二时间间隔,即音频帧时间戳增量。实施例一请参见图1,图1是本专利技术实施例提供的一种时间戳处理方法的流程图,该方法可以应用于服务器。如图1所示,所述方法包括以下步骤:步骤101、以目标视频的第一个视频帧的时间戳为起始时间戳,以第一时间间隔为视频帧时间戳增量,生成均匀递增的第一视频帧时间戳序列,以及以所述目标视频的第一个音频帧的时间戳为起始时间戳,以第二时间间隔为音频帧时间戳增量,生成均匀递增的第一音频帧时间戳序列;步骤102、将所述第一视频帧时间戳序列中各视频帧的时间戳和所述第一音频帧时间戳序列中各音频帧的时间戳按照从小到大的顺序进行排序,得到对应于所述目标视频的第一时间戳序列。本专利技术实施例中,目标视频是未转码的源视频。所述目标视频中包含视频数据包和音频数据包,将视频数据包和音频数据包进行解码,将会得到视频数据对应的各视频帧的时间戳,以及音频数据对应的各音频帧的时间戳。由于视频网站上视频素材的来源各有不同,不同素材的编码方式和封装格式也千差万别,这将导致所述目标视频的时间戳可能不规范,需要根据所述目标视频进行时间戳均匀递增的修正,生成均匀递增的音视频帧时间戳序列。在步骤101中,以目标视频的第一个视频帧的时间戳为起始时间戳,以第一时间间隔为视频帧时间戳增量,生成均匀递增的第一视频帧时间戳序列,以及以所述目标视频的第一个音频帧的时间戳为起始时间戳,以第二时间间隔为音频帧时间戳增量,生成均匀递增的第一音频帧时间戳序列,可以按照如下步骤进行:S1、确定使视频帧均匀递增的第一时间间隔VDelay,以及使音频帧均匀递增的第二时间间隔ADelay。其中,所述第一时间间隔VDelay可以根据所述目标视频中视频的帧率确定,具体的,可以表示为:VDelay=1000ms/视频帧率。假设视频帧率为25,则所述第一时间间隔为40ms,VDelay=40;所述第二时间间隔ADelay可以根据所述目标视频中音频的帧采样率和音频采样率确定,具体的,可以表示为:ADelay=帧采样数*1000ms/音频采样率。其中,帧采样数由编码器的属性决定,若音频编码AAC(AdvancedAudioCoding,高级音频编码)的采样率为44100,假设其帧采样数为1024,则所述第二时间间隔是23.22ms,ADelay=23.22。S2、使各视频帧时间戳按照VDelay均匀递增,各音频帧的时间戳ADelay均匀递增,可以表示为本文档来自技高网...

【技术保护点】
1.一种时间戳处理方法,其特征在于,包括以下步骤:/n以目标视频的第一个视频帧的时间戳为起始时间戳,以第一时间间隔为视频帧时间戳增量,生成均匀递增的第一视频帧时间戳序列,以及以所述目标视频的第一个音频帧的时间戳为起始时间戳,以第二时间间隔为音频帧时间戳增量,生成均匀递增的第一音频帧时间戳序列;/n将所述第一视频帧时间戳序列中各视频帧的时间戳和所述第一音频帧时间戳序列中各音频帧的时间戳按照从小到大的顺序进行排序,得到对应于所述目标视频的第一时间戳序列。/n

【技术特征摘要】
1.一种时间戳处理方法,其特征在于,包括以下步骤:
以目标视频的第一个视频帧的时间戳为起始时间戳,以第一时间间隔为视频帧时间戳增量,生成均匀递增的第一视频帧时间戳序列,以及以所述目标视频的第一个音频帧的时间戳为起始时间戳,以第二时间间隔为音频帧时间戳增量,生成均匀递增的第一音频帧时间戳序列;
将所述第一视频帧时间戳序列中各视频帧的时间戳和所述第一音频帧时间戳序列中各音频帧的时间戳按照从小到大的顺序进行排序,得到对应于所述目标视频的第一时间戳序列。


2.根据权利要求1所述的方法,其特征在于,在所述以目标视频的第一个视频帧的时间戳为起始时间戳,以第一时间间隔为视频帧时间戳增量,生成均匀递增的第一视频帧时间戳序列,以及以所述目标视频的第一个音频帧的时间戳为起始时间戳,以第二时间间隔为音频帧时间戳增量,生成均匀递增的第一音频帧时间戳序列之前,所述方法还包括:
将目标视频的各视频帧的源时间戳和各音频帧的源时间戳按照从小到大的顺序进行排序,得到对应于所述目标视频的第二时间戳序列;
在所述将所述第一视频帧时间戳序列中各视频帧的时间戳和所述第一音频帧时间戳序列中各音频帧的时间戳按照从小到大的顺序进行排序,得到对应于所述目标视频的第一时间戳序列之后,所述方法还包括:
分别计算目标视频帧的时间戳偏移量与目标音频帧的时间戳偏移量,其中,所述目标视频帧与所述目标音频帧为所述第一时间戳序列中任意相邻的视频帧与音频帧,所述目标视频帧的偏移量为所述目标视频帧在所述第二时间戳序列的时间戳与其在所述第一时间戳序列中的时间戳的差值,所述目标音频帧的偏移量为所述目标音频帧在所述第二时间戳序列的时间戳与其在所述第一时间戳序列中的时间戳的差值;
在所述目标视频帧的时间戳偏移量与所述目标音频帧的时间戳偏移量满足预设条件的情况下,对所述第一时间戳序列对应的音频帧进行修正。


3.根据权利要求2所述的方法,其特征在于,所述将目标视频的各视频帧的源时间戳和各音频帧的源时间戳按照从小到大的顺序进行排序,得到对应于所述目标视频的第二时间戳序列,包括:
分别获取所述目标视频的各视频帧的源时间戳和各音频帧的源时间戳;
若第一视频帧的源时间戳大于第二视频帧的源时间戳,分别对所述第二视频帧的源时间戳、位于所述第二视频帧之后的视频帧的源时间戳和位于所述第二视频帧之后的音频帧的源时间戳进行修正,其中,所述第一视频帧和所述第二视频帧为所述目标视频中任意相邻的两视频帧,且所述第二视频帧位于所述第一视频帧之后;
若第一音频帧的源时间戳大于第二音频帧的源时间戳,分别对所述第二音频帧的源时间戳、位于所述第二音频帧之后的视频帧的源时间戳和位于所述第二音频帧之后的音频帧的源时间戳进行修正,其中,所述第一音频帧和所述第二音频帧为所述目标视频中任意相邻的两音频帧,所述第二音频帧位于所述第一音频帧之后;
将修正后的各视频帧的源时间戳和各音频帧的源时间戳按照从小到大的顺序进行排序,得到对应于所述目标视频的第二时间戳序列。


4.根据权...

【专利技术属性】
技术研发人员:项东涛
申请(专利权)人:北京奇艺世纪科技有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1