【技术实现步骤摘要】
本专利技术涉及多媒体处理,特别是涉及一种用于台词追踪的种子点选取方法、台词追踪方法及装置。
技术介绍
1、台词是戏剧表演中角色所说的话语,是剧作者用以展示剧情、刻画人物、体现主题的主要手段,也是剧本构成的基本成分。视频台词,即视频中不同角色所说的话语。视频台词的特点表现为:通常的影视剧中的台词包括单行台词、双行台词或者三行台词,单行台词大多是中文台词,双行台词可能都是中文台词,也可能是一行中文台词、一行外文台词。
2、视频的台词追踪,是指对视频中台词的位置、起始时间和结束时间、以及文本内容的识别。在针对视频中的台词进行追踪的过程中,通常是基于台词的位置和台词的内容进行的,为了提升追踪速度和追踪性能,结合上述视频台词的特点,在对视频中的台词进行追踪时,对视频的每帧图片仅选择一个台词文本框作为种子点进行追踪即可,也就是只需对同一视频画面的一个文本行进行追踪即可,该文本行即种子文本行。进一步的,针对同时出现的另外的文本行仅需识别对应的文字,以及根据该文本行对台词文本的起始时间和结束时间进行补全即可。因此,如何选取合适的文本行作为种
...【技术保护点】
1.一种用于台词追踪的种子点选取方法,其特征在于,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述获取目标视频中包含台词的至少一图像帧,以及所述至少一图像帧中至少两个文本区域,包括:
3.根据权利要求1或2所述的方法,其特征在于,所述基于所述至少两个文本区域的位置,确定所述目标视频中台词的布局类型,包括:
4.根据权利要求3所述的方法,其特征在于,所述基于所述至少一图像帧中至少两个文本区域的位置,确定至少两个目标文本框,并基于所述至少两个目标文本框确定所述目标视频中台词的布局类型,包括:
5.根据权利要求4
...【技术特征摘要】
1.一种用于台词追踪的种子点选取方法,其特征在于,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述获取目标视频中包含台词的至少一图像帧,以及所述至少一图像帧中至少两个文本区域,包括:
3.根据权利要求1或2所述的方法,其特征在于,所述基于所述至少两个文本区域的位置,确定所述目标视频中台词的布局类型,包括:
4.根据权利要求3所述的方法,其特征在于,所述基于所述至少一图像帧中至少两个文本区域的位置,确定至少两个目标文本框,并基于所述至少两个目标文本框确定所述目标视频中台词的布局类型,包括:
5.根据权利要求4所述的方法,其特征在于,所述基于所述至少一图像帧中至少两个文本区域的位置,生成台词区域热图,包括:
6.根据权利要求3所述的方法,其特征在于,所述基于所述至少两个文本区域的位置以及所述目标视频中台词的布局类型,确定所述目标视频中用于台词追踪的种子点,包括:...
【专利技术属性】
技术研发人员:赵瑞书,
申请(专利权)人:北京爱奇艺科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。