一种动静态字幕的提取方法及装置制造方法及图纸

技术编号:26792632 阅读:21 留言:0更新日期:2020-12-22 17:08
本发明专利技术提供一种动静态字幕的提取方法及装置,利用边缘提取算法对读取到的第一视频帧进行处理,得到帧二值边缘图;基于直线检测算法和直线过滤方式检测所述帧二值边缘图中的竖直直线和水平直线并过滤,得到确定直线的第二视频帧并进行分割,得到多个画面;计算每一画面对应的画面区域改变率,得到所有画面对应的画面区域改变率;基于所有画面所对应的画面区域改变率,确定第二视频帧中所包含的动态画面和静态画面;针对动态画面和静态画面采用大小不同的采用率进行采样后,进行OCR处理和去重处理,得到各自对应的动态字幕和静态字幕。由此,实现准确快速有效的提取出广告视频中的动态字幕和静态字幕的目的。

【技术实现步骤摘要】
一种动静态字幕的提取方法及装置
本专利技术涉及图像处理
,尤其涉及一种动静态字幕的提取方法及装置。
技术介绍
随着智能电子设备和通讯网络的不断更新发展,通过移动电子设备观看图片和视频已成为人们日常生活中不可或缺的一部分。基于此,利用视频投放和推广广告也越来越普遍。目前,广告视频主要由动态画面和静态画面构成,广告视频的字幕也同样分为动态字幕和静态字幕,动态字幕会出现在动态画面中,静态字幕会出现在静态画面中。在字幕变动方面,动态字幕往往随着画面的改变而变动,静态字幕不会随着时间的变化而变化,或者间隔很久变化一次。在所起的作用方面,动态字幕主要提供产品的细致描述,静态字幕主要提供产品的信息。基于广告营销方面的需求,需要对广告视频中的动态字幕和静态字幕进行分离。在现有技术中,主要利用人工的方式去识别、提取动态字幕和静态字幕,该过程不仅耗时、效率低、准确率也非常低。
技术实现思路
有鉴于此,本专利技术实施例提供一种动静态字幕的提取方法及装置,以解决现有技术中识别和提取动静态字幕耗时、效率低和准确率低的问题。...

【技术保护点】
1.一种动静态字幕的提取方法,其特征在于,/n利用边缘提取算法对读取到的第一视频帧进行处理,得到帧二值边缘图;/n基于直线检测算法检测所述帧二值边缘图中的竖直直线和水平直线;/n对检测到的竖直直线和水平直线进行直线过滤,得到确定直线的第二视频帧;/n对所述确定直线的第二视频帧并进行分割,得到多个画面;/n计算每一画面对应的画面区域改变率,得到所有画面对应的画面区域改变率;/n基于所述所有画面所对应的画面区域改变率,确定所述第二视频帧中所包含的动态画面和静态画面;/n针对所述动态画面,基于预设第一采样率进行采样,并对采样后的动态画面进行光学字符识别OCR处理和去重处理,得到动态字幕;/n针对所述...

【技术特征摘要】
1.一种动静态字幕的提取方法,其特征在于,
利用边缘提取算法对读取到的第一视频帧进行处理,得到帧二值边缘图;
基于直线检测算法检测所述帧二值边缘图中的竖直直线和水平直线;
对检测到的竖直直线和水平直线进行直线过滤,得到确定直线的第二视频帧;
对所述确定直线的第二视频帧并进行分割,得到多个画面;
计算每一画面对应的画面区域改变率,得到所有画面对应的画面区域改变率;
基于所述所有画面所对应的画面区域改变率,确定所述第二视频帧中所包含的动态画面和静态画面;
针对所述动态画面,基于预设第一采样率进行采样,并对采样后的动态画面进行光学字符识别OCR处理和去重处理,得到动态字幕;
针对所述静态画面,基于预设第二采样率进行采样,并对采样后的静态画面进行光学字符识别OCR处理和去重处理,得到静态字幕,所述第二采样率大于所述第一采样率。


2.根据权利要求1所述的方法,其特征在于,所述基于直线检测算法检测所述帧二值边缘图中的竖直直线和水平直线之后,还包括:
若未检测到长度大于阈值的直线,确定所述视频帧中的画面全部为动态画面,所述直线包括竖直直线和水平直线;
基于预设第一采样间隔对所述动态画面进行采样,并对采样后的动态画面进行光学字符识别OCR处理和去重处理,得到动态字幕。


3.根据权利要求1所述的方法,其特征在于,所述对检测到的竖直直线和水平直线进行直线过滤,得到确定直线的第二视频帧,包括:
去除位于所述帧二值边缘图边缘的水平直线和竖直直线;
合并剩余的水平直线中距离小于预设距离的水平直线;
若得到一条水平直线,获取所述一条水平直线的横坐标;
若得到多条水平直线,获取所述多条水平直线中的最大横坐标和最小横坐标构成的第一区间;
合并剩余的竖直直线中距离小于预设距离的竖直直线;
若得到一条竖直直线,获取所述一条竖直直线的横坐标;
若得到多条竖直直线,获取所述多条竖直直线中的最大纵坐标和最小纵坐标构成的第二区间;
基于所述第一区间和所述第二区间确定直线,得到确定直线的第二视频帧。


4.根据权利要求1所述的方法,其特征在于,所述计算每一画面对应的画面区域改变率,得到所有画面对应的画面区域改变率,包括:
由多个画面中确认任一画面为当前待处理画面进行处理,获取多个画面区域改变率,所述处理过程包括:
提取所述当前待处理画面对应的下一间隔帧画面;
计算当前待处理画面和下一间隔帧画面之间的帧间差,得到所述当前待处理画面对应的画面差分图;
统计所述画面差分图中绝对值小于第一阈值的像素点个数;
将所述像素点个数和当前待处理画面的面积的商值作为所述当前待处理画面对应的画面区域改变率。


5.根据权利要求4所述的方法,其特征在于,所述基于所述所有画面所对应的画面区域改变率,...

【专利技术属性】
技术研发人员:钟艺豪李百川
申请(专利权)人:有米科技股份有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1