【技术实现步骤摘要】
视频画面中对象的信息的获取方法、装置及设备
本专利技术涉及图像识别
,特别是涉及一种视频画面中对象的信息的获取方法、装置及设备。
技术介绍
随着视频技术的发展,视频画面呈现的内容可以包括多样化的对象,例如,文字形式的内容:文字对象;人像形式的内容:人物对象等等。并且,示例性的,视频画面中文字对象的对象信息具体可以包括:影视剧中的演职人员名称和角色名称,比赛视频中比赛选手的名称等等;人物对象的对象信息具体可以包括:影视剧中的人像代表的演员名称、角色名称以及演员作品等等,比赛视频中的人像代表的参赛选手名称、所在阵营以及国籍等等信息。对此,为了使视频的观众以及视频评价平台等等存在视频画面中对象的信息获取需求的主体,能够直观以及快速地了解视频画面中对象的信息,需要自动获取视频画面中对象的信息。
技术实现思路
本专利技术实施例的目的在于提供一种视频画面中对象的信息的获取方法、装置及设备,以实现自动获取视频画面中对象的信息的效果。具体技术方案如下:第一方面,本专利技术实施例提供了一种视频画面中对 ...
【技术保护点】
1.一种视频画面中对象的信息的获取方法,其特征在于,所述方法包括:/n获取视频中的视频帧以及所述视频帧的画面类型;所述画面类型包括:待识别对象为文字对象的文字类型,以及待识别对象为人物对象的人物类型;/n利用与所述画面类型对应的识别模型,从所述视频帧中识别与所述画面类型对应的预存对象信息匹配的内容,作为所述视频帧的对象信息;/n基于所述视频中各视频帧的对象信息,获得所述视频的视频画面中对象的信息。/n
【技术特征摘要】
1.一种视频画面中对象的信息的获取方法,其特征在于,所述方法包括:
获取视频中的视频帧以及所述视频帧的画面类型;所述画面类型包括:待识别对象为文字对象的文字类型,以及待识别对象为人物对象的人物类型;
利用与所述画面类型对应的识别模型,从所述视频帧中识别与所述画面类型对应的预存对象信息匹配的内容,作为所述视频帧的对象信息;
基于所述视频中各视频帧的对象信息,获得所述视频的视频画面中对象的信息。
2.根据权利要求1所述的方法,其特征在于,所述获取视频中视频帧的画面类型,包括:
获取所述视频帧的时间戳;所述时间戳用于表明所述视频帧在所述视频中的播放时间点;
从所述视频对应的预存的时间戳与画面类型的对应关系中,查找所述视频帧的时间戳对应的画面类型,作为所述视频帧的画面类型。
3.根据权利要求1至2任一项所述的方法,其特征在于,与所述文字类型对应的预存对象信息包括:预存的人物名称信息;
所述利用与所述画面类型对应的识别模型,从所述视频帧中识别与所述画面类型对应的预存对象信息匹配的内容,作为所述视频帧的对象信息,包括:
获取所述文字类型的视频帧中第一指定区域的图像,作为第一待检图像;
利用预先训练得到的第一神经网络模型,对所述第一待检图像进行文本检测,得到所述第一待检图像中存在文字信息的文字区域,并将所得到的文字区域作为待识别图像;其中,所述第一神经网络模型为利用第一样本图像和所述第一样本图像中文字区域的标注框训练得到的;
利用预先训练得到的第二神经网络模型,对所述待识别图像进行文本识别,得到所述待识别图像中的文字信息;其中,所述第二神经网络模型为利用第二样本图像和所述第二样本图像中的人物名称信息训练得到的;所述第二样本图像为存在所述预存的人物名称信息的图像;
将所得到的文字信息作为所述视频帧的对象信息。
4.根据权利要求3所述的方法,其特征在于,所述第一待检图像中存在文字信息的文字区域的数量为多个;
所述将所得到的文字区域作为待识别图像,包括:
获取所得到的多个文字区域在所述第一待检图像中的坐标信息,以及所述界面图像中文字信息的分布方向;
基于每个文字区域的所述坐标信息,按照所述分布方向对所得到的多个文字区域进行拼接,得到待识别图像。
5.根据权利要求3所述的方法,其特征在于,所述将所得到的文字信息作为所述视频帧的对象信息,包括:
分别计算所得到的文字信息与多个预存对象信息之间的相似度,得到多个第一相似度;
将所述多个第一相似度中符合第一预设相似条件的相似度,作为第一目标相似度;
利用所述第一目标相似度对应的预存对象信息,对所得到的文字信息进行修正,得到修正后的文字信息;
将所述修正后的文字信息作为所述文字类型的视频帧的对象信息。
6.根据权利要求1所述的方法,其特征在于,与所述人物类型对应的预存对象信息包括:预存的人物头部图像;
所述利用与所述画面类型对应的识别模型,从所述视频帧中识别与所述画面类型对应的预存对象信息匹配的内容,作为所述视频帧的对象信息,包括:
获取该人物类型的...
【专利技术属性】
技术研发人员:肖丁,
申请(专利权)人:杭州威佩网络科技有限公司,
类型:发明
国别省市:浙江;33
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。