一种视频分类方法、电子设备和存储介质技术

技术编号:24853732 阅读:21 留言:0更新日期:2020-07-10 19:07
本发明专利技术实施例提供了一种视频分类方法、装置、电子设备和存储介质,通过视频分类模型实现对视频的分类,该视频分类模型包括根据作为训练参数的聚类中心矩阵和所述特征信息进行运算的聚类运算层。通过聚类运算层的运算过程,能够基于聚类中心矩阵中每一列向量所表示的聚类中心对特征信息进行聚类式的分析,提取有利于确定视频所属类别的特征,提高视频分类的准确性。同时,通过视频分类模型实现视频的自动分类,提高了对视频分类的分类效率。

【技术实现步骤摘要】
一种视频分类方法、电子设备和存储介质
本专利技术涉及机器学习和视频分析
,尤其是涉及一种视频分类方法、电子设备和存储介质。
技术介绍
视频分类有助于进行视频的检索和管理,通常通过对视频添加的标签表示视频所属的类别。传统的方法多通过人工标注的方式对视频进行分类。然而,随着互联网技术的发展,越来越多的视频,尤其是短视频,出现在网络,例如,个人用户上传的短视频。这些短视频涉及动漫、影视、饮食、文娱、体育、游戏等多个类别。如果通过人工标注的方式进行分类,不仅需要消耗大量人力成本,且容易被受个人主观因素影响导致分类不全面和不准确。可见,通过人工标注的方式对视频进行分类不仅效率低,且容易导致分类不准确。
技术实现思路
本专利技术实施例提供一种视频分类方法、电子设备和存储介质,用以解决现有技术中通过人工标注的方式对视频进行分类不仅效率低,且容易导致分类不准确的问题。针对以上技术问题,第一方面,本专利技术实施例提供一种视频分类方法,包括:根据视频的组成元素提取特征信息,其中,所述组成元素包括视频的图像、音频和/本文档来自技高网...

【技术保护点】
1.一种视频分类方法,其特征在于,包括:/n根据视频的组成元素提取特征信息,其中,所述组成元素包括视频的图像、音频和/或字幕;/n将所述特征信息输入视频分类模型,得到由所述视频分类模型输出的分类信息;所述分类信息用于表示所述视频所属的类别;/n其中,所述视频分类模型为,将根据样本视频提取的特征信息作为输入,通过机器学习训练得到的用于对视频进行分类的模型;所述视频分类模型包括聚类运算层,所述聚类运算层用于根据作为训练参数的聚类中心矩阵和所述特征信息进行运算。/n

【技术特征摘要】
1.一种视频分类方法,其特征在于,包括:
根据视频的组成元素提取特征信息,其中,所述组成元素包括视频的图像、音频和/或字幕;
将所述特征信息输入视频分类模型,得到由所述视频分类模型输出的分类信息;所述分类信息用于表示所述视频所属的类别;
其中,所述视频分类模型为,将根据样本视频提取的特征信息作为输入,通过机器学习训练得到的用于对视频进行分类的模型;所述视频分类模型包括聚类运算层,所述聚类运算层用于根据作为训练参数的聚类中心矩阵和所述特征信息进行运算。


2.根据权利要求1所述的视频分类方法,其特征在于,所述将所述特征信息输入视频分类模型,得到由所述视频分类模型输出的分类信息,包括:
将所述特征信息输入所述聚类运算层,由所述聚类运算层输出第一矩阵;
将所述第一矩阵输入所述视频分类模型的权重聚合层,由所述权重聚合层输出第二矩阵;
将所述第二矩阵输入所述视频分类模型的全连接层,由所述全连接层输出预测向量,将所述预测向量作为所述分类信息;
其中,所述权重聚合层包括至少一个卷积子层和至少一个激活函数;所述预测向量包括所述视频所属的类别为各预设类别的概率。


3.根据权利要求2所述的视频分类方法,其特征在于,所述将所述特征信息输入所述聚类运算层,由所述聚类运算层输出第一矩阵,包括:
将所述特征信息中根据任一组成元素提取的特征矩阵,作为目标特征矩阵,从所述聚类运算层的各聚类子层中确定与所述目标特征矩阵对应的目标聚类子层;
将所述目标特征矩阵输入所述目标聚类子层,由所述目标聚类子层输出聚类运算矩阵;
获取所述特征信息中每一特征矩阵对应的聚类子层输出的聚类运算矩阵,将获取的聚类运算矩阵进行拼接,得到所述第一矩阵;
其中,所述目标聚类子层用于根据所述目标特征矩阵和属于所述目标聚类子层的聚类中心矩阵进行运算。


4.根据权利要求3所述的视频分类方法,其特征在于,所述将所述目标特征矩阵输入所述目标聚类子层,由所述目标聚类子层输出聚类运算矩阵,包括:
将属于所述目标聚类子层的聚类中心矩阵作为目标聚类中心矩阵,将所述目标特征矩阵输入所述目标聚类子层中的聚类分析单元,由所述聚类分析单元输出聚类分析结果;
将所述聚类分析结果和所述目标特征矩阵输入所述目标聚类子层中的中间运算单元,由所述中间运算单元输出中间运算结果;
将所述聚类分析结果和所述中间运算结果输入所述目标聚类子层中的第一运算单元,由所述第一运算单元根据所述聚类分析结果、所述中间运算结果和作为训练参数的协方差矩阵,确定第一编码矩阵;
将所述聚类分析结果、所述中间运算结果和所述目标特征矩阵输入所述目标聚类子层中的第二运算单元,由所述第二运算单元根据所述聚类分析结果、所述中间运算结果、所述目标特征矩阵和所述协方差矩阵,确定第二编码矩阵;
将所述第一编码矩阵和所述第二编码矩阵进行拼接,得到由所述目标聚类子层输出的聚类运算矩阵。


5.根据权利要求4所述的视频分类方法,其特征在于,所述将所述目标特征矩阵输入所述目标聚类子层中的聚类分析单元,由所述聚类分析单元输出聚类分析结果,包括:
将所述目标特征矩阵输入所述聚类分析单元,由所述聚类分析单元根据所述目标特征矩阵与所述目标聚...

【专利技术属性】
技术研发人员:周晓晓
申请(专利权)人:咪咕文化科技有限公司中国移动通信集团有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1