【技术实现步骤摘要】
基于关键帧的视觉语义检测方法和系统
[0001]本申请涉及网络多媒体领域,尤其涉及一种基于关键帧的视觉语义检测方法和系统。
技术介绍
[0002]现有网络中存在很多视频,其不包含或包含少量语义信息,根据现有的语义检测方法很难准确识别和解析。然而这些视频都会有若干个关键帧,关键帧为视频中最能代表其内容的视频帧。如果利用好关键帧进行视频检测,成为本领域技术人员研究的重点方向。
[0003]因此,急需一种针对性的基于关键帧的视觉语义检测方法和系统。
技术实现思路
[0004]本专利技术的目的在于提供一种基于关键帧的视觉语义检测方法和系统,通过计算帧图像的直方图在梯度方向的特征值,得到特征值跳跃点,进行视频采样、向量化和卷积运算得到关键帧,在该关键帧处进行维度转换和划分平面,将同一平面的帧图像进行图形分析,判断帧图像以及数据流是否合规。
[0005]第一方面,本申请提供一种基于关键帧的视觉语义检测方法,所述方法包括:
[0006]获取视频数据流,计算每一帧图像的直方图在梯度方向的特征值,当所述 ...
【技术保护点】
【技术特征摘要】
1.一种基于关键帧的视觉语义检测方法,其特征在于,所述方法包括:获取视频数据流,计算每一帧图像的直方图在梯度方向的特征值,当所述帧与帧之间的所述特征值之差大于预设的阈值时,对所述视频数据流进行视频采样,所述视频采样使用基础过滤单元来提取第一图像特征,将所述第一图像特征进行向量化,根据向量化后的特征值大小判断出若干个关键点,对所述若干个关键点进行聚类运算,映射到相应的视觉词典进行量化;将所述量化的结果输入到N层卷积单元,根据所述N层卷积单元的输出结果,得到第一中间结果,对所述第一中间结果进行平滑处理,得到携带有边界和区域局部特征的高维图像,将所述高维图像的帧定义为关键帧;将所述关键帧的图像向量化后进行维度转换,输入高维度样本集合,调用分类器对该高维度样本集合进行分类,集合的两两特征值在预设差值范围内的划为一组,计算组的平均特征值,将所述组与组之间的平均特征值差值大于阈值的不同组划为不同的平面;将同一平面的帧图像输入图形分析模型,识别该帧图像中包含的物体信息,获取关键物体特征,判断该帧图像是否包...
【专利技术属性】
技术研发人员:苏长君,曾祥禄,
申请(专利权)人:北京智美互联科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。