一种图像冻帧的检测方法技术

本申请实施例公开了一种图像冻帧的检测方法

【技术实现步骤摘要】
一种图像冻帧的检测方法、装置、设备及存储介质


[0001]本申请实施例涉及图像处理
，尤其涉及一种图像冻帧的检测方法
、
装置
、
设备及存储介质
。

技术介绍

[0002]随着信息技术的飞速发展，人们对音视频观看体验的要求也越来越高，而直播或者视频画面的流畅程度是衡量观看体验的重要指标
。
其中，一个最常用的数据指标为画面每秒传输帧数
(Frames Per Second
，
FPS)
，然而，
FPS
通常是无法有效地发现画面静止的情况，例如在直播过程中对静止画面推流，从观众角度看可能会认为当前直播画面是卡住的状态，但是从
FPS
数据角度来看，图像帧间无任何异常，因此，如何准确获取图像帧间关系以改善直播或者视频画面的流畅程度成为亟需解决的问题
。
[0003]目前对于图像帧间关系的检测技术主要是采用图像间的像素差异比例或图像相似度等方向的检测，然而，目前对于图像帧间关系的检测技术基本上都需要对整体检测结果做均值并且计算百分比输出，容易忽略或弱化图像帧间的局部差异，出现对图像帧间的局部差异的误判情况，从而导致获取图像帧间关系的准确率降低
。

技术实现思路

[0004]本申请实施例提供了一种图像冻帧的检测方法
、
装置
、
设备及存储介质，用于通过显著性处理，以获取到更符合人眼观测差异部分中呈明显高灰度值的对比度较高的区域的图像，进而在显著性处理的基础上，进一步逐渐强调图像之间存在的更符合人眼视觉特征的差异，避免了忽略或弱化图像之间局部差异的情况，并能够通过差异面积值来实现对图像之间存在的更符合人眼视觉特征的差异的量化，从而可以基于最大差异面积值来判断目标图像对是否存在图像冻帧，以提高获取图像帧间关系的准确率
。
[0005]本申请实施例一方面提供了一种图像冻帧的检测方法，包括：
[0006]获取目标图像对，其中，目标图像对为两个相邻帧对应的灰度图像；
[0007]对目标图像对中的每个灰度图像进行保留高对比度区域的显著性处理，得到第一显著性图像和第二显著性图像；
[0008]对第一显著性图像和第二显著性图像进行灰度差异处理，得到灰度差异图像；
[0009]对灰度差异图像进行轮廓处理，获取差异面积值最大的目标轮廓；
[0010]若目标轮廓的差异面积值小于面积阈值，则确定目标图像对存在图像冻帧
。
[0011]本申请另一方面提供了一种图像冻帧的检测装置，包括：
[0012]获取单元，用于获取目标图像对，其中，目标图像对为两个相邻帧对应的灰度图像；
[0013]处理单元，用于对目标图像对中的每个灰度图像进行保留高对比度区域的显著性处理，得到第一显著性图像和第二显著性图像；
[0014]处理单元，还用于对第一显著性图像和第二显著性图像进行灰度差异处理，得到
灰度差异图像；
[0015]处理单元，还用于对灰度差异图像进行轮廓处理，获取差异面积值最大的目标轮廓；
[0016]确定单元，用于若目标轮廓的差异面积值小于面积阈值，则确定目标图像对存在图像冻帧
。
[0017]在一种可能的设计中，本申请实施例另一方面的一种实现方式中，处理单元具体可以用于：
[0018]对目标图像对中的每个灰度图像进行高斯模糊滤波处理，得到第一高斯模糊图像和第二高斯模糊图像；
[0019]对第一高斯模糊图像以及第二高斯模糊图像分别进行保留高对比度区域的显著性处理，得到第一显著性图像和第二显著性图像
。
[0020]在一种可能的设计中，本申请实施例另一方面的一种实现方式中，处理单元具体可以用于：
[0021]对灰度差异图像进行中值滤波处理，得到中值滤波差异图像；
[0022]对中值滤波差异图像进行轮廓处理，获取差异面积值最大的目标轮廓
。
[0023]在一种可能的设计中，本申请实施例另一方面的一种实现方式中，获取单元具体可以用于：
[0024]获取原始图像对所对应的第一颜色直方图和第二颜色直方图，其中，原始图像对为两个相邻帧对应的颜色图像；
[0025]对第一颜色直方图和第二颜色直方图进行相似度计算，得到颜色直方图相似度；
[0026]若颜色直方图相似度大于第一相似度阈值，则对原始图像对进行灰度处理，得到目标图像对
。
[0027]在一种可能的设计中，本申请实施例另一方面的一种实现方式中，获取单元具体可以用于：
[0028]若颜色直方图相似度大于第一相似度阈值，则对原始图像对进行灰度处理，得到基础灰度图像对；
[0029]对基础灰度图像对进行结构相似度计算，得到结构相似度；
[0030]若结构相似度大于第二相似度阈值，则将基础灰度图像对作为目标图像对
。
[0031]在一种可能的设计中，本申请实施例另一方面的一种实现方式中，获取单元具体可以用于：
[0032]对基础灰度图像对进行平均灰度计算，得到基础灰度图像对的基础亮度对比值；
[0033]对基础灰度图像对进行灰度标准差计算，得到基础灰度图像对的基础对比度测量值；
[0034]基于基础亮度对比值以及基础对比度测量值计算基础灰度图像对的结构对比值；
[0035]基于基础亮度对比值
、
基础对比度测量值以及结构对比值进行结构相似度计算，得到结构相似度
。
[0036]在一种可能的设计中，本申请实施例另一方面的一种实现方式中，获取单元具体可以用于：
[0037]对第一颜色直方图进行归一化处理，得到第一颜色直方图的第一颜色分布区间；
[0038]基于区间数量，对第一颜色分布区间进行均值计算，得到第一颜色分布均值；
[0039]对第二颜色直方图进行归一化处理，得到第二颜色直方图的第二颜色分布区间；
[0040]基于区间数量，对第二颜色分布区间进行均值计算，得到第二颜色分布均值；
[0041]基于第一颜色分布区间
、
第一颜色分布均值
、
第二颜色分布区间和第二颜色分布均值进行相似度计算，得到颜色直方图相似度
。
[0042]在一种可能的设计中，本申请实施例另一方面的一种实现方式中，获取单元具体可以用于：
[0043]根据解码帧率，对待测目标对象进行解码，得到待测目标对象对应的图像帧集合；
[0044]将图像帧集合中任一组两两相邻的图像帧，作为原始图像对；
[0045]对原始图像对中的颜色图像分别进行颜色像素值统计，得到每个颜色区间对应的像素值个数，以获取到第一颜色直方图和第二颜色直方图
。
[0046]在一种可能的设计中，本申请实施例另一方面的一种实现方式中，处理单元具体可以用于：...

【技术保护点】

【技术特征摘要】
1.
一种图像冻帧的检测方法，其特征在于，包括：获取目标图像对，其中，所述目标图像对为两个相邻帧对应的灰度图像；对所述目标图像对中的每个灰度图像进行保留高对比度区域的显著性处理，得到第一显著性图像和第二显著性图像；对所述第一显著性图像和所述第二显著性图像进行灰度差异处理，得到灰度差异图像；对所述灰度差异图像进行轮廓处理，获取差异面积值最大的目标轮廓；若所述目标轮廓的差异面积值小于面积阈值，则确定所述目标图像对存在图像冻帧
。2.
根据权利要求1所述的方法，其特征在于，所述对所述目标图像对中的每个灰度图像进行保留高对比度区域的显著性处理，得到第一显著性图像和第二显著性图像，包括：对所述目标图像对中的每个灰度图像进行高斯模糊滤波处理，得到第一高斯模糊图像和第二高斯模糊图像；对所述第一高斯模糊图像以及所述第二高斯模糊图像分别进行保留高对比度区域的显著性处理，得到所述第一显著性图像和所述第二显著性图像
。3.
根据权利要求1所述的方法，其特征在于，所述对所述灰度差异图像进行轮廓处理，获取差异面积值最大的目标轮廓，包括：对所述灰度差异图像进行中值滤波处理，得到中值滤波差异图像；对所述中值滤波差异图像进行所述轮廓处理，获取所述差异面积值最大的目标轮廓
。4.
根据权利要求1所述的方法，其特征在于，所述获取目标图像对，包括：获取原始图像对所对应的第一颜色直方图和第二颜色直方图，其中，所述原始图像对为两个相邻帧对应的颜色图像；对所述第一颜色直方图和所述第二颜色直方图进行相似度计算，得到颜色直方图相似度；若所述颜色直方图相似度大于第一相似度阈值，则对所述原始图像对进行灰度处理，得到所述目标图像对
。5.
根据权利要求4所述的方法，其特征在于，所述若所述颜色直方图相似度大于第一相似度阈值，则对所述原始图像对进行灰度处理，得到所述目标图像对，包括：若所述颜色直方图相似度大于所述第一相似度阈值，则对所述原始图像对进行灰度处理，得到所述基础灰度图像对；对所述基础灰度图像对进行结构相似度计算，得到结构相似度；若所述结构相似度大于第二相似度阈值，则将所述基础灰度图像对作为所述目标图像对
。6.
根据权利要求5所述的方法，其特征在于，所述对所述基础灰度图像对进行结构相似度计算，得到结构相似度，包括：对所述基础灰度图像对进行平均灰度计算，得到所述基础灰度图像对的基础亮度对比值；对所述基础灰度图像对进行灰度标准差计算，得到所述基础灰度图像对的基础对比度测量值；基于所述基础亮度对比值以及所述基础对比度测量值计算所述基础灰度图像对的结
构对比值；基于所述基础亮度对比值
、
所述基础对比度测量值以及所述结构对比值进行所述结构相似度计算，得到所述结构相似度
。7.
根据权利要求4所述的方法，其特征在于，所述对所述第一颜色直方图和所述第二颜色直方图进行相似度计算，得到颜色直方图相似度，包括：对所述第一颜色直方图进行归一化处理，得到所述第一颜色直方图的第一颜色分布区间；基于区间数量，对所述第一颜色分布区间进行均值计算，得到第一颜色分布均值；对所述第二颜色直方图进行所述归一化处理，得到所述第二颜色直方图的第二颜色分布区间；基于所述区间数量，对所述第二颜色分布区间进行均值计算，得到第二颜色分布均值；基于所述第一颜色分布区间
、
所述第一颜色分布均值
、
所述第二颜色分布区间和所述第二颜色分布均值进行所述相似度计算，得到所述颜色直方图相似度
。8.
根据权利要求4所述的方法，其特征在于，所述获取原始图像对所对应的第一颜色直方图和第二颜色直方图，包括：根据解码帧率，对待测目标对象进行解码，得到待测目标对象对应的图像帧集合；将所述图像帧集合中任一组两两相邻的图像帧，作为所述原始图像对；对所述原始图像对中...

【专利技术属性】
技术研发人员：温力，熊婷，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：