视频比分的检测识别方法及装置制造方法及图纸

本发明专利技术公开了一种视频比分的检测识别方法及装置。其中，该方法包括：将视频画面中的静止区域和纹理丰富区域进行合并处理以得到候选比分牌区域；基于第一过滤条件对候选比分牌区域进行筛选以获取视频画面上的比分牌区域；将比分牌区域的比分牌图像进行分解，以获取比分牌图像中的文字区域；基于第二过滤条件对文字区域进行筛选和匹配，以获取比分牌区域的比分区域；通过结合粗识别算法和精识别算法来识别比分区域以获取比分数字。通过本发明专利技术，能够达到协助视频编辑人员快速编目足球视频，大大地减轻视频编目人员的工作量。

【技术实现步骤摘要】

本专利技术涉及视频领域，具体而言，涉及一种视频比分的检测识别方法及装置。
技术介绍
对于广播体育视频，比分的变化情况十分重要，它为视频的编辑和分析提供了非常有帮助的信息。对于大部分体育视频，都会有比分牌出现，比分牌上记录着随时变化的比分，得到比分信息可以帮助我们对视频进行标注和编目。例如，对于一个足球视频，得到比分信息后，可以将视频的进球时间点标注出来，并进一步帮助标注进球精彩片段，这些编目信息对于这个视频十分重要。相关现有技术的比分检测识别方法包括如下两类第一类是通过字符检测识别的传统方法来检测识别比分，另一类是根据先验的规律识别体育视频中比分牌上的时间或比分，在这两种方法中由于使用图像处理技术来检测每一帧图像中的文字，然后使用视频OCR 技术识别文字，这种方法非常耗时，更重要的是，这种检测识别方法的准确率很低，并不能处理低分辨率情况，不适用足球视频的实际情况。具体的，上述传统的字幕文字检测识别方法，需要在全屏图像上寻找文字区域，然后按照模式匹配找到两个队伍的比分区域，然后进行识别。这种方式具有如下缺陷由于体育视频图像十分复杂，使用寻找文字区域然后再寻找比分区域时，准确率非常低；由于比分牌十分复杂，对于文字检测干扰非常大；由于面临着区分文字和比分的问题，导致比分检测不准或者无法检测到比分；而且由于现有的很多视频的分辨率相对较低，特别是比分数字的分辨率很低使得文字检测的过程比较耗时。目前针对相关技术中足球视频比分的检测和识别准确率低且效率低的问题，目前尚未提出有效的解决方案。
技术实现思路
针对相关技术中足球视频比分的检测和识别准确率低且效率低的问题，目前尚未提出有效的问题而提出本专利技术，为此，本专利技术的主要目的在于提供一种视频比分的检测识别方法及装置，以解决上述问题。为了实现上述目的，根据本专利技术的一个方面，提供了一种视频比分的检测识别方法，该视频比分的检测识别方法包括将视频画面中的静止区域和纹理丰富区域进行合并处理以得到候选比分牌区域；基于第一过滤条件对候选比分牌区域进行筛选以获取视频画面上的比分牌区域；将比分牌区域的比分牌图像进行分解，以获取比分牌图像中的文字区域；基于第二过滤条件对文字区域进行筛选和匹配，以获取比分牌区域的比分区域；通过结合粗识别算法和精识别算法来识别比分区域以获取比分数字。进一步地，将视频画面中的静止区域和纹理丰富区域进行合并处理以得到候选比分牌区域之前，方法还包括采用跳帧方式在视频画面中均勻提取预定数目的帧图像；获取各个帧图像之间的帧差，并将获取到的帧差进行二值化处理以获取帧差图；在帧差图上进行区域聚合运算，以获取静止区域。进一步地，将视频画面中的静止区域和纹理丰富区域进行合并处理以得到候选比分牌区域之前，方法还包括采用跳帧方式在视频画面中均勻提取预定数目的帧图像；计算并获取帧图像中每个像素的梯度绝对值；通过比较梯度绝对值和第一阈值来获取梯度图，其中，在梯度绝对值大于等于第一阈值的情况下，将梯度图中的像素标亮，否则将梯度图中的像素标暗；在梯度图上进行区域聚合运算，以获取纹理丰富区域。进一步地，基于第一过滤条件对候选比分牌区域进行筛选以获取视频画面上的比分牌区域包括计算候选比分牌区域在不同帧中的变化程度，当变化程度在预定范围内时， 将持续的帧数最大的候选比分牌区域作为视频画面上的比分牌区域。进一步地，在将视频画面中的静止区域和纹理丰富区域进行合并处理来获取候选比分牌区域之后，方法还包括根据以下公式来获取预定数目的帧图像的比分牌模板 Tt (x, y) = IV1 (χ, y) X (l_k) +It (χ, y) X k，其中，Tt (χ, y)表示 t 帧时的模板像素，Tt^1 (x, y) 表示t-1帧时的模板像素，It (X，y)表示t帧时的图像像素值，k表示更新速度；根据比分牌模板检测任意图像帧中的是否出现比分牌，在出现比分牌时执行识别比分牌，并根据该公式更新比分牌模板。进一步地，将比分牌区域的比分牌图像进行分解，以获取所有的文字区域包括采用局部自适应阈值二值化算法对比分牌区域的比分牌图像进行二值化处理，以获取二值化区域；在二值化区域中进行文字特征筛选处理来得到文字区域。进一步地，基于第二过滤条件对所有的文字区域进行筛选和匹配，以获取比分牌区域的比分区域包括根据时间区域特征获取文字区域中的时间区域，并删除文字区域中的时间区域来获取候选比分区域；根据比分区域的特征在比分区域模板中进行筛选处理， 以得到与候选比分区域匹配的比分区域，其中，比分区域的特征包括比分区域特征和队名区域特征。进一步地，通过结合粗识别算法和精识别算法来识别比分区域以获取比分数字包括通过数字识别算法来识别比分区域，得到一个或多个粗比分数字；统计预定时间内的各个粗比分数字的出现频率，将出现频率最高的数字作为比分数字。进一步地，在统计预定时间内的各个粗比分数字的出现频率，将出现频率最高的数字作为比分数字之后，方法还包括当比分数字与上次识别到的比分数字的差超过1时， 将预定时间内的出现频率次高的数字作为比分数字，或者保持显示上次识别到的比分数字。进一步地，通过二分跳动解码算法来处理视频画面，以获取预定时刻的比分区域的比分数字，该步骤包括步骤A，识别视频画面的起始位置的第一比分数字和结束位置的第二比分数字，在第一比分数字与第二比分数字不同的情况下，获取第一有效视频区间；步骤B，获取第一有效视频区间中间位置的第三比分数字，在第三比分数字与第一比分数字或第二比分数字不同时，获取第二有效视频区间；步骤C，根据第二有效视频区间循环执行步骤B，直至比分数字不再发生变化时，识别该时刻所述比分区域的比分数字。为了实现上述目的，根据本专利技术的另一方面，提供了一种视频比分的检测识别装置，该视频比分的检测识别装置包括比分牌位置检测模块，用于将获取到的视频画面中的静止区域和纹理丰富区域进行合并处理以得到候选比分牌区域；比分牌区域定位模块，用于基于第一过滤条件对候选比分牌区域进行筛选以获取视频画面上的比分牌区域；比分牌版面分解模块，用于将比分牌区域的比分牌图像进行分解，以获取所有的文字区域；比分区域定位模块，用于基于第二过滤条件对所有的文字区域进行筛选和匹配，以获取比分牌区域的比分区域；比分识别单元，用于通过结合粗识别算法和精识别算法来识别比分区域以获取比分数字。进一步地，装置还包括静止区域获取模块，用于采用跳帧方式在视频画面中均勻提取预定数目的帧图像，获取各个帧图像之间的帧差，将获取到的帧差进行二值化处理以获取帧差图，并在帧差图上进行区域聚合运算，以获取静止区域；以及纹理丰富区域获取模块，用于采用跳帧方式在视频画面中均勻提取预定数目的帧图像，获取帧图像中每个像素的梯度绝对值，通过比较梯度绝对值和第一阈值来获取梯度图，并在梯度图上进行区域聚合运算，以获取纹理丰富区域。进一步地，比分牌区域定位模块包括计算处理模块，用于计算候选比分牌区域在不同帧中的变化程度，当变化程度在预定范围内时，将持续的帧数最大的候选比分牌区域作为视频画面上的比分牌区域。进一步地，装置还包括比分牌模板建立模块，用于根据公式来获取预定数目的帧图像的比分牌模板，公式为Tt (χ, y) = IV1 (χ, y) X (l_k) +It (χ, y) X k，其中，T本文档来自技高网...

【技术保护点】
１．一种视频比分的检测识别方法，其特征在于，包括：将视频画面中的静止区域和纹理丰富区域进行合并处理以得到候选比分牌区域；基于第一过滤条件对所述候选比分牌区域进行筛选以获取所述视频画面上的比分牌区域；将所述比分牌区域的比分牌图像进行分解，以获取所述比分牌图像中的文字区域；基于第二过滤条件对所述文字区域进行筛选和匹配，以获取所述比分牌区域的比分区域；通过结合粗识别算法和精识别算法来识别所述比分区域以获取比分数字。

【技术特征摘要】

【专利技术属性】
技术研发人员：苗广艺，张名举，
申请(专利权)人：央视国际网络有限公司，
类型：发明
国别省市：11