一种图标识别的方法以及相关装置制造方法及图纸

本申请公开了一种图标识别的方法，包括：从待检测视频中随机获取P帧待检测图像；对P帧待检测图像中的待检测图像进行边缘检测，得到目标边缘检测图集合，目标边缘检测图集合中包括M个目标边缘检测图，每个目标边缘检测图是对P个边缘检测图融合后得到的；根据目标边缘检测图集合确定图标区域；根据P帧待检测图像以及图标区域确定待检测视频中的图标；将图标与预设图标集合进行匹配，获取待检测视频的图标识别结果，其中，预设图标集合包括至少一个预设图标。本申请还公开了装置。本申请利用随机采样能够增加台标背景变化的多样性，达到更好的采样效果，适用于对静态台标以及动态台标的检测，从而提升识别准确率。

A Method of Icon Recognition and Related Devices

【技术实现步骤摘要】
一种图标识别的方法以及相关装置
本申请涉及图像处理领域，尤其涉及一种图标识别的方法以及相关装置。
技术介绍
随着大量视频信息涌入人们的现实生活，视频台标检测已成为对视频来源分析的一个有效手段。通过视频的台标可以相对容易的确定视频的发布者，通过节目中的台标能定位到具体的节目。这些重要语义信息用于提供精确的视频搜索。此外，通过检测视频节目中的台标还可以去除广告片段，进而提高观赏性。在视频安全领域，视频台标检测技术可以有效的确定视频来源。目前，可以采用基于光学字符识别(OpticalCharacterRecognition，OCR)的方法对台标进行检测和识别。在用户切换节目的时候，视频画面上会出现具有文字的台标。在显示台标之前还存在一小段时间的延迟，在段时间内即可对台标进行OCR文字识别，基于文字直接判别台标类型。然而，随着视频类型的不断增加，越来越多的台标涌现出来。这些台标往往具有一些特殊的效果，比如，A类台标会不断抖动，B类台标的字幕渐次滚动出现后再消失，并交替出现在视频的左上角和右下角，C类台标的图像和文字都会不断旋转等等。这些类型的台标随时间变化而发生变化，也可以称为动图台标。基于OCR的方法对动图台标进行识别，其准确率较低，且不适用于纯图像的动态台标，导致适应范围较小。
技术实现思路
本申请实施例提供了一种图标识别的方法以及相关装置，一方面利用随机采样能够增加台标背景变化的多样性，达到更好的采样效果，另一方面，将多帧视频图像进行融合能够将动态台标变为相对稳定的静态台标，进而对静态台标进行识别，由此适用于对静态台标以及动态台标的检测，从而提升识别准确率。有鉴于此，本申请第一方面提供一种图标识别的方法，包括：从待检测视频中随机获取P帧待检测图像，其中，所述待检测视频包括Q帧视频图像，所述Q为大于1的整数，所述P为大于或等于1，且小于或等于所述Q的整数；对所述P帧待检测图像中的待检测图像进行边缘检测，得到目标边缘检测图集合，其中，所述目标边缘检测图集合中包括M个目标边缘检测图，每个目标边缘检测图是对P个边缘检测图融合后得到的，所述M为大于或等于1的整数；根据所述目标边缘检测图集合确定图标区域；根据所述P帧待检测图像以及所述图标区域确定所述待检测视频中的图标；将所述图标与预设图标集合进行匹配，获取所述待检测视频的图标识别结果，其中，所述预设图标集合包括至少一个预设图标。本申请第二方面提供一种图标识别装置，包括：获取模块，用于从待检测视频中随机获取P帧待检测图像，其中，所述待检测视频包括Q帧视频图像，所述Q为大于1的整数，所述P为大于或等于1，且小于或等于所述Q的整数；检测模块，用于对所述获取模块获取的所述P帧待检测图像中的待检测图像进行边缘检测，得到目标边缘检测图集合，其中，所述目标边缘检测图集合中包括M个目标边缘检测图，每个目标边缘检测图是对P个边缘检测图融合后得到的，所述M为大于或等于1的整数；确定模块，用于根据所述检测模块检测得到的所述目标边缘检测图集合确定台标区域；所述确定模块，还用于根据所述P帧待检测图像以及所述图标区域确定所述待检测视频中的图标；识别模块，用于将所述确定模块确定的所述图标与预设图标集合进行匹配，获取所述待检测视频的图标识别结果，其中，所述预设图标集合包括至少一个预设图标。在一种可能的设计中，在本申请实施例的第二方面的第一种实现方式中，所述图标识别装置还包括划分模块以及提取模块；所述划分模块，用于在所述检测模块对所述P帧待检测图像中的待检测图像进行边缘检测，得到目标边缘检测图集合之前，对所述P帧待检测图像中的所述每帧待检测图像进行划分，得到所述每帧待检测图像所对应的多个图像区域；所述提取模块，用于从所述划分模块划分得到的所述每帧待检测图像所对应的多个图像区域中提取所述每帧待检测图像所对应的M个图像区域，其中，所述M个图像区域用于进行边缘检测。在一种可能的设计中，在本申请实施例的第二方面的第二种实现方式中，所述检测模块，具体用于对所述每帧待检测图像的所述M个图像区域中的目标图像区域进行边缘检测，得到所述目标图像区域所对应的P个边缘检测图，其中，所述目标图像区域属于所述M个图像区域中的任意一个图像区域；根据所述目标图像区域所对应的P个边缘检测图，确定所述目标图像区域所对应的目标边缘检测图；当获取到所述M个图像区域所对应的目标边缘检测图时，得到所述目标边缘检测图集合。在一种可能的设计中，在本申请实施例的第二方面的第三种实现方式中，所述确定模块，具体用于对所述目标边缘检测图集合中的每个目标边缘检测图进行直方图统计，得到M个统计结果，其中，所述直方图统计用于对目标边缘检测图进行水平方向以及垂直方向的统计；分别判断所述M个统计结果中的每个统计结果是否满足台标区域提取条件；若所述M个统计结果中的至少一个统计结果满足所述统计阈值，则确定所述目标边缘检测图集合存在台标区域；若所述M个统计结果中的无统计结果满足所述统计阈值，则确定所述目标边缘检测图集合不存在台标区域。在一种可能的设计中，在本申请实施例的第二方面的第四种实现方式中，所述确定模块，具体用于根据所述P帧待检测图像确定所述台标区域中待匹配图像的图像分值；若所述待匹配图像的图像分值大于或等于台标图像阈值，则确定所述待检测视频中存在所述台标图像。在一种可能的设计中，在本申请实施例的第二方面的第五种实现方式中，所述识别模块，具体用于获取所述台标图像的待匹配局部特征集合，其中，所述待匹配局部特征集合包括至少一个待匹配局部特征；获取所述预设图标集合中每个预设图标的局部特征集合，其中，所述局部特征集合包括至少一个局部特征；根据所述待匹配局部特征集合以及所述每个预设图标的局部特征集合，通过k近邻算法从所述预设图标集合中确定候选台标图像集合，其中，所述候选台标图像集合包括N个候选台标图像，所述N为大于或等于1的整数；对所述台标图像以及所述候选台标图像集合中每个候选台标图像进行比对，得到所述每个候选台标图像的配对点集合，其中，所述配对点集合包括至少一个配对点，所述配对点表示候选台标图像与所述台标图像配对成功的特征点；根据所述每个候选台标图像的配对点集合以及所述每个候选台标图像的局部特征集合，计算得到N个相似度分值；根据所述N个相似度分值中相似度分值的最大值，从所述候选台标图像集合中确定待检测视频的目标台标图像。在一种可能的设计中，在本申请实施例的第二方面的第六种实现方式中，所述识别模块，具体用于1)获取所述待匹配局部特征集合中的一个待匹配局部特征；2)根据所述待匹配局部特征，从所述每个预设图标的局部特征集合中获取与所述待匹配局部特征最近的K个候选特征，其中，所述K为大于或等于1的整数；重复执行步骤1)至步骤2)，直至获取到所述待匹配局部特征集合中的每个待匹配局部特征的候选特征；根据所述待匹配局部特征集合中的每个待匹配局部特征的候选特征，获取所述候选台标图像集合。在一种可能的设计中，在本申请实施例的第二方面的第七种实现方式中，所述识别模块，具体用于将所述台标图像中的每个待匹配局部特征与所述每个候选台标图像的每个局部特征进行匹配，得到投影矩阵，其中，所述投影矩阵表示所述台标图像经过投影后的位置坐标；根据所述台标图像以及所述投影矩阵，确定所述每个候选台标本文档来自技高网...

【技术保护点】
1.一种图标识别的方法，其特征在于，包括：从待检测视频中随机获取P帧待检测图像，其中，所述待检测视频包括Q帧视频图像，所述Q为大于1的整数，所述P为大于或等于1，且小于或等于所述Q的整数；对所述P帧待检测图像中的待检测图像进行边缘检测，得到目标边缘检测图集合，其中，所述目标边缘检测图集合中包括M个目标边缘检测图，每个目标边缘检测图是对P个边缘检测图融合后得到的，所述M为大于或等于1的整数；根据所述目标边缘检测图集合确定图标区域；根据所述P帧待检测图像以及所述图标区域确定所述待检测视频中的图标；将所述图标与预设图标集合进行匹配，获取所述待检测视频的图标识别结果，其中，所述预设图标集合包括至少一个预设图标。

【技术特征摘要】
1.一种图标识别的方法，其特征在于，包括：从待检测视频中随机获取P帧待检测图像，其中，所述待检测视频包括Q帧视频图像，所述Q为大于1的整数，所述P为大于或等于1，且小于或等于所述Q的整数；对所述P帧待检测图像中的待检测图像进行边缘检测，得到目标边缘检测图集合，其中，所述目标边缘检测图集合中包括M个目标边缘检测图，每个目标边缘检测图是对P个边缘检测图融合后得到的，所述M为大于或等于1的整数；根据所述目标边缘检测图集合确定图标区域；根据所述P帧待检测图像以及所述图标区域确定所述待检测视频中的图标；将所述图标与预设图标集合进行匹配，获取所述待检测视频的图标识别结果，其中，所述预设图标集合包括至少一个预设图标。2.根据权利要求1所述的方法，其特征在于，所述对所述P帧待检测图像中的待检测图像进行边缘检测，得到目标边缘检测图集合之前，所述方法还包括：对所述P帧待检测图像中的所述每帧待检测图像进行划分，得到所述每帧待检测图像所对应的多个图像区域；从所述每帧待检测图像所对应的多个图像区域中提取所述每帧待检测图像所对应的M个图像区域，其中，所述M个图像区域用于进行边缘检测。3.根据权利要求2所述的方法，其特征在于，所述对所述P帧待检测图像中的待检测图像进行边缘检测，得到目标边缘检测图集合，包括：对所述每帧待检测图像的所述M个图像区域中的目标图像区域进行边缘检测，得到所述目标图像区域所对应的P个边缘检测图，其中，所述目标图像区域属于所述M个图像区域中的任意一个图像区域；根据所述目标图像区域所对应的P个边缘检测图，确定所述目标图像区域所对应的目标边缘检测图；当获取到所述M个图像区域所对应的目标边缘检测图时，得到所述目标边缘检测图集合。4.根据权利要求1所述的方法，其特征在于，所述根据所述目标边缘检测图集合确定图标区域，包括：对所述目标边缘检测图集合中的每个目标边缘检测图进行直方图统计，得到M个统计结果，其中，所述直方图统计用于对目标边缘检测图进行水平方向以及垂直方向的统计；分别判断所述M个统计结果中的每个统计结果是否满足台标区域提取条件；若所述M个统计结果中的至少一个统计结果满足所述统计阈值，则确定所述目标边缘检测图集合存在台标区域；若所述M个统计结果中的无统计结果满足所述统计阈值，则确定所述目标边缘检测图集合不存在台标区域。5.根据权利要求1所述的方法，其特征在于，所述根据所述P帧待检测图像以及所述图标区域确定所述待检测视频中的图标，包括：根据所述P帧待检测图像确定台标区域中待匹配图像的图像分值；若所述待匹配图像的图像分值大于或等于台标图像阈值，则确定所述待检测视频中存在台标图像。6.根据权利要求1所述的方法，其特征在于，所述将所述图标与预设图标集合进行匹配，获取所述待检测视频的图标识别结果，包括：获取台标图像的待匹配局部特征集合，其中，所述待匹配局部特征集合包括至少一个待匹配局部特征；获取所述预设图标集合中每个预设图标的局部特征集合，其中，所述局部特征集合包括至少一个局部特征；根据所述待匹配局部特征集合以及所述每个预设图标的局部特征集合，通过k近邻算法从所述预设图标集合中确定候选台标图像集合，其中，所述候选台标图像集合包括N个候选台标图像，所述N为大于或等于1的整数；对所述台标图像以及所述候选台标图像集合中每个候选台标图像进行比对，得到所述每个候选台标图像的配对点集合，其中，所述配对点集合包括至少一个配对点，所述配对点表示候选台标图像与所述台标图像配对成功的特征点；根据所述每个候选台标图像的配对点集合以及所述每个候选台标图像的局部特征集合，计算得到N个相似度分值；根据所述N个相似度分值中相似度分值的最大值，从所述候选台标图像集合中确定待检测视频的目标台标图像。7.根据权利要求6所述的方法，其特征在于，所述根据所述待匹配局部特征集合以及所述每个预设图标的局部特征集合，通过k近邻算法从所述预设图标集合中确定候选台标图像集合，包括：1)获取所述待匹配局部特征集合中的一个待匹配局部特征；2)根据所述待匹配局部特征，从所述每个预设图标的局部特征集合中获取与所述待匹配局部特征最近的K个候选特征，其中，所述K为大于或等于1的整数；重复执行步骤1)至步骤2)，直至获取到所述待匹配局部特征集合中的每个待匹配局部特征的候选特征；根据所述待匹配局部特征集合中的每个待匹配局部特征的候选特征，获取所述候选台标图像集合。8.根据权利要求6所述的方法，其特征在于，所述对所述台标图像以及所述候选台标图像集合中每个候选台标图像进行比对，得到所述每个候选台标图像的配对点集合，包括：将所述台标图像中的每个待匹配局部特征与所述每个候选台标图像的每个局部特征进行匹配，得到投影矩阵，其中，所述投影矩阵表示所述台标图像经过投影后的位置坐标；根据所述台标图像以及所述投...

【专利技术属性】
技术研发人员：黎伟，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：广东,44