一种面向公安侦查应用的图像检索方法技术

本发明专利技术公开了一种面向公安侦查应用的图像检索方法，提出将传统图像检索方法和深度学习检索方法相结合形成一种新的图像检索方法。首先用提取传统特征的图像检索方法对数据库图像进行筛选(“粗检索”)，然后采用深度学习的图像检索方法进行二次检索(“精检索”)。对图像数据库进行第一次检索采用传统方法提取图像特征方式，由于特征相对比较单一，提取特征的时候也不用加载网络，因此特征提取的时间相对会比较短。在基于改进深度网络模型上进行实现第二次检索能有效保证图像检索的准确率。将原本海量图像中的“大海捞针”问题转化为可实现的“桌面捞针”，提高了检索精度，减少了检索耗时，进而提高图像侦查的效率。

An image retrieval method for public security investigation application

The invention discloses a method of image retrieval for the application of public security investigation, and proposes a new image retrieval method combining the traditional image retrieval method with the depth learning retrieval method. First, the image retrieval method which extracts traditional features is used to screen the database image (\rough retrieval\), and then the depth learning image retrieval method is used for the two retrieval (\fine retrieval\). In the first retrieval of image database, the traditional method is used to extract the image feature. Because the feature is relatively simple, the feature extraction does not have to be loaded when the feature is extracted, so the time of feature extraction is relatively short. The implementation of the second time retrieval based on the improved depth network model can effectively guarantee the accuracy of image retrieval. The problem of \looking for a needle in a haystack\ in the original mass image into a \needle for the desktop\ can be realized, which improves the retrieval precision, reduces the time consuming and improves the efficiency of the image detection.

【技术实现步骤摘要】
一种面向公安侦查应用的图像检索方法
本专利技术属于公安图像侦查领域，尤其涉及一种基于深度学习的面向公安侦查应用的图像检索方法。
技术介绍
随着我国的经济发展，构建安全稳定的社会环境已经成为人们共同追求的社会理想。随着视频监控技术和大数据存储的有效发展，城市公共安全建设也逐步得到有关部门的重视。监控摄像头在公园，商场，地铁站等人群密集的地区的普及，为城市安全建设提供了有效的保证。视频监控系统逐渐发展与完善，使得视频监控技术成为公安侦破案件的新手段，公安侦查破案的方式也发生巨大变革。通常在案件发生之后，公安部门都会组织相关人员观看监控视频，并试图从中找到与嫌疑人相关的蛛丝马迹。即使在活动目标极少出现的时段，也不能遗漏任何片段，甚至需要重复浏览。这种人员浏览的方式，不仅效率不高，而且耗时长。如果在这种海量视频监控数据中，凭借嫌疑人的图像能快速找到并定位出嫌疑人位置和运动轨迹，那么公安侦查技术和侦查人员的工作效率必将迎来质的飞跃。由于监控视频中环境的复杂性，现有的图像检索技术无法满足监控视频图像中对特定目标行人的快速检索的需求，导致了图像检索在面向公安侦查应用中的存在着诸多挑战。因此，需要更好的运用先进技术突破侦查应用中行人检索的瓶颈，满足公安刑事案件侦查的需求。近年来，人工智能和深度学习技术的飞速发展，为公安的刑事案件侦查的“快速反应，快侦快破”需求提供了方向。其中深度学习作为机器学习的分支，在语音识别，图像分类与识别等多个研究方向取得了优异的成绩，成为当前研究的热点。深度学习通过建立多层次的模型来模拟人脑神经系统对外接信号的处理，可自动从原始输入数据中提取稳定的深层特征。深度学习在图像检索的应用中，相比传统的人工神经网络，具有明显的优势。将深度学习应用于公安侦查领域，并使用大数据和云计算技术对海量监控视频进行分布式处理和存储，从而将以往案件侦破过程中的“大海捞针”转化为“桌面捞针”。因此，将深度学习应用于公安侦查领域为大势所趋。已有的基于深度学习的图像检索方法首先需要对候选集中的图片进行特征提取，然后再将查询图片的特征向量与候选图片库中的特征向量进行欧式距离计算和相似度排序，得到与查询图片相似的图片。面向公安侦查应用的图像检索，需要从海量的视频图像数据中找出与查询图像相似的图片。按照已有的基于深度学习的检索方法，首先需要对候选集中的图片进行特征提取，然后再将查询图片的特征向量与候选图片库中的特征向量进行高维的欧式距离计算和相似度排序，得到与查询图片相似的图片。这种方法不仅对计算机的计算能力和存储容量要求很高，而且当候选图片数据库足够大时，需要找出与嫌疑人相似的图片犹如“大海捞针”。故，针对现有技术存在的技术问题，实有必要提出一种技术方案以克服现有技术的缺陷。
技术实现思路
有鉴于此，确有必要提供一种检索速度快且效率高的面向公安侦查应用的图像检索方法，从而实现公安侦查“快侦快破”的业务需求，从海量的视频图像数据中找出与查询图像相似的图片并将检索结果可视化。为了解决现有技术存在的技术问题，本专利技术的技术方案为：一种面向公安侦查应用的图像检索方法，包括以下步骤：步骤(1)：对于待检索的图像库，构建一个颜色空间特征提取函数用来区分图像中心和边缘，对图像不同的部位进行加权处理，生成颜色特征分布加权颜色直方图；其中，加权颜色直方图的表达式为：其中，W和H指的是图像的宽度和高度大小；以图像中心为原点建立直角坐标系，X和Y指的是像素点的横坐标和纵坐标位置；步骤(2)：构建一个构图空间特征提取函数，将待检索图像集进行采样操作将图片尺寸归一化，并将图像从RGB颜色空间转化为HSV颜色空间；HSV颜色空间与RGB颜色空间的转化公式如下：步骤(3)：在步骤(1)和步骤(2)的基础上，构建图像检索函数，记录颜色空间特征和构图空间特征索引表路径，计算查询图像特征与数据及图像特征的距离，存储检索结果；步骤(4)：对步骤(3)保存的图像检索结果中的所有图像，采用深度学习特征提取模型进行特征提取，用特征向量来表示图像；步骤(5)：将查询图像通过与步骤(4)相同的特征提取模型进行特征提取；步骤(6)：将步骤(5)的特征向量与步骤(4)的结果中的特征向量进行遍历，计算特征向量之间的欧式距离；对两个维度相同的向量xi和xj。欧式距离计算公式为：步骤(7)：将步骤(6)中得到的距离进行排序，并将检索结果进行可视化；其中，上述步骤(4)和步骤(5)中特征提取模型为ResNet网络模型，ResNet构建模块为：y＝F(x,{Wi})+x，x和y是当前层的输入和输出向量。函数F(x,{Wi})代表学习的残差函数。作为优选的技术方案，步骤(3)通过记录颜色空间特征向量与构图空间特征向量之间的距离并存储，进而通过查询图像检索出前N张与查询图像相似的图像，去除图像数据库中与查询图像特征不相关的图像。作为优选的技术方案，步骤(7)对步骤(6)的距离度量结果进行排序，并将排序结果通过Python语言实现可视化。与现有技术相比较，本专利技术提出传统图像检索方法和深度学习检索方法相结合的网络模型，首先用传统方法的方法对数据库图像进行筛选(“粗检索”)，然后采用深度学习的图像检索方法进行二次检索(“精检索”)，采用传统方法提取图像特征方式对图像数据库进行第一次检索，传统特征相对比较单一，提取特征的时候也不用加载网络，因此特征提取的时间相对会比较短。然后在基于改进深度网络模型上进行实现第二次检索能有效保证图像检索的准确率。将原本海量图像中的“大海捞针”问题转化为可实现的“桌面捞针”，提高了检索精度，减少了检索耗时，进而提高图像侦查的效率。附图说明图1为本专利技术面向公安侦查应用的图像检索方法的总体模型框架图。图2为本专利技术中构建模块的框图。如下具体实施例将结合上述附图进一步说明本专利技术。具体实施方式以下将结合附图对本专利技术提供的面向公安侦查应用的图像检索方法作进一步说明。面向公安侦查应用的图像检索需求，需要从海量的视频图像数据中找出与查询图像相似的图片。按照现有技术已有的基于深度学习的检索方法，首先需要对候选集中的图片进行特征提取，然后再将查询图片的特征向量与候选图片库中的特征向量进行高维的欧式距离计算和相似度排序，得到与查询图片相似的图片。这种方法不仅对计算机的计算能力和存储容量要求很高，而且当候选图片数据库足够大时，需要找出与嫌疑人相似的图片犹如“大海捞针”。为了实现公安侦查“快侦快破”的业务需求，本专利技术创新性地提出传统图像检索方法和深度学习检索方法相结合的网络模型，首先用传统方法的方法对数据库图像进行筛选(“粗检索”)，然后采用深度学习的图像检索方法进行二次检索(“精检索”)，与已有的深度学习图像检索方法相比，提高了检索精度，减少了检索耗时，将原本海量图像中的“大海捞针”问题转化为可实现的“桌面捞针”，提高图像侦查的效率。参见图1，所示为本专利技术面向公安侦查应用的图像检索方法的总体模型框架图，由模型框图可以得出，本专利技术的图像检索模型由两部分组成：“粗检索”对海量图像数据库进行第一轮检索，选出图像相似度较近的小部分图片数据集；“精检索”使用卷积神经网络进行特征提取，对第一轮筛选出的图片进行二次检索。由图1所示，本专利技术面向公安侦查应用的图像检索方法，具体包括以下步骤：步骤(1).本文档来自技高网...

【技术保护点】
1.一种面向公安侦查应用的图像检索方法，其特征在于，包括以下步骤：步骤(1)：对于待检索的图像库，构建一个颜色空间特征提取函数用来区分图像中心和边缘，对图像不同的部位进行加权处理，生成颜色特征分布加权颜色直方图；其中，加权颜色直方图的表达式为：

【技术特征摘要】
1.一种面向公安侦查应用的图像检索方法，其特征在于，包括以下步骤：步骤(1)：对于待检索的图像库，构建一个颜色空间特征提取函数用来区分图像中心和边缘，对图像不同的部位进行加权处理，生成颜色特征分布加权颜色直方图；其中，加权颜色直方图的表达式为：其中，W和H指的是图像的宽度和高度大小；以图像中心为原点建立直角坐标系，X和Y指的是像素点的横坐标和纵坐标位置；步骤(2)：构建一个构图空间特征提取函数，将待检索图像集进行采样操作将图片尺寸归一化，并将图像从RGB颜色空间转化为HSV颜色空间；HSV颜色空间与RGB颜色空间的转化公式如下：max＝max(R,G,B)；min＝min(R,G,B)；V＝max，步骤(3)：在步骤(1)和步骤(2)的基础上，构建图像检索函数，记录颜色空间特征和构图空间特征索引表路径，计算查询图像特征与数据及图像特征的距离，存储检索结果；步骤(4)：对步骤(3)保存的图像检索结果中的所有图像，采用深度学习特征提取模型进行特征提取，用特征向量来表示图像...

【专利技术属性】
技术研发人员：刘俊，李梦婷，黄亮，林贤早，
申请(专利权)人：杭州电子科技大学，
类型：发明
国别省市：浙江,33