图像处理装置、图像处理系统和图像处理方法制造方法及图纸

图像处理装置(10)具有：图像分析部(12)，其对输入图像进行分析，检测该输入图像中出现的目标，估计该检测到的目标的空间特征量；以及描述符生成部(13)，其生成表示该估计出的空间特征量的空间描述符。

【技术实现步骤摘要】
【国外来华专利技术】图像处理装置、图像处理系统和图像处理方法
本专利技术涉及用于生成或利用表示图像数据的内容的描述符的图像处理技术。
技术介绍
近年来，伴随拍摄图像(包含静态图像和动态图像)的摄像设备的普及、因特网等通信网的发达和通信线路的宽带化，图像发布服务的普及及其大规模化不断发展。以该情况为背景，在面向个人和面向事业者的服务和产品中，用户能够访问的图像内容的数量庞大。这种状况下，为了使用户访问图像内容，图像内容的检索技术不可或缺。作为这种检索技术之一，存在如下方法：设检索查询为图像本身，取得该图像与检索对象图像的匹配。检索查询是用户输入到检索系统的信息。但是，在该方法中存在如下问题：检索系统的处理负荷可能非常大，并且，在向检索系统传输检索查询的图像和检索对象图像时的传输数据量较大的情况下，对通信网造成的负荷增大。为了避免该问题，存在如下技术：对图像附加或关联描述该图像内容的视觉描述符(visualdescriptors)并设为检索对象。在该技术中，根据图像内容的分析结果预先生成描述符，能够与该图像主体不同地传输或蓄积该描述符的数据。如果利用该技术，则检索系统能够将附加给检索查询的图像的描述符与附加给检索对象图像的描述符进行匹配，由此进行检索处理。通过使描述符的数据大小比图像主体的数据大小小，能够减轻检索系统的处理负荷，并且减轻对通信网造成的负荷。作为与这种描述符有关的国际标准，公知有非专利文献1("MPEG-7VisualPartofExperimentationModelVersion8.0")中公开的MPEG-7Visual。在MPEG-7Visual中，假设图像的高速检索等用途，规定有用于描述图像的颜色和纹理以及图像中出现的目标的形状和运动等信息的格式。另一方面，存在使用动态图像数据作为传感器数据的技术。例如，在专利文献1(日本特表2008-538870号公报)中公开有能够进行由摄像机得到的动态图像中出现的监视对象物(例如人)的检测或追踪、或者监视对象物的滞留检测的视频监视系统。如果使用所述MPEG-7Visual的技术，则能够生成表示这种动态图像中出现的监视对象物的形状和运动的描述符。现有技术文献专利文献专利文献1：日本特表2008-538870号公报非专利文献非专利文献1：A.Yamada,M.Pickering,S.Jeannin,L.Cieplinski,J.-R.Ohm,andM.Editors,Eds.:MPEG-7VisualPartofExperimentationModelVersion8.0ISO/IECJTC1/SC29/WG11/N3673,Oct.2000.
技术实现思路
专利技术要解决的课题在利用图像数据作为传感器数据的情况下，多个摄像图像中出现的目标间的对应是重要的。例如，在表示同一对象物的目标出现在多个摄像图像中的情况下，如果利用上述MPEG-7Visual的技术，则能够将表示摄像图像中出现的目标的形状、颜色和运动这样的特征量的视觉描述符与各摄像图像一起记录到存储器中。然后，通过该描述符之间的相似度的计算，能够从摄像图像群中找出处于相似度较高的关系的多个目标，将这些目标相互对应起来。但是，例如在多台摄像机从不同方向拍摄到同一对象物的情况下，有时这些摄像图像中出现的同一对象物的目标的特征量(例如形状、颜色和运动)在摄像图像之间大幅不同。这种情况下，通过使用上述描述符的相似度计算，存在这些摄像图像中出现的目标之间的对应失败这样的课题。并且，在由一台摄像机拍摄外观形状变化的对象物的情况下，有时多个摄像图像中出现的该对象物的目标的特征量在摄像图像之间也会大幅不同。这种情况下，通过使用上述描述符的相似度计算，有时这些摄像图像中出现的目标之间的对应也会失败。鉴于上述情况，本专利技术的目的在于，提供能够以较高可靠性进行多个摄像图像中出现的目标之间的对应的图像处理装置、图像处理系统和图像处理方法。用于解决课题的手段本专利技术的第1方式的图像处理装置的特征在于，所述图像处理装置具有：图像分析部，其对输入图像进行分析，检测该输入图像中出现的目标，估计该检测到的目标的以实际空间为基准的空间特征量；以及描述符生成部，其生成表示该估计出的空间特征量的空间描述符。本专利技术的第2方式的图像处理系统的特征在于，所述图像处理系统具有：所述图像处理装置；参数导出部，其根据所述空间描述符，导出表示由该检测到的目标的群体构成的目标群的状态特征量的状态参数；以及状态预测部，其根据该导出的状态参数，通过运算来预测所述目标群的未来状态。本专利技术的第3方式的图像处理方法的特征在于，所述图像处理方法具有以下步骤：对输入图像进行分析，检测该输入图像中出现的目标；估计该检测到的目标的以实际空间为基准的空间特征量；以及生成表示该估计出的空间特征量的空间描述符。专利技术效果根据本专利技术，生成表示输入图像中出现的目标的以实际空间为基准的空间特征量的空间描述符。通过利用该空间描述符作为检索对象，能够以较高可靠性且低处理负荷进行多个摄像图像中出现的目标之间的对应。并且，通过对该空间描述符进行分析，能够以低处理负荷检测该目标的状态和举动。附图说明图1是示出本专利技术的实施方式1的图像处理系统的概略结构的框图。图2是示出实施方式1的图像处理步骤的一例的流程图。图3是示出实施方式1的第1图像分析处理步骤的一例的流程图。图4是例示输入图像中出现的目标的图。图5是示出实施方式1的第2图像分析处理步骤的一例的流程图。图6是用于说明码图案的分析方法的图。图7是示出码图案的一例的图。图8是示出码图案的另一例的图。图9是示出空间描述符的格式的例子的图。图10是示出空间描述符的格式的例子的图。图11是示出GNSS信息的描述符的例子的图。图12是示出GNSS信息的描述符的例子的图。图13是示出本专利技术的实施方式2的图像处理系统的概略结构的框图。图14是示出实施方式3的图像处理系统即警备辅助系统的概略结构的框图。图15是示出具有描述符数据生成功能的传感器的结构例的图。图16是用于说明由实施方式3的群众状态预测部进行的预测的一例的图。图17的(A)、(B)是示出由实施方式3的状态提示接口部生成的视觉数据的一例的图。图18的(A)、(B)是示出由实施方式3的状态提示接口部生成的视觉数据的另一例的图。图19是示出由实施方式3的状态提示接口部生成的视觉数据的又一例的图。图20是示出实施方式4的图像处理系统即警备辅助系统的概略结构的框图。具体实施方式下面，参照附图对本专利技术的各种实施方式进行详细说明。另外，全部附图中标注相同标号的结构要素具有相同结构和相同功能。实施方式1图1是示出本专利技术的实施方式1的图像处理系统1的概略结构的框图。如图1所示，该图像处理系统1具有N台(N为3以上的整数)网络摄像机NC1、NC2、…、NCN以及经由通信网络NW接收从这些网络摄像机NC1、NC2、…、NCN分别发布的静态图像数据或动态图像流的图像处理装置10。另外，本实施方式的网络摄像机的台数为3台以上，但是，取而代之，也可以是1台或2台。图像处理装置10对从网络摄像机NC1～NCN接收到的静态图像数据或动态图像数据进行图像分析，将表示其分析结果的空间或地理描述符与图像关联起来蓄积到存储器中。作为通信网络NW，例如可本文档来自技高网...

【技术保护点】
一种图像处理装置，其特征在于，所述图像处理装置具有：图像分析部，其对输入图像进行分析，检测该输入图像中出现的目标，估计该检测到的目标的以实际空间为基准的空间特征量；以及描述符生成部，其生成表示该估计出的空间特征量的空间描述符。

【技术特征摘要】
【国外来华专利技术】1.一种图像处理装置，其特征在于，所述图像处理装置具有：图像分析部，其对输入图像进行分析，检测该输入图像中出现的目标，估计该检测到的目标的以实际空间为基准的空间特征量；以及描述符生成部，其生成表示该估计出的空间特征量的空间描述符。2.根据权利要求1所述的图像处理装置，其特征在于，所述空间特征量是表示所述实际空间中的物理尺寸的量。3.根据权利要求1所述的图像处理装置，其特征在于，所述图像处理装置还具有接收部，该接收部从至少一台摄像机接收包含所述输入图像的发送数据。4.根据权利要求1所述的图像处理装置，其特征在于，所述图像处理装置还具有数据记录控制部，该数据记录控制部将所述输入图像的数据蓄积到第1数据记录部中，并且，将所述空间描述符的数据与该输入图像的数据关联起来蓄积到第2数据记录部中。5.根据权利要求4所述的图像处理装置，其特征在于，所述输入图像是动态图像，所述数据记录控制部将所述空间描述符的数据与构成所述动态图像的一连串图像中的映出该检测到的目标的图像关联起来。6.根据权利要求1所述的图像处理装置，其特征在于，所述图像分析部估计该检测到的目标的地理信息，所述描述符生成部生成表示该估计出的地理信息的地理描述符。7.根据权利要求6所述的图像处理装置，其特征在于，所述地理信息是表示该检测到的目标在地球上的位置的测位信息。8.根据权利要求7所述的图像处理装置，其特征在于，所述图像分析部检测所述输入图像中出现的码图案，对该检测到的码图案进行分析，取得所述测位信息。9.根据权利要求6所述的图像处理装置，其特征在于，所述图像处理装置还具有数据记录控制部，该数据记录控制部将所述输入图像的数据蓄积到第1数据记录部中，并且，将所述空间描述符的数据和所述地理描述符的数据与该输入图像的数据关联起来蓄积到第2数据记录部中。10.根据权利要求1所述的图像处理装置，其特征在于，所述图像处理装置还具有发送所述空间描述符的数据传输部。11.根据权利要求10所述的图像处理装置，其特征在于，所述图像分析部估计该检测到的目标的地理信息，所述描述符生成部生成表示该估计出的地理信息的地理描述符，所述数据传输部发送所述地理描述符。12.一种图像处理系统，其特征在于，所述图像处理系统具有...

【专利技术属性】
技术研发人员：服部亮史，守屋芳美，宫泽一之，峯泽彰，关口俊一，
申请(专利权)人：三菱电机株式会社，
类型：发明
国别省市：日本,JP