人物判定装置制造方法及图纸

在时间上远离的帧间或由不同的摄像机拍摄到的帧间也能够进行同一判定的人物判定装置判定不同的图像序列中包含的人物是否是同一人物，包括：步行姿态检测部（２００），检测表示图像序列中包含的第１及第２人物的步行状态的图像序列即第１及第２步行序列；步行状态推定部（１８０），由上述第１人物的步行序列来推定与该步行序列不同的时刻或位置上的第１人物的周期性的步行运动中的步行姿态的迁移状态；以及判定部（１９０），判定推定出的上述第１人物的步行状态的迁移状态、和上述第２人物的步行状态的迁移状态之间的匹配性，在具有匹配性的情况下，判定为上述第１人物和上述第２人物是同一人物。

【技术实现步骤摘要】

本专利技术涉及一种人物判定装置，判定不同的图像序列中包含的人物是 否是同一人物。
技术介绍
为了从监视摄像机等得到的图像序列中搜索和跟踪特定的人物，需要 鉴别人物，即判定不同的图像或图像序列中显现的人物是否是同一人物。以往，作为以搜索和跟踪图像序列中的人为目的的同一人物判定方法， 有在相邻帧间使接近的人物区域相对应的方法(例如参照专利文献1)。图1A 图1C是专利文献1中记载的人搜索和跟踪方法的说明图。图 1A及图1B表示拍摄同一人物所得的时间上连续的帧图像。图1A所示的 帧图像A10示出显现了向右移动的人All的图像。矩形A12是包含用运动矢量检测为人体中运动小的区域(人物稳定区域)的头部及胴体部分的外接 矩形。在图1B所示的帧图像A20中，也同样用虚线示出了从人A21中检 测出的人物稳定区域的外接矩形A22。在图1C所示的帧图像A30上，重 叠地同时显示了从帧图像A10及A20中得到的人物稳定区域的外接矩形 A12及A22。在该现有的方法中，如帧图像A30所示，根据外接矩形A12 和外接矩形A22之间的重叠、及两者的运动矢量的连续性，将人A11和人 A21作为同一人物来相对应，进行搜索和跟踪。专利文献1:(日本)特开2003-346159号公报(第3及第6页、图2及图9)然而，在上述现有的方法中，有下述问题由于在帧间从接近的位置 搜索人，所以在某个帧中一旦人物检测失败，则失败了的帧之前的帧的人 物和之后的帧的人物之间不能相对^，不能跟踪人。此外，在同样的方法中，有下述问题虽然也可以用人区域的颜色或 图像图案将不同的帧间的人相对应，但是在远离的帧间，由于人的移动造 成的位置的变化很大，或即使是同一人物，但是相对于摄像机的方向和姿 态和照明条件变化，而难以相对应。因此，在图像内显现了多个人的情况下，如果产生想搜索和跟踪的人 暂时进入其他人或物的背后、或者由于照明变化等的影响而暂时不能正常 地检测人的帧，则有不能继续进行搜索和跟踪这一问题。
技术实现思路
因^:，本专利技术就是用于解决上述现有的课题，其目的在于提供一种人物判定装置，即使在时间上远离的帧间或用不同的摄像机拍摄到的帧间， 也能够判定是否是同一人物。为了实现上述目的，本专利技术的人物判定装置判定不同的图像序列中包含的人物是否是同一人物，其特征在于，包括步行序列检测单元，检测 表示图像序列中包含的第1及第2人物的步行状态的图像序列即第1及第2 步行序列；步行姿态迁移推定单元，根据上述第1人物的步行序列，来推 定表示与该步行序列不同的时刻或位置上的第1人物的周期性的步行运动 中的步行姿态的迁移的信息；以及判断单元，判定表示推定出的上述第1 人物的步行姿态的迁移的信息和表示上述第2人物的步行姿态的迁移的信 息之间的匹配性，在有匹配性的情况下，判断为上述第1人物和上述第2 人物是同一人物。专利技术效果根据本专利技术，通过利用从人的步行中得到的时空间周期信息、时空间 相位信息及时空间位置信息，能够将远离的帧间或不同的传感器得到的人 物图像序列相对应。艮P，实现了一种人物判定装置，即使在时间上远离的帧间或用不同的 摄像机拍摄到的帧间，也能够判定是否是同一人物。附图说明图1A是现有的人物搜索跟踪装置的检测矩形的一例的图。 图IB是现有的人物搜索跟踪装置的检测矩形的一例的图。 图1C是现有的人物搜索跟踪装置的检测矩形的移动的图。 图2是本专利技术实施方式1的人物判定装置的结构的功能框图。 图3是本专利技术实施方式1的图像序列的一例的图。 图4A是人的下半身图像的序列的一例的图。 图4B是本专利技术实施方式1的步行序列的一例的图。 图4C是步行序列的最小图案的形状的一例的图。 图5是本专利技术实施方式1的时空间相位信息及时空间位置信息的图。 图6A是本专利技术实施方式1的步行轨迹的一例的图。 图6B是本专利技术实施方式1的推定步行状态的一例的图。 图6C是本专利技术实施方式1的相位状态不同的步行状态的一例的图。 图7A是本专利技术实施方式1的步行轨迹和脚间的变化之间的关系的一例 的图。图7B是本专利技术实施方式1的脚间变化的一例的图。 图7C是本专利技术实施方式1的脚间变化的一例的图。 图8A是本专利技术实施方式1的步行序列的显示的一例的图。 图8B是本专利技术实施方式1的步行序列的显示的一例的图。 图8C是本专利技术实施方式1的步行序列的显示的一例的图。 图9是本专利技术实施方式1的进行了步行序列的搜索和跟踪的结果的存 储格式的示例图。图IO是本专利技术实施方式1的人物搜索跟踪装置的结构的框图。图11是本专利技术实施方式1的指示搜索和跟踪的画面的示例图。图12是本专利技术实施方式1的对照步骤的一例的流程图。图13A是本专利技术实施方式1的图像序列1的一例的图。图13B是本专利技术实施方式1的图像序列2的一例的图。图14是本专利技术实施方式1的步行序列提取步骤的一例的流程图。图15是本专利技术实施方式1的时空间周期信息和时空间相位信息和时空间位置信息的提取步骤的一例的流程图。图16A是本专利技术实施方式1的特定步行状态的检测的一例的图。图16B是本专利技术实施方式1的特定步行状态的检测模板的一例的图。图16C是本专利技术实施方式1的特定步行状态的检测过程的一例的图。图17是本专利技术实施方式1的控制部进行的显示的一例的图。图18A是本专利技术实施方式2的图像序列1的一例的图。图18B是本专利技术实施方式2的图像序列2的一例的图。图19是本专利技术实施方式2的人物判定装置的结构的功能框图。具体实施方式本专利技术实施方式的人物判定装置判定不同的图像序列中包含的人物是 否是同一人物，其特征在于，包括图像序列输入单元，接受第1图像序 列、及与上述第1图像序列不同的时刻或不同的图像传感器取得的第2图 像序列的输入；步行序列提取单元，从输入的上述第1及第2图像序列中， 分别提取表示人物的步行状态的图像序列即第1及第2步行序列；步行信 息提取单元，从提取出的上述第1及第2步行序列中，分别提取确定人物 的步行的周期性的运动的信息即第1及第2步行信息；步行信息对照单元， 对照提取出的上述第1及第2步行信息；以及判定单元，根据上述步行信 息对照单元的对照结果，来判定上述第1及第2图像序列中包含的人物是 否是同一人物。这里，作为步行信息，例如可以是表示人物的时间上或空 间上的步行周期的信息，或者是人物的周期性的步行动作的时间上或空间 上的相位信息，或者是表示人物的周期性的步行动作的时间上或空间上的 位置信息。由此，着眼于人物的步行来判定是否是同一人物，所以与在帧间将接 近的位置上的人物判定为同一人物、或者用颜色或图像图案来判定是否是 同一人物的现有技术相比，即使想搜索和跟踪的人暂时进入其他人或物的 背后、或者由于照明变化等的影响而暂时不能正常地检测人的情况下，也 能够判定是否是同一人物。即，本专利技术利用了如果人不同则步行周期或步 幅等步行特性也不同、及如果是同一人物则以一定的步行特性来步行这一 事实，所以能够不依赖于时间上和空间上的位置来判定是否是同一人物，即使在时间上远离的帧间或用不同的摄像机拍摄到的帧间，也能够判定是 否是同一人物。此外，上述步行信息对照单元可以根据上述第1及第2步行信息中分 别包含的第1及第2时空间相位信息，比较上述第1及第2图像序列中包 含的人物成为规定的步行姿态的时刻或位置，由本文档来自技高网...

【技术保护点】
一种人物判定装置，判定不同的图像序列中包含的人物是否是同一人物，其特征在于，包括：　步行序列检测单元，检测表示图像序列中包含的第１及第２人物的步行状态的图像序列即第１及第２步行序列；　步行姿态迁移推定单元，根据上述第１人物的步行序列，来推定表示与该步行序列不同的时刻或位置上的第１人物的周期性的步行运动中的步行姿态的迁移的信息；以及　判断单元，判定表示推定出的上述第１人物的步行姿态的迁移的信息和表示上述第２人物的步行姿态的迁移的信息之间的匹配性，在有匹配性的情况下，判断为上述第１人物和上述第２人物是同一人物。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：今川太郎，岩崎正宏，
申请(专利权)人：松下电器产业株式会社，
类型：发明
国别省市：JP[日本]