图像解析装置、图像解析方法、以及图像解析程序制造方法及图纸

本发明专利技术公开了图像解析装置、图像解析方法、以及图像解析程序。与本发明专利技术的一方面相关的图像解析装置反复获取作为检测对象的对象物映现的拍摄图像，反复获取作为检测对象的对象物映现的拍摄图像的图像获取部、在获取的拍摄图像内检测推定为未被遮挡物遮挡的状态的对象物映现的第一区域，在获取的拍摄图像内检测推定为被遮挡物遮挡的状态的对象物映现的第二区域，基于第一区域及第二区域的检测结果、以及针对以前获取的拍摄图像的判定结果，判定对象物是否被遮挡物遮挡。

Image parsing device, image parsing method and image parsing program

【技术实现步骤摘要】
【国外来华专利技术】图像解析装置、图像解析方法、以及图像解析程序
本专利技术涉及图像解析装置、图像解析方法、以及图像解析程序。
技术介绍
根据模板匹配等的图像处理技术，能够从拍摄图像中检测出所期望的对象物。但是，如对象物被遮挡物遮挡，则存在从拍摄图像中检测不到对象物的可能性。例如，人戴着口罩，则存在从拍摄图像中检测不到人的脸的可能性。为解决该问题，在专利文献1中提出了以对于佩戴了口罩的对象物的图像反应的方式学习的机器学习系统、以及利用以对于未佩戴口罩的对象物的图像反应的方式学习的机器学习系统的方法。根据该专利文献1的方法，通过单独地准备分别对应于佩戴口罩时及未佩戴口罩时的状态的机器学习系统，能够进行适合于各种状态的图像解析。现有技术文献专利文献专利文献1：日本特开2010-003117号公报
技术实现思路
本专利技术的专利技术者们在如上述的图像处理方法中发现存在如下的问题点。即，使各机器学习系统事先学习人的脸的所有图案是困难的。因此，各机器学习系统具有在某个时间点发生对象物的误检测的可能性。本专利技术的专利技术者们发现上述问题成为瓶颈，提高判定对象物是否被口罩等的遮挡物遮挡的精度是较难的问题点。本专利技术在一些方面是鉴于这样的实际情况而提出的，其目的在于，能够提供提高判定对象物是否被遮挡物遮挡的精度的技术。本专利技术为解决上述问题，采用以下的构成。即，与本专利技术的一方面相关的图像解析装置具备：图像获取部，反复获取作为检测对象的对象物映现的拍摄图像；第一检测部，在所述拍摄图像内检测第一区域，所述第一区域是推定为未被遮挡物遮挡的状态的所述对象物映现的区域；第二检测部，在所述拍摄图像内检测第二区域，所述第二区域是推定为被所述遮挡物遮挡的状态的所述对象物映现的区域；判定部，针对所述拍摄图像判定所述对象物是否被所述遮挡物遮挡；以及区域确定部，根据所述判定部的判定结果，选择利用所述第一检测部及所述第二检测部的检测结果中的哪个检测结果，基于选择的检测结果，确定在所述拍摄图像内所述对象物映现的对象物区域，所述判定部基于所述第一检测部及所述第二检测部的检测结果、以及针对以前获取的所述拍摄图像的所述对象物是否被所述遮挡物遮挡的判定结果，判定所述对象物是否被所述遮挡物遮挡。在该结构中，不仅利用检测未被遮挡物遮挡的状态的对象物的第一检测部、以及被遮挡物遮挡的状态的对象物的第二检测部的检测结果，还利用针对以前获取的拍摄图像的判定结果，判定对象物是否被遮挡物遮挡。由此，利用以前的判定结果，能够评价各检测部的检测结果的可靠性。再者，在两个检测部的检测结果中，在难以确定对象物是否被遮挡物遮挡的情况下，按照以前的判定结果，能够确定对象物是否被遮挡物遮挡。因此，根据该结构，能够提高判定对象物是否被遮挡物遮挡精度。与上述一方面相关的图像解析装置还可以进一步具备粗略检测部，所述粗略检测部通过以与所述第一检测部探索所述第一区域的间隔及所述第二检测部探索所述第二区域的间隔相比更稀疏的间隔探索所述拍摄图像，来检测推定为所述对象物映现的粗略推定区域，所述第一检测部在由所述粗略检测部检测到的所述粗略推定区域的附近范围内检测所述第一区域，所述第二检测部在由所述粗略检测部检测到的所述粗略推定区域的附近范围内检测所述第二区域。根据该结构，由于能够减少探索对象物的次数，能够降低图像解析的计算量，因此能够抑制处理器的处理负荷。在与上述一方面相关的图像解析装置中，所述粗略检测部也可以所述粗略检测部在以前获取的所述拍摄图像内确定的所述对象物区域的附近范围内检测所述粗略推定区域。根据该结构，由于能够将对象物的探索范围缩小至对象物所存在的或然性高的范围，因此不会较大地恶化对象物的检测精度，能够降低图像解析的计算量，由此，能够抑制处理器的处理负荷。在与上述一方面相关的图像解析装置中，在所述第一区域的数量以所述第一检测部检测到的所述第一区域的数量和所述第二检测部检测到的所述第二区域的数量的差满足规定的条件的方式比所述第二区域的数量多的情况下，所述判定部判定为所述对象物未被所述遮挡物遮挡，在所述第二区域的数量以所述第一检测部检测到的所述第一区域的数量和所述第二检测部检测到的所述第二区域的数量的差满足规定的条件的方式比所述第一区域的数量多的情况下，所述判定部判定为所述对象物被所述遮挡物遮挡，在所述第一检测部检测到的所述第一区域的数量和所述第二检测部检测到的所述第二区域的数量的差不满足规定的条件的情况下，所述判定部基于针对以前获取的所述拍摄图像的所述对象物是否被所述遮挡物遮挡的判定结果，判定所述对象物是否被所述遮挡物遮挡。根据该结构，在基于第一检测部及第二检测部的检测数量不分优劣的情况下，通过利用以前的判定结果，能够提高判定对象物是否被遮挡物遮挡的精度。在与上述一方面相关的图像解析装置中，在所述第一检测部检测到多个所述第一区域且所述判定部判定为所述对象物未被所述遮挡物遮挡的情况下，所述区域确定部通过结合多个所述第一区域，确定所述对象物映现的对象物区域，在所述第二检测部检测到多个所述第二区域且所述判定部判定为所述对象物被所述遮挡物遮挡的情况下，所述区域确定部通过结合多个所述第二区域，确定所述对象物映现的所述对象物区域。该根据该结构，能够利用各检测部的所有的检测结果，确定对象物映现的区域。在与上述一方面相关的图像解析装置中，在所述第一检测部检测到的所述第一区域的数量和所述第二检测部检测到的所述第二区域的数量的差不满足规定的条件的情况下，在针对以前获取的所述拍摄图像判定为所述对象物被所述遮挡物遮挡且所述第一区域的数量比所述第二区域的数量多时，或者针对以前获取的所述拍摄图像判定为所述对象物未被所述遮挡物遮挡且所述第二区域的数量比所述第一区域的数量多时，所述判定部判定为难以确定所述对象物是否被所述遮挡物遮挡，在判定为难以确定所述对象物是否被所述遮挡物遮挡的情况下，所述区域确定部通过结合所述第一检测部检测到的所述第一区域及所述第二检测部检测到的所述第二区域，确定所述对象物映现的所述对象物区域。根据该结构，在利用两个检测部的检测结果及以前的判定结果难以确定对象物是否被遮挡物遮挡的情况下，通过结合两个检测部的检测结果，能够确定对象物所存在的或然性高的区域。在与上述一方面相关的图像解析装置中，所述图像解析装置还具备误检测判定部，所述误检测判定部通过在确定的所述对象物区域内再次实施所述对象物的检测，判定确定的所述对象物区域是否为误检测的区域。根据该结构，由于能够避免对象物区域的误检测，因此能够提高从拍摄图像检测对象物的一连串的处理的可靠性。在与上述一方面相关的图像解析装置中，作为检测对象的所述对象物可以是人的脸。进一步，所述遮挡物可以是口罩。根据该结构，能够检测是佩戴口罩的脸还是未佩戴口罩的脸。此外，作为与上述各方式相关的图像解析装置的其他的方式，可以是实现以上各构成的信息处理方法，也可以是程序，也可以是存储这样的程序的计算机以外的装置、设备等可读取的存储介质。在此，计算机等可读取的存储介质是将该程序等的信息通过电、磁、光学、机械或化学作用而积存的介质。例如，与本专利技术一些方面相关的图像解析方法是信息处理方法，使计算机执行如下步骤：图像获取步骤，反复获取作为检测对象的对象物映现的拍摄图像；第一检测步骤，在所述拍摄图像内检测第一区域，所述第本文档来自技高网...

【技术保护点】
1.一种图像解析装置，具备：图像获取部，反复获取作为检测对象的对象物映现的拍摄图像；第一检测部，在所述拍摄图像内检测第一区域，所述第一区域是推定为未被遮挡物遮挡的状态的所述对象物映现的区域；第二检测部，在所述拍摄图像内检测第二区域，所述第二区域是推定为被所述遮挡物遮挡的状态的所述对象物映现的区域；判定部，针对所述拍摄图像判定所述对象物是否被所述遮挡物遮挡；以及区域确定部，根据所述判定部的判定结果，选择利用所述第一检测部及所述第二检测部的检测结果中的哪个检测结果，基于选择的检测结果，确定在所述拍摄图像内所述对象物映现的对象物区域，所述判定部基于所述第一检测部及所述第二检测部的检测结果、以及针对以前获取的所述拍摄图像的所述对象物是否被所述遮挡物遮挡的判定结果，判定所述对象物是否被所述遮挡物遮挡。

【技术特征摘要】
【国外来华专利技术】2017.03.14 JP 2017-0482871.一种图像解析装置，具备：图像获取部，反复获取作为检测对象的对象物映现的拍摄图像；第一检测部，在所述拍摄图像内检测第一区域，所述第一区域是推定为未被遮挡物遮挡的状态的所述对象物映现的区域；第二检测部，在所述拍摄图像内检测第二区域，所述第二区域是推定为被所述遮挡物遮挡的状态的所述对象物映现的区域；判定部，针对所述拍摄图像判定所述对象物是否被所述遮挡物遮挡；以及区域确定部，根据所述判定部的判定结果，选择利用所述第一检测部及所述第二检测部的检测结果中的哪个检测结果，基于选择的检测结果，确定在所述拍摄图像内所述对象物映现的对象物区域，所述判定部基于所述第一检测部及所述第二检测部的检测结果、以及针对以前获取的所述拍摄图像的所述对象物是否被所述遮挡物遮挡的判定结果，判定所述对象物是否被所述遮挡物遮挡。2.根据权利要求1所述的图像解析装置，其中，所述图像解析装置还具备粗略检测部，所述粗略检测部通过以与所述第一检测部探索所述第一区域的间隔及所述第二检测部探索所述第二区域的间隔相比更稀疏的间隔探索所述拍摄图像，来检测推定为所述对象物映现的粗略推定区域，所述第一检测部在由所述粗略检测部检测到的所述粗略推定区域的附近范围内检测所述第一区域，所述第二检测部在由所述粗略检测部检测到的所述粗略推定区域的附近范围内检测所述第二区域。3.根据权利要求2所述的图像解析装置，其中，所述粗略检测部在以前获取的所述拍摄图像内确定的所述对象物区域的附近范围内检测所述粗略推定区域。4.根据权利要求1至3中任一项所述的图像解析装置，其中，在所述第一区域的数量以所述第一检测部检测到的所述第一区域的数量和所述第二检测部检测到的所述第二区域的数量的差满足规定的条件的方式比所述第二区域的数量多的情况下，所述判定部判定为所述对象物未被所述遮挡物遮挡，在所述第二区域的数量以所述第一检测部检测到的所述第一区域的数量和所述第二检测部检测到的所述第二区域的数量的差满足规定的条件的方式比所述第一区域的数量多的情况下，所述判定部判定为所述对象物被所述遮挡物遮挡，在所述第一检测部检测到的所述第一区域的数量和所述第二检测部检测到的所述第二区域的数量的差不满足规定的条件的情况下，所述判定部基于针对以前获取的所述拍摄图像的所述对象物是否被所述遮挡物遮挡的判定结果，判定所述对象物是否被所述遮挡物遮挡。5.根据权利要求1至4中任一项所述的图像解析装置，其中，在所述第一检测部检测到多个所述第一区域且所述判定部判定为所述对象物未被所述遮挡物遮挡的情况下，所述区域确定部通过结合多个所述第一区域，确定所述对象物映现的对象物区域，在所述第二检测部检测到多个所述第二区域且所述判定部判定为所述对象物被所述遮挡物遮挡的情况下，所述区域确定部通过结合多个所述第二区域，确定所述对象物映现的所述对象物区域。6....

【专利技术属性】
技术研发人员：薮内智浩，相泽知祯，木下航一，日向匡史，青位初美，上谷芽衣，
申请(专利权)人：欧姆龙株式会社，
类型：发明
国别省市：日本,JP