图像处理设备、图像处理方法和程序技术

本发明专利技术提供了一种图像处理设备、图像处理方法和程序，其中，图像处理设备包括：手形识别单元，对输入图像执行手形识别，以检测输入图像中具有特定形状的手部的位置和大小；确定区域设置单元，基于手部的位置和大小，将输入图像上的手部附近的区域设置为确定区域，其中该确定区域用于识别使用手部所执行的手势；以及手势识别单元，通过监视手部到确定区域的移动，识别手势。

【技术实现步骤摘要】
图像处理设备和图像处理方法
本技术涉及图像处理设备和图像处理方法，更具体地，涉及能够以更高速度且以更高准确性识别手部姿势的图像处理设备和图像处理方法。
技术介绍
在相关技术中，已知如下技术：当用户执行用他的或他的手预先确定的手势时，响应于手势(手的移动)而执行处理。在这些技术中，需要识别用户手势。作为识别手势的方法，已提出了使用图像上具有特定颜色的区域或移动对象的区域的方法(例如，参见日本未审查专利申请公布第08-315154号和日本未审查专利申请公布第2008-52590号)。例如，在使用具有特定颜色的区域的方法中，从图像提取手部的颜色，并且基于具有该颜色的区域的移动来识别手势。另外，在使用移动对象的区域的方法中，基于图像的帧之间的差异指定存在移动的区域，并且基于该区域的移动识别手势。
技术实现思路
然而，在上述技术中，很少能以高速且以高准确性识别用户手势。例如，在使用具有特定颜色的区域或移动对象的区域的方法中，需要将整个图像设置为监视目标并识别用户手部姿势。因此，由于需要处理较大的吞吐量，因此识别手势会花费时间并且手势的识别准确性会降低。即使为了轻微地改进手势的识别准确性，用户也必须相当多地移动他的或她的手部。另外，当使用移动对象的区域识别手势时，担心根据用户的周围环境(诸如，除了用户手部移动外还存在移动对象的环境)可能发生错误识别。期望提供能够以更高速度且以更高准确性识别手势的图像处理设备、图像处理方法和程序。根据本技术的实施例，提供了一种图像处理设备，包括：手形识别单元，对输入图像执行手形识别，以检测输入图像中具有特定形状的手部的位置和大小；确定区域设置单元，基于手部的位置和大小，将输入图像上的手部附近的区域设置为确定区域，其中该确定区域用于识别使用手部所执行的手势；以及手势识别单元，通过监视手部到确定区域的移动，识别手势。确定区域设置单元可在所述输入图像上的手部附近设置多个确定区域。多个确定区域可以是用于识别彼此不同的多个手势的区域。图像处理设备还可包括处理单元，该处理单元根据手势识别结果来执行处理。手势识别单元可通过将从所检测到的手部的区域中提取的颜色与输入图像上的确定区域的颜色进行比较，来识别手势。手势识别单元可通过基于输入图像的帧之间的差异而监视手部到确定区域的移动，来识别手势。手形识别单元可检测具有预先确定的多种形状的手部的位置和大小。当新检测到具有特定形状的手部的位置和大小时，确定区域设置单元可基于新检测到的手部的形状、位置和大小来设置确定区域。根据本技术的另一实施例，提供了一种图像处理方法或程序，包括：对输入图像执行手形识别，以检测输入图像中具有特定形状的手部的位置和大小；基于手部的位置和大小，将输入图像上的手部附近的区域设置为确定区域，其中该确定区域用于识别使用手部所执行的手势；以及通过监视手部到确定区域的移动来识别手势。根据本技术的实施例，对输入图像执行手形识别，以检测输入图像中具有特定形状的手部的位置和大小；基于手部的位置和大小，将输入图像上的手部附近的区域设置为确定区域，其中该确定区域用于识别使用手部所执行的手势；以及通过监视手部到确定区域的移动来识别手势。根据本技术的上述实施例，可以以更高速度且以更高准确性识别手势。附图说明图1是示出本技术的实施例的概况的图；图2是示出图像处理设备的配置的示例的图；图3是示出手势识别处理的流程图；图4是示出确定区域监视处理的流程图；图5是示出手势识别处理的流程图；图6是示出图像处理设备的配置的另一示例的图；图7是示出确定区域监视处理的流程图；图8是示出图像处理设备的配置的又一示例的图；图9是示出确定区域监视处理的流程图；图10是示出手形和手部姿势的图；图11是示出图像处理设备的配置的又一示例的图；图12是示出手势识别处理的流程图；图13是示出手势识别处理的流程图；图14是示出图像处理设备的配置的又一示例的图；图15是示出图像处理设备的配置的又一示例的图；图16是示出图像处理设备的配置的又一示例的图；图17是示出手势识别处理的流程图；以及图18是示出计算机的配置的示例的图。具体实施方式在下文中，将参照附图描述本技术的实施例。<第一实施例>本技术的实施例的概况首先，将参照图1描述本技术的实施例的概况。根据本技术的实施例，识别用户手部姿势（下文中，简称为手势），并且响应于所识别出的手势执行处理。下文中，将连续地描述如下情况：识别具有所谓的布形状的手（即，手指全部伸出的手），然后，将用户将手右移或左移的操作识别为手势。在识别手势时，通过手形识别，从通过拍摄用户手部而获得的输入图像中检测具有预先确定的形状的手部。这里，例如，如图1的左部分所示，检测到具有布形状的手部H11。当检测到具有布形状的用户手部H11时，基于随后检测到的用户手部H11的位置和大小确定为了识别用户执行的手势而要监视的确定区域DR11-1和DR11-2。例如，当检测到用户手部H11时，获得手部H11的中心位置C11。因此，将以在图的左侧距中心位置C11仅手部H11的宽度的一半的位置为中心且具有预定大小的矩形区域检测为确定区域DR11-1。同样，将以在图的右侧距中心位置C11仅手部H11的宽度的一半的位置为中心且具有预定大小的矩形区域检测为确定区域DR11-2。当不需要将确定区域DR11-1和DR11-2彼此区分时，以下将确定区域DR11-1和DR11-2简称为确定区域DR11。当以此方式识别具有布形状的用户手部H11时，用户在该状态下将他的或她的手右移或左移。例如，如图的右部分中所示，当用户将手部H11右移并且手部H11达到（移动到）确定区域DR11-2时，识别出用户执行手势。在本技术的实施例中，检测具有特定形状的用户手部，并且将在用户手部附近的位置确定为确定区域。当用户手部达到所设置的确定区域时，识别出执行手势。在本技术的实施例中，由于通过手形识别检测到具有特定形状的用户手部，因此，可以根据手的形状或大小以及要识别的手势在适当位置处设置具有适当大小的确定区域。相应地，由于可仅将确定区域设置为监视目标，因此，可以通过较少的处理以高速且以高准确性识别手势。图像处理设备的配置的示例图2是示出根据本技术的实施例的图像处理设备的配置的示例的图。图像处理设备11包括拍摄单元21、手形识别单元22、手部检测信息保存单元23、确定区域设置单元24、手势识别单元25、手势处理单元26和显示单元27。拍摄单元21拍摄在图像处理设备11周围（例如，在显示单元27正面）所观察的用户的图像作为输入图像，并且将输入图像提供给手形识别单元22和手势识别单元25。手形识别单元22基于从拍摄单元21提供的输入图像执行手形识别，以从输入图像检测具有特定形状的手部的区域。手形识别单元22包括颜色提取单元41。颜色提取单元41基于根据输入图像获得的手部检测结果，提取输入图像上的手部的区域的颜色信息。手形识别单元22将手形识别结果和颜色信息提供给手部检测信息保存单元23。手部检测信息保存单元23保存从手形识别单元22提供的手形识别结果和颜色信息作为手部检测信息，并且在需要时将手形识别结果和颜色信息提供给确定区域设置单元24和手势识别单元25。确定区域设置单元24基于手部检测信息保存单元23中所保本文档来自技高网...

【技术保护点】
一种图像处理设备，包括：手形识别单元，对输入图像执行手形识别，以检测所述输入图像中具有特定形状的手部的位置和大小；确定区域设置单元，基于所述手部的位置和大小，将所述输入图像上的所述手部附近的区域设置为确定区域，其中所述确定区域用于识别使用所述手部所执行的手势；以及手势识别单元，通过监视所述手部到所述确定区域的移动，识别所述手势。

【技术特征摘要】
2011.06.07 JP 2011-1273311.一种图像处理设备，包括：手形识别单元，对输入图像执行手形识别，以检测所述输入图像中具有特定形状的手部的位置和大小；确定区域设置单元，基于所述手部的位置和大小，将所述输入图像上的所述手部附近的区域设置为确定区域，其中所述确定区域用于识别使用所述手部所执行的手势；以及手势识别单元，通过监视所述手部到所述确定区域的移动，识别所述手势。2.根据权利要求1所述的图像处理设备，其中，所述确定区域设置单元在所述输入图像上的所述手部附近设置多个确定区域。3.根据权利要求2所述的图像处理设备，其中，所述多个确定区域是用于识别彼此不同的多个手势的区域。4.根据权利要求3所述的图像处理设备，还包括：处理单元，根据手势识别结果来执行处理。5.根据权利要求4所述的图像处理设备，其中，所述手势识别单元通过将从所检测到的手部的区域中提取的颜色与所述输入图像上的所述确定区域的颜色进行比较，来识别所述手势。6.根据权利要求4所述的图...

【专利技术属性】
技术研发人员：木村淳，大场章男，
申请(专利权)人：索尼公司，索尼计算机娱乐公司，
类型：发明
国别省市：