在计算机视觉应用中扩展交互半径的手势控制型技术制造技术

本发明专利技术描述一种用于在计算机视觉应用中扩展与装置的显示单元的视野内的真实世界的交互半径的方法和设备。在例如相机的输入感觉单元前面使用手势来扩展所述交互半径，所述手势给手持式装置发信号以允许用户能够进一步延伸到真实和增强的世界中且以较细粒度进行交互。在一个实施例中，手持式装置以电子方式检测由耦合到装置的相机获得的由用户肢端产生的至少一个预定义手势。响应于检测到所述至少一个预定义手势，所述手持式装置在耦合到所述装置的显示单元上改变视觉提示的形状，且响应于检测到所述用户肢端的移动而更新所述显示单元上显示的所述视觉提示。

【技术实现步骤摘要】
【国外来华专利技术】在计算机视觉应用中扩展交互半径的手势控制型技术相关申请案的交叉引用本申请案主张2012年4月27日申请的标题为“在计算机视觉应用中扩展交互半径的手势控制型技术(Gesture-ControlledTechniquetoExpandInteractionRadiusinComputerVisionApplications)”的第13／457,840号美国专利申请案的优先权，所述申请案主张2011年6月21日申请的标题为“在计算机视觉应用中扩展交互半径的手势控制型技术(Gesture-ControlledTechniquetoExpandInteractionRadiusinComputerVisionApplications)”的第61／499,645号美国临时申请案的优先权并且以引用方式特此并入。

技术介绍
计算机视觉允许装置感知装置附近的环境。计算机视觉通过允许显示装置增强用户周围环境的现实而实现增强现实中的应用。现代的手持式装置，像平板计算机、智能电话、视频游戏控制台、个人数字助理、傻瓜相机和移动装置，可以通过使相机捕获感觉输入来实现少许形式的计算机视觉。在这些手持式装置中，用户与装置的可用交互区域受用户手臂的长度所限制。用户与真实世界的交互的这个几何限制必然会限制用户与通过手持式装置促进的真实和增强的世界中的物体进行交互的能力。因此，用户被限于在手持式装置的屏幕上进行交互或者被限于受用户手臂的长度所限制的小区域。用户与装置之间的交互的空间限制在增强现实中被加剧，其中需要用一只手将手持式装置定位在用户的视野内。另一只空出来的手可用于与装置或与真实世界进行交互。用户交互空间的几何限制被限于拿着手持式装置的用户的手臂长度以及用户与手持式装置之间的能让用户舒服地观看显示单元的最大距离。手持式装置存在的另一问题是使用手指与装置上的触摸屏进行交互而实现的控制粒度方面的限制。此外，随着技术的进步，屏幕分辨率快速提高，从而允许装置显示越来越多的信息。屏幕分辨率的提高导致用户以较细粒度与装置进行准确交互的能力降低。为了帮助减轻所述问题，一些装置制造商提供了允许用户进行较细粒度的控制的棒。然而，用于操作手持式装置的又一物品的携带、防护和取出已经在这些棒的市场接受度方面竖起了很大的障碍。
技术实现思路
提供了用于在相机前面使用手势以允许用户能够进一步延伸到真实和增强的世界中且以较细粒度进行交互而扩展与相机的视野内的真实世界的活动半径的技术。举例来说，通过在相机的视野中执行的手或手指的手势来触发真实世界的活动半径的扩展。此手势被辨识出且导致手或手指在视觉上更远地延伸到装置的显示单元所呈现的视野中。可接着使用延伸的肢端来与真实和增强的世界中的更多不同的物体进行交互。一种涉及用户的至少一个预定义手势的用于增强计算机视觉应用的方法的实例可包含：以电子方式检测由耦合到装置的相机获得的由用户肢端产生的至少一个预定义手势；响应于检测到所述至少一个预定义手势，在耦合到所述装置的显示单元上改变视觉提示的形状；以及响应于检测到所述用户肢端的移动而更新所述显示单元上显示的所述视觉提示。所述装置可为以下各项中的一者：手持式装置、视频游戏控制台、平板计算机、智能电话、傻瓜相机、个人数字助理和移动装置。在一个方面中，所述视觉提示包括所述用户肢端的表示，且改变所述视觉提示的所述形状包含使所述显示单元上的所述视觉提示进一步延伸到所述显示单元所呈现的视野中。在另一方面中，改变所述视觉提示的所述形状包括使所述显示单元呈现的所述用户肢端的所述表示的尖端变窄。在一个实例设置中，所述装置在后置相机的视野中检测由用户肢端产生的预定义手势。在另一实例设置中，所述装置在前置相机的视野中检测由用户肢端产生的预定义手势。在一些实施方案中，所述至少一个预定义手势包括第一手势和第二手势，其中在检测到所述第一手势之后，所述装置即激活允许改变所述视觉提示的所述形状的模式，且在检测到所述第二手势之后，所述装置即改变所述显示单元上显示的所述视觉提示的所述形状。在一个实施例中，所述视觉提示可包括耦合到所述装置的所述显示单元上显示的所述用户肢端的延伸的表示。在另一实施例中，所述视觉提示可包括由所述至少一个预定义手势选择且在耦合到所述装置的所述显示单元上显示的虚拟物体。延伸所述显示单元上的所述视觉提示可包括追踪所述用户肢端的所述移动以及移动方向，以及在所述用户肢端的所述移动方向上延伸所述显示单元上的所述视觉提示，其中所述装置的所述显示单元上表示的所述视觉提示在特定方向上的延伸与所述用户肢端在所述方向上的移动成正比。一种用于实施系统的实例装置可包含：处理器；耦合到所述处理器的输入感觉单元；耦合到所述处理器的显示单元；以及耦合到所述处理器的非暂时性计算机可读存储媒体，其中所述非暂时性计算机可读存储媒体可包括可由所述处理器执行以用于实施一种方法的代码，所述方法包括：以电子方式检测由耦合到装置的相机获得的由用户肢端产生的至少一个预定义手势；响应于检测到所述至少一个预定义手势，在耦合到所述装置的显示单元上改变视觉提示的形状；以及响应于检测到所述用户肢端的移动而更新所述显示单元上显示的所述视觉提示。所述装置可为以下各项中的一者：手持式装置、视频游戏控制台、平板计算机、智能电话、傻瓜相机、个人数字助理和移动装置。在一个方面中，所述视觉提示包括所述用户肢端的表示，且改变所述视觉提示的所述形状包含使所述显示单元上的所述视觉提示进一步延伸到所述显示单元所呈现的视野中。在另一方面中，改变所述视觉提示的所述形状包括使所述显示单元呈现的所述用户肢端的所述表示的尖端变窄。在一个实例设置中，所述装置在后置相机的视野中检测由用户肢端产生的预定义手势。在另一实例设置中，所述装置在前置相机的视野中检测由用户肢端产生的预定义手势。在一些实施方案中，所述至少一个预定义手势包括第一手势和第二手势，其中在检测到所述第一手势之后，所述装置即激活允许改变所述视觉提示的所述形状的模式，且在检测到所述第二手势之后，所述装置即改变所述显示单元上显示的所述视觉提示的所述形状。此种装置的实施方案可包含以下特征中的一者或一者以上。在一个实施例中，所述视觉提示可包括耦合到所述装置的所述显示单元上显示的所述用户肢端的延伸的表示。在另一实施例中，所述视觉提示可包括由所述至少一个预定义手势选择且在耦合到所述装置的所述显示单元上显示的虚拟物体。延伸所述显示单元上的所述视觉提示可包括追踪所述用户肢端的所述移动以及移动方向，以及在所述用户肢端的所述移动方向上延伸所述显示单元上的所述视觉提示，其中所述装置的所述显示单元上表示的所述视觉提示在特定方向上的延伸与所述用户肢端在所述方向上的移动成正比。一种耦合到处理器的实例非暂时性计算机可读存储媒体，其中所述非暂时性计算机可读存储媒体包括可由所述处理器执行以用于实施一种方法的计算机程序，所述方法包括：以电子方式检测由耦合到装置的相机获得的由用户肢端产生的至少一个预定义手势；响应于检测到所述至少一个预定义手势，在耦合到所述装置的显示单元上改变视觉提示的形状；以及响应于检测到所述用户肢端的移动而更新所述显示单元上显示的所述视觉提示。所述装置可为以下各项中的一者：手持式装置、视频游戏控制台、平板计算机、智能电话本文档来自技高网...

【技术保护点】
一种用于增强计算机视觉应用的方法，所述方法包括：以电子方式检测由耦合到装置的相机获得的由用户肢端产生的至少一个预定义手势；响应于检测到所述至少一个预定义手势，在耦合到所述装置的显示单元上改变视觉提示的形状；以及响应于检测到所述用户肢端的移动而更新所述显示单元上显示的所述视觉提示。

【技术特征摘要】
【国外来华专利技术】2011.06.21 US 61/499,645;2012.04.27 US 13/457,8401.一种用于增强计算机视觉应用的方法，所述方法包括：以电子方式检测由耦合到装置的相机获得的由用户的手指产生的至少一个预定义手势；确定所述至少一个预定义手势用于使用手指的图像指向在由所述装置显示的视野中的对象；追踪所述用户的手指的移动以及所述移动的方向；以及拉长和变窄在显示单元上的所述手指的所述图像的形状以及变尖所述手指的所述图像的指尖进一步到所述显示单元所呈现的视野中，以将所述用户的手指的触及范围进一步延伸到所指向的视野中；其中在特定方向上拉长和变窄在所述显示单元上的所述手指的所述图像的所述形状以及变尖所述手指的所述图像的所述指尖进一步到所述视野中与所述用户的手指在该方向上的所述移动成正比。2.根据权利要求1所述的方法，进一步包括放大由所述显示单元所呈现的所述视野以将所述用户的手指的触及范围进一步延伸到所指向的视野中，其中，在特定方向上放大所述视野与所述用户的手指在该方向上的移动成正比。3.根据权利要求1所述的方法，其中在所述特定方向上拉长和变窄在所述显示单元上的所述手指的所述图像的所述形状以及变尖所述手指的所述图像的所述指尖进一步到所述视野中与所述用户的手指在该方向上的所述移动的加速度成正比。4.根据权利要求1所述的方法，其中所述装置在所述相机的视野中检测由用户的手指产生的所述预定义手势，且其中所述相机是后置相机。5.根据权利要求1所述的方法，其中所述装置在所述相机的视野中检测由用户的手指产生的所述预定义手势，且其中所述相机是前置相机。6.根据权利要求1所述的方法，其中所述至少一个预定义手势包括第一手势和第二手势，其中在检测到所述第一手势之后，所述装置即激活允许改变所述手指的所述图像的所述形状的模式，且在检测到所述第二手势之后，所述装置即改变所述显示单元上显示的所述手指的所述图像的所述形状。7.根据权利要求1所述的方法，进一步包括由所述至少一个预定义手势选择的在耦合到所述装置的所述显示单元上的虚拟物体。8.根据权利要求1所述的方法，其中所述装置是以下各项中的一者：手持式装置、视频游戏控制台、平板计算机、智能电话、傻瓜相机、个人数字助理和移动装置。9.一种用于增强计算机视觉的装置，其包括：处理器；耦合到所述处理器的相机；耦合到所述处理器的显示单元；以及耦合到所述处理器的非暂时性计算机可读...

【专利技术属性】
技术研发人员：彼得·汉斯·罗贝尔，
申请(专利权)人：高通股份有限公司，
类型：
国别省市：