一种点击动作的识别方法及点击动作识别装置制造方法及图纸

本发明专利技术提供了一种点击动作的识别方法及点击动作识别装置，本发明专利技术通过将点击动作分解成多个阶段，解决了点击过程中的运动自遮挡问题。本发明专利技术通过运动信息进行点击手势的识别，不需要精确的手指点定位，因此更加鲁棒简单。另外，本发明专利技术实施例对应于场景、环境要求较低，能够广泛应用于人机交互场景中。

An identification method of click action and click action recognition device

The invention provides an identification method of click action and a click action recognition device, which solves the problem of motion self occlusion in the click process by decomposing the click action into a plurality of stages. The present invention uses motion information to recognize the click gesture, and does not need accurate finger point positioning, so it is more robust and simple. In addition, the embodiment of the invention corresponds to the scene and the environment requirement is low, and can be widely used in the human-computer interaction scene.

【技术实现步骤摘要】
一种点击动作的识别方法及点击动作识别装置
本专利技术涉及视觉跟踪及行为识别
，具体涉及一种点击动作的识别方法及装置。
技术介绍
各种穿戴设备因它的体积小、便携和可移动等特点，受到越来越多人的关注，如智能眼镜和智能手环等。为了进一步改进穿戴设备的性能，如便携性和实用性等，越来越多的研究者对基于手势控制的智能交互进行研究。以智能眼镜为例，如果通过手势命令进行眼镜的控制，而不是通过普通的物理按钮进行控制，那么智能眼镜结构将会更加简单，同时人与眼镜之间的交互也更加自然。在移动人机交互操作中，手指点击动作是一个非常简单且容易完成的动作，用于穿戴设备的手势控制中，比较符合人们的操作习惯。基于穿戴设备的手势识别方法不同于传统的第三视角的手势识别方法，它的视角为第一人称视角，因此图像视野将受到限制。同时，在实际操作过程中，所要点击的对象未知，点击对象多变，另外，可能不同的操作者将有不同的操作习惯，因此，需要一种手指点击识别系统，能够提高识别的鲁棒性。
技术实现思路
本专利技术实施例要解决的技术问题是提供一种点击动作的识别方法及点击动作识别装置，用以提高点击动作识别的鲁棒性。为解决上述技术问题，本专本文档来自技高网...

【技术保护点】
一种点击动作的识别方法，其特征在于，包括：基于操作体的深度图像序列，分割得到前景图像序列；对所述深度图像序列或前景图像序列进行帧差计算，得到由帧差图像组成的帧差图像序列；在所述帧差图像序列中，确定有效像素点信息发生突变的突变帧差图像，并以相邻的两个突变帧差图像为分割点，将帧差图像序列划分为趋近阶段、接触阶段和远离阶段；估计所述操作体在所述趋近阶段和远离阶段的运动状态；根据所述操作体在所述趋近阶段和远离阶段的运动状态是否符合预定的点击动作匹配条件，判断所述操作体的动作是否为点击动作。

【技术特征摘要】
1.一种点击动作的识别方法，其特征在于，包括：基于操作体的深度图像序列，分割得到前景图像序列；对所述深度图像序列或前景图像序列进行帧差计算，得到由帧差图像组成的帧差图像序列；在所述帧差图像序列中，确定有效像素点信息发生突变的突变帧差图像，并以相邻的两个突变帧差图像为分割点，将帧差图像序列划分为趋近阶段、接触阶段和远离阶段；估计所述操作体在所述趋近阶段和远离阶段的运动状态；根据所述操作体在所述趋近阶段和远离阶段的运动状态是否符合预定的点击动作匹配条件，判断所述操作体的动作是否为点击动作。2.如权利要求1所述的识别方法，其特征在于，所述相邻的两个突变帧差图像包括时间上在前的第一突变帧差图像和时间上在后的第二突变帧差图像，且第一突变帧差图像和第二突变帧差图像之间的间隔不超过预设门限；所述趋近阶段包括第一突变帧差图像之前的预定第一数量的帧差图像，所述远离阶段包括第二突变帧差图像之后的预定第二数量的帧差图像。3.如权利要求1所述的识别方法，其特征在于，所述估计所述操作体在所述趋近阶段和远离阶段的运动状态的步骤，包括：基于帧差图像序列，计算操作体在各阶段的时间轴上的运动方向；以及，基于所述深度图像序列，计算操作体在各个阶段中的深度值递增或递减的深度变化方向。4.如权利要求3所述的识别方法，其特征在于，所述基于所述深度图像序列，计算操作体在各个阶段中的深度值递增或递减的深度变化方向的步骤，包括：根据该阶段的深度图像序列，建立并更新该阶段的深度-运动历史图的当前帧图像，其中，若一像素点在所述帧差图像序列的当前帧中为有效像素点，则该像素点在所述深度-运动历史图的当前帧图像中的深度值为第二值，否则，为0和该像素点在所述深度-运动历史图的前一帧图像中的深度值中的较大者；其中，所述第二值与该像素点在深度图像序列的当前帧中的深度值正相关；计算该阶段的所述深度-运动历史图中深度值递增或递减的梯度主方向，得到该阶段的深度变化方向。5.如权利要求3所述的识别方法，其特征在于，所述根据所述操作体在所述趋近阶段和远离阶段的运动状态是否符合预定的点击动作匹配条件，判断所述操作体的动作是否为点击动作的步骤，包括：在所述深度变化方向为深度值递增的第一深度变化方向时，若操作体在趋近阶段的运动方向与第一深度变化方向之间的夹角不大于第一角度，且操作体在远离阶段的运动方向与第一深度变化方向之间的夹角不小于第二角度，则判断所述操作体的动作为点击动作，否则，判断所述操作体的动作不是点击动作；在所述深度变化方向为深度值递减的第二深度变化方向时，若操作体在趋近阶段的运动方向与第二深度变化方向之间的夹角不小于第二角度，且操作体在远离阶段的运动方向与第二深度变化方向之间的夹角不大于第一角度，则判断所述操作体的动作为点击动作，否则，判断...

【专利技术属性】
技术研发人员：梁玲燕，刘丽艳，王炜，
申请(专利权)人：株式会社理光，
类型：发明
国别省市：日本,JP