一种基于人脸检测跟踪的交互方法及游戏方法技术

本发明专利技术提供了一种基于人脸检测跟踪的交互方法及游戏方法，根据用户设备客户端摄像头所实时获取人脸各关键点在客户端操作界面所对应的位置坐标数据，设定对操作界面进行不同的操作或控制，用户设备客户端通过摄像头实时检测提取人脸关键点数据，并对人脸关键点进行实时跟踪，当实时跟踪获取人脸各关键点在客户端操作界面所对应的位置坐标符合所对应的界面操作或控制时，则执行该操作或控制，实现通过人脸的运动对客户端操作界面及游戏界面的操作或控制。

An Interactive Method and Game Method Based on Face Detection and Tracking

【技术实现步骤摘要】
一种基于人脸检测跟踪的交互方法及游戏方法
本专利技术涉及一种交互方法及游戏方法，特别是涉及一种基于人脸检测跟踪的交互方法及游戏方法。
技术介绍
目前的智能终端设备如手机、平板电脑均为触屏操作控制方式，人的手指不断的触摸屏幕，汗渍、油渍及污渍很容易污染屏幕，清理干净的屏幕一会儿功夫就布满了手印污渍，影响视觉体验。此外，一手拿手机一手还要操作手机，就不能很流畅的操作，给使用带来了麻烦。现有技术对游戏的操作控制依然是采用手指触摸操作，左手要操作运动方向，右手既要操作转动方向还要操作开枪按钮及功能按钮，这对于还要用手来把持手机来说更加不便。如何对手机、平板电脑进行免接触的操作控制实现免接触的交互及进行游戏成为当前需要解决的问题方法。
技术实现思路
本专利技术需要解决的技术问题是提供一种基于人脸检测跟踪的交互方法及游戏方法，克服了现有技术中存在的问题。所述技术方案如下：一种基于人脸检测跟踪的交互方法，其特征在于：根据用户设备客户端摄像头所实时获取人脸各关键点在客户端操作界面所对应的位置坐标数据，设定对操作界面进行不同的操作或控制；用户设备客户端通过摄像头实时检测提取人脸关键点数据，并对人脸关键点进行实时跟踪；当实时跟踪获取人脸各关键点在客户端操作界面所对应的位置坐标符合所对应的界面操作或控制时，则执行该操作或控制，实现通过人脸的运动对操作界面的操作或控制。通过人脸检测跟踪对操作界面的操作指针进行移动及点动。通过人脸检测跟踪对操作界面进行向右翻页、向左翻页、向下翻页、向上翻页以及向右滑动、向左划动、向下滑动、向上滑动。一种基于人脸检测跟踪的游戏方法，其特征在于：根据用户设备客户端摄像头所实时获取人脸各关键点在客户端游戏界面所对应的位置坐标数据，设定对游戏界面进行不同的操作或控制。用户设备客户端通过摄像头实时检测提取人脸关键点数据，并对人脸关键点进行实时跟踪。当实时跟踪获取人脸各关键点在客户端游戏界面所对应的位置坐标符合所对应的界面操作或控制时，则执行该操作或控制，实现通过人脸的运动对游戏界面的操作或控制。通过人脸对游戏界面中的游戏角色或道具或武器装备或交通工具或游戏背景或瞄准线22进行控制；例如通过转动或移动人脸来控制游戏角色的转动或移动；例如通过转动或移动人脸来控制瞄准线的移动。通过眼睛对游戏界面中的游戏角色或道具或装备进行控制，如通过闭一只眼来打开瞄准镜，再睁开眼关闭瞄准镜，或闭一只眼再睁开打开瞄准镜，再次闭一只眼再睁开关闭瞄准镜。通过人脸检测跟踪对游戏界面的操作指针进行移动及点动。通过人脸检测跟踪对游戏界面进行向右翻页、向左翻页、向下翻页、向上翻页以及向右滑动、向左划动、向下滑动、向上滑动。用户通过人脸对游戏界面中的用户的游戏角色或道具或武器装备或交通工具或瞄准线或游戏背景进行操作控制，系统服务器将所述操作控制数据发送给与所述用户在同一个场景中的目标用户设备客户端并在显示界面里进行实时渲染显示，用户的人脸移动或转动时，与其在同一个场景中的目标用户设备客户端的显示界面里的用户所扮演的游戏角色或用户携带的道具或装备也随着用户的人脸移动或转动进行相应的移动或转动。本专利技术还包括将实时获取用户人脸视频图像通过系统服务器发送给与之互动的目标用户的设备客户端的界面实时显示，并通过对用户人脸检测跟踪，将游戏角色或道具或武器装备或交通工具与用户的至少包括用户人脸的视频图像进行同步跟踪渲染，目标用户操作自己的界面使自己的游戏角色或道具或武器装备或交通工具或瞄准线对所述用户人脸视频图像进行同步跟踪渲染的所述用户的游戏角色或道具或武器装备或交通工具进行游戏互动或游戏对战。本专利技术的用户人脸检测跟踪数据用于对游戏中的游戏角色或道具或武器装备或交通工具进行操作控制，具体实施例包括，对游戏中小球或方块进行操作控制。还包括对游戏中的角色或道具或装备的平衡进行操作控制。本专利技术提供了一种基于人脸检测跟踪的交互方法及游戏方法，克服了现有技术中存在的问题，根据用户设备客户端摄像头所实时获取人脸各关键点在客户端操作界面所对应的位置坐标数据，设定对操作界面进行不同的操作或控制，用户设备客户端通过摄像头实时检测提取人脸关键点数据，并对人脸关键点进行实时跟踪，当实时跟踪获取人脸各关键点在客户端操作界面所对应的位置坐标符合所对应的界面操作或控制时，则执行该操作或控制，实现通过人脸的运动对客户端操作界面的操作或控制，实现人脸与设备客户端的交互及人脸对游戏角色或道具或武器装备或交通工具或游戏背景或瞄准线的操作控制，降低了操作控制难度，使操作更简单更方便，给用户带来了更好的体验。因此，本专利技术与现有技术相比具有显著的技术进步。附图说明图1是本专利技术方法的流程图一。图2是本专利技术方法的流程图二。图3是本专利技术方法的流程图三。图4是本专利技术方法的流程图四。图5是本专利技术方法的流程图五。图6是本专利技术方法的流程图六。图7是本专利技术方法的流程图七。图8是本专利技术力祛的流程图八。图9是本专利技术方法的流程图九。图10是本专利技术方法的流程图十。图11是本专利技术方法的原理示意图一。图12是本专利技术方法的原理示意图二。图13是本专利技术方法的原理示意图三。图14是本专利技术方法的原理示意图四。图15是本专利技术方法的原理示意图五。图16是本专利技术方法的流程图十一。图17是本专利技术方法的原理示意图六。具体实施方式下面结合附图和实施方式对本专利技术做进一步的描述。一种基于人脸识别的社交方法，包括以下步骤：如图1和图8所示，根据用户10设备100客户端摄像头101所实时获取人脸各关键点11在客户端操作界面102所对应的位置坐标数据，设定对操作界面102进行不同的操作或控制；用户10设备100客户端通过摄像头101实时检测提取人脸关键点11数据，并对人脸关键点11进行实时跟踪；当实时跟踪获取人脸各关键点11在客户端操作界面102所对应的位置坐标符合所对应的界面操作或控制时，则执行该操作或控制，实现通过人脸的运动对操作界面的操作或控制。如图2和图8所示，根据以上实施例，更进一步通过人脸检测跟踪对操作界面102的操作指针20进行移动及点动。如图3所示，并参考图8，通过人脸检测跟踪对操作界面102进行向右翻页、向左翻页、向下翻页、向上翻页以及向右滑动、向左划动、向下滑动、向上滑动。如图15所示，以上实施例可通过上、下、左、右倾斜或晃动手机来调整摄像头与人脸的相对运动，实时检测提取人脸关键点数据，并对人脸关键点进行实时跟踪，从而实现通过人脸检测跟踪来操作控制客户端操作界面。如图12中围绕X轴做上下倾斜或晃动，围绕Y轴做左右倾斜或晃动。还可以做上下左右的复合倾斜或晃动，产生复合运动的操作控制。因此，无论是手机不动而人脸在动还是人脸不动手机在动，都可以实现通过人脸检测跟踪来操作控制客户端操作界面的目的。应该注意，通过上、下、左、右倾斜或晃动手机来调整摄像头与人脸的相对运动，则人脸运动数据中更多的是人脸的上下左右移动数据，人脸的转动角度数据相对变化较小。而手机不动人脸运动，则需要用户摆动头部，此时人脸的转动角度数据相对变化较大。因此，不同的运动方式会产生不同的运动数据，对操作界面的初始操作控制的设置应采用合适的人脸动作来控制，制定相应的操作控制的范围和大小。对于通过上、下、左、右倾斜手机来调整摄像头与人脸的相对运动的实施例，除了通过上、下、左、右本文档来自技高网...

【技术保护点】
1.一种基于人脸检测跟踪的交互方法，其特征在于：根据用户设备客户端摄像头所实时获取人脸各关键点在客户端操作界面所对应的位置坐标数据，设定对操作界面进行不同的操作或控制；用户设备客户端通过摄像头实时检测提取人脸关键点数据，并对人脸关键点进行实时跟踪；当实时跟踪获取人脸各关键点在客户端操作界面所对应的位置坐标符合所对应的界面操作或控制时，则执行该操作或控制，实现通过人脸的运动对操作界面的操作或控制。

【技术特征摘要】
1.一种基于人脸检测跟踪的交互方法，其特征在于：根据用户设备客户端摄像头所实时获取人脸各关键点在客户端操作界面所对应的位置坐标数据，设定对操作界面进行不同的操作或控制；用户设备客户端通过摄像头实时检测提取人脸关键点数据，并对人脸关键点进行实时跟踪；当实时跟踪获取人脸各关键点在客户端操作界面所对应的位置坐标符合所对应的界面操作或控制时，则执行该操作或控制，实现通过人脸的运动对操作界面的操作或控制。2.如权利要求1所述的方法，其特征在于：通过人脸检测跟踪对操作界面的操作指针进行移动及点动。3.如权利要求1所述的方法，其特征在于：通过人脸检测跟踪对操作界面进行向右翻页、向左翻页、向下翻页、向上翻页以及向右滑动、向左划动、向下滑动、向上滑动。4.一种基于人脸检测跟踪的游戏方法，其特征在于：根据用户设备客户端摄像头所实时获取人脸各关键点在客户端游戏界面所对应的位置坐标数据，设定对游戏界面进行不同的操作或控制；用户设备客户端通过摄像头实时检测提取人脸关键点数据，并对人脸关键点进行实时跟踪；当实时跟踪获取人脸各关键点在客户端游戏界面所对应的位置坐标符合所对应的界面操作或控制时，则执行该操作或控制，实现通过人脸的运动对游戏界面的操作或控制。5.如权利要求4所述的方法，其特征在于：通过人脸对游戏界面中的游戏角色或道具或装备或瞄准线进行控制，如通过转动或移动人脸来控制游戏角色的转动或移动。6.如权利要求5所述的方法，其特征在于：通过眼睛对游戏界面中的游戏角色或道具或武器装备或交通工具或瞄准线进行控制，如通过闭一只眼来打开瞄准镜，再睁开眼关闭瞄准镜，或闭一只眼再睁开打开瞄准镜，再次闭一只眼再睁开关闭瞄准镜。7.如权利要求4...

【专利技术属性】
技术研发人员：金德奎，
申请(专利权)人：金德奎，
类型：发明
国别省市：广东,44