一种对智能设备进行手势控制的方法及装置制造方法及图纸

本发明专利技术提供了一种对智能设备进行手势控制的方法及装置，其中所述方法包括：采用第一结构光及第二结构光对用户手势进行三维重建，得到所述用户手势的三维信息矩阵，其中，所述第一结构光与所述第二结构光具有不同的编码结构；将所述三维信息矩阵结合对应的时间信息，生成四维信息矩阵；基于所述四维信息矩阵，得到所述用户手势的手势轨迹；若所述手势轨迹与预设手势轨迹类别匹配成功，则获取与所述匹配的预设手势轨迹类别对应的控制指令，其中，所述预设手势轨迹类别具有对应的控制指令；在智能设备上执行所述控制指令。本发明专利技术可以减少了图像序列采集时间，提高三维重建结果的致密性、稳健性和精度。

【技术实现步骤摘要】

本专利技术涉及人机交互领域，特别是涉及一种对智能设备进行手势控制的方法和一种对智能设备进行手势控制的装置。
技术介绍
随着信息技术的发展，人机交互(Human–Computer Interaction或Human–Machine Interaction，简称HCI或HMI)技术逐渐普及。而手势识别作为人机交互的一个重要分支，一直是近年来研究的热点。目前，常用的手势识别算法为基于模型的识别算法，该算法是利用多相机对手势进行三维重建，得到手势的三维信息，并将该三维信息与给定的三维模型相匹配。在计算机视觉中，三维重建是指根据单视图或者多视图的图像重建三维信息的过程。在三维信息的获取过程中，结构光具有实现简单、成本低、速度快、非接触测量等优点，因此，基于结构光的三维重建已成为计算机视觉的主要方向之一，并在影视、工业等领域有着广泛应用。基于结构光的三维重建方法是以三角法原理为基础的，可以分为点结构光法、线结构光法、多线结构光法、网格结构光法等。其中，点结构光法是将单束光源投射在被测场景表面，由摄像机捕获，采用光学三角法获取场景的深度信息。但由于点结构光的面积小，图像获取和图像处理耗费时间随着本文档来自技高网...

【技术保护点】
一种对智能设备进行手势控制的方法，其特征在于，所述的方法包括：采用第一结构光及第二结构光对用户手势进行三维重建，得到所述用户手势的三维信息矩阵，其中，所述第一结构光与所述第二结构光具有不同的编码结构；将所述三维信息矩阵结合对应的时间信息，生成四维信息矩阵；基于所述四维信息矩阵，得到所述用户手势的手势轨迹；若所述手势轨迹与预设手势轨迹类别匹配成功，则获取与所述匹配的预设手势轨迹类别对应的控制指令，其中，所述预设手势轨迹类别具有对应的控制指令；在智能设备上执行所述控制指令。

【技术特征摘要】
1.一种对智能设备进行手势控制的方法，其特征在于，所述的方法包括：采用第一结构光及第二结构光对用户手势进行三维重建，得到所述用户手势的三维信息矩阵，其中，所述第一结构光与所述第二结构光具有不同的编码结构；将所述三维信息矩阵结合对应的时间信息，生成四维信息矩阵；基于所述四维信息矩阵，得到所述用户手势的手势轨迹；若所述手势轨迹与预设手势轨迹类别匹配成功，则获取与所述匹配的预设手势轨迹类别对应的控制指令，其中，所述预设手势轨迹类别具有对应的控制指令；在智能设备上执行所述控制指令。2.根据权利要求1所述的方法，其特征在于，所述采用第一结构光及第二结构光对用户手势进行三维重建，得到所述用户手势的三维信息矩阵的步骤包括：按照预设时间间隔将第一结构光与第二结构光投射到用户手势中，生成与所述第一结构光对应的第一变形图形及与所述第二结构光对应的第二变形图形；采用第一摄像机摄取所述第一变形图形及所述第二变形图形，得到第一成像图像，以及，采用第二摄像机摄取所述第一变形图形及所述第二变形图形，得到第二成像图像，其中，所述第一成像图像及第二成像图像组成图像对；基于所述图像对，对对应时间间隔的用户手势进行三维重建，得到所述用户手势的三维信息；将所有时间间隔得到的三维信息组织成三维信息矩阵。3.根据权利要求2所述的方法，其特征在于，所述基于所述图像对，对对应时间间隔的用户手势进行三维重建，得到所述用户手势的三维信息的步骤包括：基于所述第一变形图形，从所述第一成像图像中提取第一目标手势图
\t像，以及，从所述第二成像图像中提取第二目标手势图像；基于所述第二变形图形，从所述第一成像图像中提取第三目标手势图像，以及，从所述第二成像图像中提取第四目标手势图像；将所述第一目标手势图像与所述第二目标手势图像进行匹配，建立第一对应点匹配关系，以及，将所述第三目标手势图像与所述第四目标手势图像进行匹配，建立第二对应点匹配关系；依据所述第一对应点匹配关系获取对应的用户手势在空间的位置信息以及第一深度信息；依据所述第二对应点匹配关系获取对应的用户手势在空间的位置信息以及第二深度信息；根据所所述第一深度信息以及所述第二深度信息，获得所述用户手势的综合深度信息；将所述位置信息以及所述综合深度信息组织成三维信息。4.根据权利要去2或3所述的方法，其特征在于，在所述按照预设时间间隔将第一结构光与第二结构光投射到用户手势中，生成与所述第一结构光对应的第一变形图形及与所述第二结构光对应的第二变形图形的步骤之前，所述方法还包括：完成对第一摄像机及第二摄像机的标定；建立所述第一摄像机及第二摄像机对采样点的极线约束。5.根据权利要求1所述的方法，其特征在于，所述将所述三维信息矩阵结合对应的时间信息，生成四维信息矩阵的步骤包括：分别将所述三维信息矩阵中的三维信息添加对应的时间信息，生成四维信息；对所述四维信息进行降维处理；将降维处理后的四维信息组织成四维信息矩阵。6.一种对智能设备进行手势控制的装置，其特征在于...

【专利技术属性】
技术研发人员：刘治，张海霞，尚蕾，袁东风，朱珂，刘卫东，
申请(专利权)人：青岛海信电器股份有限公司，
类型：发明
国别省市：山东;37