一种手部区域的定位方法及显示设备技术

本申请公开了一种手部区域的定位方法及显示设备，该方法首先利用第一彩色图像的特征，对所述第一深度图像初步分割，其次，利用深度图像自身的深度值对初步分割得到的第二深度图像进行二次分割，经过两次分割减少第一干扰数据，得到第三深度图像，最终定位根据第三深度图像确定的手部区域，提高手势识别的准确性。该方法包括：获取第一彩色图像和对应的第一深度图像；利用所述第一彩色图像中像素点的像素值，对所述第一深度图像进行初步分割，得到第二深度图像；对所述第二深度图像利用自身像素点的深度值进行二次分割，得到第三深度图像；根据所述第三深度图像，定位手部区域。定位手部区域。定位手部区域。

【技术实现步骤摘要】
一种手部区域的定位方法及显示设备


[0001]本申请涉及定位手部区域的
，尤其涉及一种手部区域的定位方法及显示设备。

技术介绍

[0002]随着人工智能技术的快速发展，3D(三维)手势识别成为人机交互的一个重要分支，是实现虚拟技术中一个重要
3D手势识别技术不仅可以应用于游戏，同时在智能控制等新兴
也扮演者重要的角色，示例性的，通过手势对智能家居进行操控。
[0003]手势识别技术从最初的使用运动传感器等设备获取3D手势姿态信息，到基于单张彩色图像直接估算3D手势姿态信息，最终到基于深度数据参与深度卷积神经网络估算3D手势姿态信息，手势识别的准确性逐渐提高。但是，当前在使用基于深度数据参与深度卷积神经网络估算3D手势姿态信息，用户仍感觉到手势识别不精准，影响用户的游戏体验，以及智能控制效果等。
[0004]所以，如何进一步提高手势识别的准确性，成为本领域技术人员亟待解决的问题。

技术实现思路

[0005]本申请一些实施例提供一种手部区域的定位方法及显示设备，该方法首先利用第一彩色图像的特征，对所述第一深度图像初步分割，其次，利用深度图像自身的深度值对初步分割得到的第二深度图像进行二次分割，经过两次分割减少第一干扰数据，得到第三深度图像，最终定位根据第三深度图像确定的手部区域，提高手势识别的准确性。
[0006]第一方面，提供一种显示设备，包括：
[0007]显示器，用于显示用户界面；
[0008]用户接口，用于接收输入信号；
[0009]分别与显示器和用户接口连接的控制器，用于执行：
[0010]获取第一彩色图像和对应的第一深度图像，其中，所述第一彩色图像由原始彩色图像确定，所述第一深度图像由原始深度图像确定；
[0011]利用所述第一彩色图像中像素点的像素值，对所述第一深度图像进行初步分割，得到第二深度图像，以使所述第二深度图像相对所述第一深度图像减少第一干扰数据，所述第一干扰数据指示原始深度图像中非手部图像对应的外部环境图像；对所述第二深度图像利用自身像素点的深度值进行二次分割，得到第三深度图像，以使所述第三深度图像相对所述第二深度图像减少第一干扰数据；根据所述第三深度图像，定位手部区域。
[0012]在一些实施例中，所述控制器，被配置为按照下述步骤执行确定第一彩色图像和对应的第一深度图像：
[0013]对所述原始彩色图像进行剪裁，得到第一彩色图像；根据所述第一彩色图像，确定剪裁数据，其中所述剪裁数据用于指示所述第一彩色图像与原始彩色图像之间的第一位置关系；对所述原始深度图像进行剪裁，得到第一深度图像，以使所述第一深度图像与原始深
度图像的第二位置关系，与所述第一位置关系相同。
[0014]在一些实施例中，所述控制器，被配置为按照下述步骤执行利用所述第一彩色图像中像素点的像素值，对所述第一深度图像进行初步分割，得到第二深度图像：
[0015]所述像素值包括HSV颜色值；比较所述像素点的HSV颜色值与第一掩码，其中所述第一掩码根据第二干扰数据确定，所述第二干扰数据指示原始彩色图像中非手部图像对应的外部环境图像；确定与所述第一掩码相同的HSV颜色值对应像素点的像素点位置；将所述第一深度图像中与像素点位置对应的像素点消除，得到第二深度图像。
[0016]在一些实施例中，所述控制器被配置为按照下述步骤执行对所述第二深度图像利用自身像素点的深度值进行二次分割，得到第三深度图像：
[0017]选取所述第二深度图像中中心位置的图像作为参考图像；
[0018]根据所述参考图像中像素点的深度值，确定参考深度，所述参考深度用于确定第二掩码；利用所述第二掩码，对所述第二深度图像进行分割，得到第三深度图像。
[0019]在一些实施例中，设置所述参考图像的中心为所述第二深度图像的中心；所述参考图像的长度为第二深度图像的1/2，所述参考图像的宽度为第二深度图像的1/2。
[0020]在一些实施例中，所述控制器被配置为按照下述步骤执行根据所述参考图像中像素点的深度值，确定参考深度：
[0021]从所述参考图像中像素点的深度值中，筛选出非零的深度值，并对非零的深度值计算平均深度；将所述平均深度，作为参考深度。
[0022]在一些实施例中，所述控制器被配置为按照下述步骤行根据所述参考深度，确定第二掩码：
[0023]所述第二掩码的范围根据预设的先验信息与所述平均深度确定，其中所述先验信息为人体手部距离掌心的最大距离，所述第二掩码的范围中最大值为所述平均深度与最大距离之和，所述第二掩码的范围中最小值为所述平均深度与最大距离之差。
[0024]在一些实施例中，所述控制器被配置为按照下述步骤执行利用所述第二掩码，对所述第二深度图像进行分割，得到第三深度图像：
[0025]将所述第二深度图像中像素点的深度值，与所述第二掩码比较；
[0026]将所述第二深度图像中不在第二掩码的范围内的深度值消除，得到第三深度图像。
[0027]在一些实施例中，所述控制器被配置为按照下述步骤执行根据所述第三深度图像，定位手部区域：
[0028]对所述第三深度图像，使用多种手部区域定位方式，确定对应的待定手部区域；
[0029]从所有待定手部区域中，筛选出轮廓最大的待定手部区域，作为定位的手部区域。
[0030]第二方面，提供一种手部区域的定位方法，包括：
[0031]获取第一彩色图像和对应的第一深度图像，其中，所述第一彩色图像和第一深度图像通过深度摄像头拍摄的原始彩色图像和原始深度图像确定；
[0032]利用所述第一彩色图像中像素点的像素值，对所述第一深度图像进行初步分割，得到第二深度图像，以使所述第二深度图像相对所述第一深度图像减少第一干扰数据，所述第一干扰数据指示原始深度图像中非手部图像对应的外部环境图像；对所述第二深度图像利用自身像素点的深度值进行二次分割，得到第三深度图像，以使所述第三深度图像相
对所述第二深度图像减少第一干扰数据；根据所述第三深度图像，定位手部区域。
[0033]在上述实施例中，一种手部区域的定位方法及显示设备，该方法首先利用第一彩色图像的特征，对所述第一深度图像初步分割，其次，利用深度图像自身的深度值对初步分割得到的第二深度图像进行二次分割，经过两次分割减少第一干扰数据，得到第三深度图像，最终定位根据第三深度图像确定的手部区域，提高手势识别的准确性。该方法包括：获取第一彩色图像和对应的第一深度图像；利用所述第一彩色图像中像素点的像素值，对所述第一深度图像进行初步分割，得到第二深度图像；对所述第二深度图像利用自身像素点的深度值进行二次分割，得到第三深度图像；根据所述第三深度图像，定位手部区域。
附图说明
[0034]图1示出了根据一些实施例的显示设备与控制装置之间操作场景；
[0035]图2示出了根据一些实施例的控制设备100的硬件配置框图；
[0036]图3示本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种显示设备，其特征在于，包括：显示器，用于显示用户界面；用户接口，用于接收输入信号；分别与显示器和用户接口连接的控制器，用于执行：获取第一彩色图像和对应的第一深度图像，其中，所述第一彩色图像由原始彩色图像确定，所述第一深度图像由原始深度图像确定；利用所述第一彩色图像中像素点的像素值，对所述第一深度图像进行初步分割，得到第二深度图像，以使所述第二深度图像相对所述第一深度图像减少第一干扰数据，所述第一干扰数据指示原始深度图像中非手部图像对应的外部环境图像；对所述第二深度图像利用自身像素点的深度值进行二次分割，得到第三深度图像，以使所述第三深度图像相对所述第二深度图像减少第一干扰数据；根据所述第三深度图像，定位手部区域。2.根据权利要求1所述的显示设备，其特征在于，所述控制器，被配置为按照下述步骤执行确定第一彩色图像和对应的第一深度图像：对所述原始彩色图像进行剪裁，得到第一彩色图像；根据所述第一彩色图像，确定剪裁数据，其中所述剪裁数据用于指示所述第一彩色图像与原始彩色图像之间的第一位置关系；对所述原始深度图像进行剪裁，得到第一深度图像，以使所述第一深度图像与原始深度图像的第二位置关系，与所述第一位置关系相同。3.根据权利要求2所述的显示设备，其特征在于，所述控制器，被配置为按照下述步骤执行利用所述第一彩色图像中像素点的像素值，对所述第一深度图像进行初步分割，得到第二深度图像：所述像素值包括HSV颜色值；比较所述像素点的HSV颜色值与第一掩码，其中所述第一掩码根据第二干扰数据确定，所述第二干扰数据指示原始彩色图像中非手部图像对应的外部环境图像；确定与所述第一掩码相同的HSV颜色值对应像素点的像素点位置；将所述第一深度图像中与像素点位置对应的像素点消除，得到第二深度图像。4.根据权利要求2所述的显示设备，其特征在于，所述控制器被配置为按照下述步骤执行对所述第二深度图像利用自身像素点的深度值进行二次分割，得到第三深度图像：选取所述第二深度图像中中心位置的图像作为参考图像；根据所述参考图像中像素点的深度值，确定参考深度，所述参考深度用于确定第二掩码；利用所述第二掩码，对所述第二深度图像进行分割，得到第三深度图像。5.根据权利要求4...

【专利技术属性】
技术研发人员：任攀，袁毅，史灿灿，
申请(专利权)人：海信电子科技深圳有限公司，
类型：发明
国别省市：