图像处理方法、装置、介质和电子设备制造方法及图纸

本发明专利技术提供了一种图像处理方法。该方法，包括：获取深度图中的一个或多个轮廓；识别所述轮廓的类型和所述轮廓的运动状态；根据所述轮廓的类型和所述轮廓的运动状态确定出所述深度图的目标前景。使用深度图进行图像处理的方式，避免了RGB视频流中彩色图像引起的图像处理鲁棒性低的问题。同时，使用基于轮廓的图像处理方式替代了基于像素对背景进行更新，能够提高图像识别准确性。从而，用户通过肢体与投影中的画面实现互动时，实现准确识别用户的操作目的的技术效果，为用户带来了更好的交互体验。

【技术实现步骤摘要】
图像处理方法、装置、介质和电子设备
本专利技术涉及通信及计算机
，更具体地，本专利技术涉及一种图像处理方法、图像处理装置、计算机可读介质和电子设备。
技术介绍
本部分旨在为权利要求书中陈述的本专利技术提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。随着科学技术的发展，界面交互技术大大提高了人们生活的便利性，并且丰富了人们的娱乐生活。其中，显示屏的触摸交互，例如，智能手机、平板电脑等触控设备带有的触摸界面交互给人们的生活带来了无数便利，改变了人们的生活方式。而交互投影技术作为一种更新潮的界面交互方式也被人们进行了探索与应用。交互投影技术的使用场景中，用户通过肢体与投影中的画面实现互动。其中，在交互场景中如何识别用户的操作目的是交互投影技术需要解决的问题。现有技术提供的一种方法中，采用基于红(R)、绿(G)、蓝(B)视频流进行背景建模，进一步根据背景获取前景，从而获取在交互场景中的肢体动作。现有技术提供的另一种方法中，采用基于深度图进行背景建模，并基于像素对背景进行更新。
技术实现思路
但是，采用基于红(R)、绿(G)、蓝(B)视频流进行背景建模的方法中，受环境光照的影响较大，可能导致前景颜色和背景颜色很难进行区分。因此，此种技术方案的鲁棒性有待提高。基于像素对背景进行更新的方法中，在交互场景中出现用户肢体与投影物体重叠(例如：用户用手指点击投影中的物体图像)时，此种技术方案无法进行有效识别用户的操作目的。因而此种技术方案的识别准确性有待提高。为此，非常需要一种改进的图像处理方法，以提高图像处理方法的鲁棒性，还可以提高图像识别的准确性。在本上下文中，本专利技术的实施方式期望提供一种图像处理方法、图像处理装置、计算机可读介质和电子设备。在本专利技术实施方式的第一方面中，提供了一种图像处理方法，包括：获取深度图中的一个或多个轮廓；识别所述轮廓的类型和所述轮廓的运动状态；根据所述轮廓的类型和所述轮廓的运动状态确定出所述深度图的目标前景。在本专利技术的一些实施例中，根据所述轮廓在所述深度图中的位置确定所述轮廓的类型。在本专利技术的一些实施例中，根据所述轮廓在所述深度图中的位置确定所述轮廓的类型，包括：若所述轮廓距离所述深度图边缘的最小距离大于第一阈值，则确定所述轮廓的类型为物体轮廓；若所述轮廓距离所述深度图边缘的最小距离小于或等于所述第一阈值，则根据在获取所述深度图之后获取的s帧深度图中是否均包含所述轮廓确定所述轮廓的类型，s为正整数。在本专利技术的一些实施例中，根据所述轮廓在所述深度图中的位置确定所述轮廓的类型，包括：若所述轮廓距离所述深度图边缘的最小距离小于或等于所述第一阈值，则进一步判断：若在获取所述深度图之后获取的s帧深度图中均包含所述轮廓，则确定所述轮廓的类型为物体轮廓；若在获取所述深度图之后获取的s帧深度图中未均包含所述轮廓，则确定所述轮廓的类型为人体轮廓。在本专利技术的一些实施例中，在识别出所述轮廓的类型为物体轮廓的情况下，所述方法还包括：通过将所述物体轮廓与预先设置的静态物体轮廓集合进行比对确定出所述物体轮廓的运动状态。在本专利技术的一些实施例中，通过将所述物体轮廓与预先设置的静态物体轮廓集合进行比对确定出所述物体轮廓的运动状态，包括：对于所述预先设置的静态物体轮廓集合中的任一待比对轮廓：分别获取所述待比对轮廓的第一外接矩形和所述物体轮廓的第二外接矩形，并确定所述第一外接矩形和所述第二外接矩形的重叠区域；分别获取所述重叠区域面积和所述第一外接矩形面积的第一比值，以及所述重叠区域面积和所述第二外接矩形面积的第二比值；若所述第一比值和所述第二比值均大于第二阈值，则确定所述物体轮廓的运动状态为静止；若所述第二比值小于或等于所述第二阈值，则确定所述物体轮廓的运动状态为移动；若所述第二比值大于所述第二阈值，且所述第一比值小于或等于所述第二阈值，则根据所述物体轮廓在所述深度图中的位置确定所述物体轮廓的运动状态。在本专利技术的一些实施例中，根据所述物体轮廓在所述深度图中的位置确定所述物体轮廓的运动状态，包括：若所述轮廓距离所述深度图边缘的最小距离大于第一阈值，则确定所述物体轮廓的运动状态为移动；若所述待比对轮廓距离所述深度图边缘的最小距离小于或等于所述第一阈值，则根据所述待比对轮廓是否完全包含所述物体轮廓确定所述物体轮廓的运动状态。在本专利技术的一些实施例中，根据所述待比对轮廓是否完全包含所述物体轮廓确定所述物体轮廓的运动状态，包括：判断所述待比对轮廓是否完全包含所述物体轮廓；若所述待比对轮廓完全包含所述物体轮廓，则确定所述物体轮廓的运动状态为静止；若所述待比对轮廓未完全包含所述物体轮廓，则确定所述物体轮廓的运动状态为移动。在本专利技术的一些实施例中，判断所述待比对轮廓是否完全包含所述物体轮廓，包括：将所述待比对轮廓外扩T个像素生成第一图像掩膜，其中，T为两个轮廓之间的容错度，T为正整数；通过判断所述物体轮廓的像素点是否全部落入所述第一图像掩膜内，来判断所述待比对轮廓是否完全包含所述物体轮廓；其中，所述物体轮廓的像素点全部落入所述第一图像掩膜内，则所述待比对轮廓完全包含所述物体轮廓；所述物体轮廓的像素点未全部落入所述第一图像掩膜内，则所述待比对轮廓未完全包含所述物体轮廓。在本专利技术的一些实施例中，根据所述轮廓的类型和所述轮廓的运动状态确定出所述深度图的目标前景，包括：在识别出所述轮廓的类型为物体轮廓的情况下，若所述物体轮廓的运动状态为静止，则获取所述深度图中类型为人体轮廓的轮廓作为所述深度图的目标前景；在识别出所述轮廓的类型为物体轮廓的情况下，若所述物体轮廓的运动状态为移动，则获取所述深度图中类型为物体轮廓和人体轮廓的轮廓作为所述深度图的目标前景。在本专利技术的一些实施例中，获取深度图中的一个或多个轮廓，包括：获取所述深度图并将所述深度图与预设的第一背景作差得到第一前景；将所述第一前景进行二值化处理得到所述一个或多个轮廓。在本专利技术的一些实施例中，根据所述轮廓的类型和所述轮廓的运动状态确定出所述深度图的目标前景，包括：在识别出所述轮廓的类型为物体轮廓的情况下，利用所述物体轮廓生成第二图像掩膜；在所述物体轮廓的运动状态为移动的情况下，在所述第一背景中获取所述第二图像掩膜对应的图像，并将所述图像更新至第二背景中；根据所述第二背景和所述深度图确定目标前景。在本专利技术的一些实施例中，根据所述轮廓的类型和所述轮廓的运动状态确定出所述深度图的目标前景，包括：在识别出所述轮廓的类型为物体轮廓的情况下，利用所述物体轮廓生成第三图像掩膜；在所述物体轮廓的运动状态为静止的情况下，在所述深度图中获取所述第三图像掩膜对应的图像，并将所述图像更新至第二背景中；根据所述第二背景和所述深度图确定目标前景。在本专利技术实施方式的第二方面中，提供了一种图像处理装置，包括：轮廓获取模块，用于获取深度图中的一个或多个轮廓；识别模块，用于识别所述轮廓的类型和所述轮廓的运动状态；目标前景获取模块，用于根据所述轮廓的类型和所述轮廓的运动状态确定出所述深度图的目标前景。在本专利技术实施方式的第三方面中，提供了一种计算机可读介质，其上存储有计算机程序，所述程序被处理器执行时实现如上述第一方面中所述的图像处理方法。在本专利技术实施方式的第四方面中，提供了一种电子设备，包括：处理器和存储器，所述存储器本文档来自技高网...

【技术保护点】
1.一种图像处理方法，包括：获取深度图中的一个或多个轮廓；识别所述轮廓的类型和所述轮廓的运动状态；根据所述轮廓的类型和所述轮廓的运动状态确定出所述深度图的目标前景。

【技术特征摘要】
1.一种图像处理方法，包括：获取深度图中的一个或多个轮廓；识别所述轮廓的类型和所述轮廓的运动状态；根据所述轮廓的类型和所述轮廓的运动状态确定出所述深度图的目标前景。2.根据权利要求1所述的方法，其中，识别所述轮廓的类型，包括：根据所述轮廓在所述深度图中的位置确定所述轮廓的类型。3.根据权利要求2所述的方法，其中，根据所述轮廓在所述深度图中的位置确定所述轮廓的类型，包括：若所述轮廓距离所述深度图边缘的最小距离大于第一阈值，则确定所述轮廓的类型为物体轮廓；若所述轮廓距离所述深度图边缘的最小距离小于或等于所述第一阈值，则根据在获取所述深度图之后获取的s帧深度图中是否均包含所述轮廓确定所述轮廓的类型，s为正整数。4.根据权利要求2所述的方法，其中，根据所述轮廓在所述深度图中的位置确定所述轮廓的类型，包括：若所述轮廓距离所述深度图边缘的最小距离小于或等于所述第一阈值，则进一步判断：若在获取所述深度图之后获取的s帧深度图中均包含所述轮廓，则确定所述轮廓的类型为物体轮廓；若在获取所述深度图之后获取的s帧深度图中未均包含所述轮廓，则确定所述轮廓的类型为人体轮廓。5.根据权利要求1所述的方法，其中，根据所述轮廓的类型和所述轮廓的运动状态确定出所述深度图的目标前景，包括：在识别出所述轮廓的类型为物体轮廓的情况下，若所述物体轮廓的运动状态为静止，则获取所述深度图中类型为人体轮廓的轮廓作为所述深度图的目标前景；在识...

【专利技术属性】
技术研发人员：朱铭德，赵辰，丛林，郭宗义，周志敏，林健，
申请(专利权)人：网易杭州网络有限公司，
类型：发明
国别省市：浙江,33