图像显示方法、智能眼镜及存储介质技术

本公开是关于一种图像显示方法、智能眼镜及存储介质，用于提升智能眼镜呈现的图像的真实感和立体感。所述方法包括：确定所述智能眼镜的工作模式；在所述智能眼镜的工作模式为夜间模式时，获取所述智能眼镜采集的深度图像；根据所述深度图像中每个像素点的深度信息，在三维空间中建立三维模型；分别在所述智能眼镜的左眼显示屏及右眼显示屏显示针对所述三维模型的左眼视角图像及右眼视角图像。

【技术实现步骤摘要】
【国外来华专利技术】图像显示方法、智能眼镜及存储介质
本公开涉及电子
，具体涉及一种图像显示方法、智能眼镜及存储介质。
技术介绍
盲和视力损伤是世界范围内的严重公共卫生、社会和经济问题，据统计，在我国，每年会出现新盲人大约45万，低视力135万，即约每分钟就会出现1个盲人，3个低视力患者。全世界每年有700万人成为盲人，2100万人成为低视力。目前，低视力患者可以通过配戴低视力视觉增强眼镜等设备对视觉进行辅助。低视力视觉增强眼镜可以对环境的图像进行拍摄，然后将拍摄的图像复制到左右眼显示屏上，进而辅助低视力患者观看环境中的物体。然而在实际生活中，人的左右眼存在视差，这样的显示方式可能使得大脑立体视觉混乱、产生重影，甚至人眼会产生不适感。
技术实现思路
为克服相关技术中存在的问题，本公开提供一种图像显示方法、智能眼镜及存储介质，用于提升智能眼镜呈现的图像的真实感和立体感。根据本公开实施例的第一方面，提供一种图像显示方法，应用于智能眼镜，包括：确定所述智能眼镜的工作模式；在所述智能眼镜的工作模式为夜间模式时，获取所述智能眼镜采集的深度图像；根据所述深度图像中每个像素点的深度信息，在三维空间中建立三维模型；分别在所述智能眼镜的左眼显示屏及右眼显示屏显示针对所述三维模型的左眼视角图像及右眼视角图像。根据本公开实施例的第二方面，提供一种智能眼镜，包括：左眼显示屏；右眼显示屏；深度摄像头，用于采集深度图像；处理器，与所述左眼显示屏、所述右眼显示屏及所述深度摄像头均相连，用于确定所述智能眼镜的工作模式；在所述智能眼镜的工作模式为夜间模式时，获取所述深度摄像头采集的深度图像；根据所述深度图像中每个像素点的深度信息，在三维空间中建立三维模型；分别在所述左眼显示屏及所述右眼显示屏显示针对所述三维模型的左眼视角图像及右眼视角图像。根据本公开实施例的第三方面，提供一种计算机程序产品，所述计算机程序产品包含能够由可编程的装置执行的计算机程序，所述计算机程序具有当由所述可编程的装置执行时用于执行上述第一方面中所述的方法的代码部分。根据本公开实施例的第四方面，提供一种非临时性计算机可读存储介质，所述非临时性计算机可读存储介质中包括一个或多个程序，所述一个或多个程序用于执行上述第一方面所述的方法。本公开的实施例提供的技术方案可以包括以下有益效果：本公开实施例中，智能眼镜在夜间工作模式下，可以采集深度图像，然后根据深度信息在三维空间中建立三维模型，再针对建立的三维模型，确定分别适应与左眼视角和右眼视角的左眼视角图像和右眼视角图像，最后分别显示到智能眼镜左眼显示屏和右眼显示屏上。这样，最终呈现的图像是适应于左右眼视点分别观看同一三维模型时的图像，用户观看到的物体与真实的物体是重合的，提升了观看体验，且不会导致立体视觉混乱以及重影现象，智能眼镜呈现的图像的真实感和立体感较好。附图说明附图是用来提供对本公开的进一步理解，并且构成说明书的一部分，与下面的具体实施方式一起用于解释本公开，但并不构成对本公开的限制。在附图中：图1是根据一示例性实施例示出的深度图像显示的示意图；图2是根据一示例性实施例示出的一种图像显示方法的流程图；图3是根据一示例性实施例示出的一种智能眼镜的示意图；图4是根据一示例性实施例示出的一种智能眼镜的另一示意图；图5是根据一示例性实施例示出的一种遮光镜片的示意图；图6是根据一示例性实施例示出的一种关闭智能眼镜的示意图；图7是根据一示例性实施例示出的一种智能眼镜的结构示意图；图8是根据一示例性实施例示出的一种智能眼镜的另一结构示意图。具体实施方式以下结合附图对本公开的具体实施方式进行详细说明。应当理解的是，此处所描述的具体实施方式仅用于说明和解释本公开，并不用于限制本公开。另外，本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。首先请参见图1，图1是根据一示例性实施例示出的深度图像显示的示意图。分别通过人眼的左眼视点与通过右眼视点观看同一物体时，得到的图像会有所不同，假设深度摄像头的位置和朝向与左眼接近，那么将深度摄像头采集的深度图(图1所示的图像1)直接送给左眼对应的显示屏，通过左眼看到的图像与真实场景的物体便可基本对应上。但是，如果将同样的深度图(图1所示的图像2)送到右眼对应的显示屏上显示，那么就可能出现图像与真实物体对应不上的情况，左右眼的两张深度图上所有物体的视差量是相同的，这样做会导致以下问题：一、前后位置的深度不匹配问题。因为在实际生活中，人的左右眼看远近不同物体时是存在不同的双目视差的，而上述处理中左右眼看到的深度图相同，即深度图上的所有物体的视差量均相等，这样会导致深度图上的所有物体在大脑中合成后都处在一个固定平面上，从而导致双眼看到的深度图上的物体深度与真实场景中的物体深度不符合，三维纵深感不同，进而导致大脑立体视觉混乱。二、左右位置的重影问题。因为在实际生活中，左右眼看到的远近物体的遮挡程度不同。若左右眼看到的是同样一张深度图，则难免会导致左眼或者右眼看到的深度图中的物体边缘与实际物体边缘不重合，从而产生重影，造成视觉混乱。考虑到上述问题，本公开提出一种图像显示方法，请参考图2，图2是根据一示例性实施例示出的一种应用于智能眼镜的图像显示方法的流程图。如图2所示，该方法包括以下步骤。步骤S11：确定智能眼镜的工作模式。步骤S12：在智能眼镜的工作模式为夜间模式时，获取智能眼镜采集的深度图像。步骤S13：根据深度图像中每个像素点的深度信息，在三维空间中建立三维模型。步骤S14：分别在智能眼镜的左眼显示屏及右眼显示屏显示针对三维模型的左眼视角图像及右眼视角图像。智能眼镜的工作模式可以由用户自行选择，包括夜间模式和日间模式，用户可以通过设置在智能眼镜上的按钮(旋钮)或者语音等方式来选择工作模式，本公开实施例对此不作限定。在智能眼镜的工作模式为夜间模式时，可以通过深度摄像头采集深度图像，对于深度摄像头设置在智能眼镜的哪个位置，本公开实施例不作限定，比如可以设置在左眼显示屏上方，或者设置在右眼显示屏上方，等等。深度图中每个像素点都有深度信息(比如通过像素点的灰度值来表征)，深度信息可以用来表示空间中的点到摄像头的距离。那么可以根据每个像素点的深度信息，在真实的三维空间中构建对应的三维模型。然后再通过建立的三维模型找到从智能眼镜左眼的视点及右眼的视点分别观看三维模型时的左眼视角图像及右眼视角图像，最后分别显示到左眼显示屏和右眼显示屏中。请继续参见图1，比如深度摄像头的位置和朝向与左眼接近，基于深度信息建立三维模型后，得到的左眼视角图像为图像1，右眼视角图像为图像3，再通过左右显示屏分别进行显示。此时用户看到的图像便可以避免前后位置深度不匹配及重影的问题。可选的，根据深度图像中每个像素点的深度信息，在三维空间中建立三维模型，可以是根据深度图像中每个像素点的深度信息，将深度图像映射到三维空间中，以得到三维模型。也就是说在建立三维模型时，可以是将深度图像按照各像素点的深度信息投影到三维空间中，那么得到的左眼视角图像和右眼视角图像均为灰度图，这样，可以为配戴智能眼镜的用户直接呈现灰度图，辅助用户观看物体。可选的，还可以在获取深本文档来自技高网...

【技术保护点】
一种图像显示方法，应用于智能眼镜，其特征在于，包括：确定所述智能眼镜的工作模式；在所述智能眼镜的工作模式为夜间模式时，获取所述智能眼镜采集的深度图像；根据所述深度图像中每个像素点的深度信息，在三维空间中建立三维模型；分别在所述智能眼镜的左眼显示屏及右眼显示屏显示针对所述三维模型的左眼视角图像及右眼视角图像。

【技术特征摘要】
【国外来华专利技术】1.一种图像显示方法，应用于智能眼镜，其特征在于，包括：确定所述智能眼镜的工作模式；在所述智能眼镜的工作模式为夜间模式时，获取所述智能眼镜采集的深度图像；根据所述深度图像中每个像素点的深度信息，在三维空间中建立三维模型；分别在所述智能眼镜的左眼显示屏及右眼显示屏显示针对所述三维模型的左眼视角图像及右眼视角图像。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：在获取所述深度图像的同时，获取所述智能眼镜采集的目标图像，所述目标图像为红外图像或可见光图像；根据所述深度图像中每个像素点的深度信息，在三维空间中建立三维模型，包括：根据所述深度图像中的像素点与所述目标图像中的像素点之间的对应关系，给所述目标图像中每个像素点添加深度信息；将携带有深度信息的目标图像映射到所述三维空间中，以得到所述三维模型。3.根据权利要求2所述的方法，其特征在于，在将携带有深度信息的目标图像映射到所述三维空间中之前，还包括：根据所述目标图像中每个像素点携带的深度信息，对所述目标图像中像素点的亮度进行调整，以使得所述目标图像中各像素点的亮度随深度的增加而减小。4.根据权利要求1所述的方法，其特征在于，根据所述深度图像中每个像素点的深度信息，在三维空间中建立三维模型，包括；根据所述深度图像中每个像素点的深度信息，将所述深度图像映射到所述三维空间中，以得到所述三维模型。5.根据权利要求1所述的方法，其特征在于，在分别在所述智能眼镜的左眼显示屏及右眼显示屏显示针对所述三维模型的左眼视角图像及右眼视角图像之前，还包括：根据DIBR算法，确定所述左眼视角图像和所述右眼视角图像。6.根据权利要求1所述的方法，其特征在于，在确定所述智能眼镜的工作模式之后，还包括：在所述智能眼镜的工作模式为日间模式时，获取设置在所述智能眼镜上的长焦摄像头采集的彩色图像；按照预设比例对所述彩色图像进行放大；获取放大后的彩色图像和所述放大后的彩色图像的副本；将所述放大后的彩色图像和所述副本按照预设的位置分别显示在所述左眼显示屏及所述右眼显示屏上，以使得所述所述左眼显示屏及所述右眼显示屏显示的图像的视差为零。7.根据权利要求6所述的方法，其特征在于，所述方法还包括：在所述智能眼镜的工作模式为日间模式时，根据环境光照度对所述左眼显示屏及所述右眼显示屏的透光率进行调整，以使得所述左眼显示屏及所述右眼显示屏的透光率随环境光照度的增强而减小。8.根据权利要求6所述的方法，其特征在于，所述方法还包括：对所述彩色图像进行识别，以获取交通状况信息；根据所述交通状况信息，输出第一提示信息，以提示配戴所述智能眼镜的用户当前的交通状况。9.根据权利要求1-8任一所述的方法，其特征在于，所述方法还包括：通过设置在所述智能眼镜上的障碍物检测传感器，对所述智能眼镜周围的障碍物进行检测；在检测到障碍物时输出第二提示信息，以向配戴所述智能眼镜的用户指示障碍物的位置。10.一种智能眼镜，其特征在于，包括：左眼显示屏；右眼显示屏；深度摄像头，用于采集深度图像；处理器，与所述左眼显示屏、所述右眼显示屏及所述深度摄像头均相连，用于确定所述智能眼镜的工作模式；在所述智能眼镜的工作模式为夜间模式时，获取所述深度摄像头采集的深度图像；根据所述深度图像中每个像素点的深度信息，在三维空间中建...

【专利技术属性】
技术研发人员：崔华坤，廉士国，王恺，
申请(专利权)人：深圳前海达闼云端智能科技有限公司，
类型：发明
国别省市：广东,44