头部佩戴型显示装置、控制其的方法及计算机程序制造方法及图纸

本发明专利技术提供头部佩戴型显示装置、控制其的方法及计算机程序。能实现考虑了眼的个人差异的增强现实感处理。利用者能够对虚像和外景进行视觉识别的头部佩戴型显示装置具备：使利用者对虚像进行视觉识别的图像显示部；偏移检测部，使得用于使利用者在三维空间上的任意的标准坐标上对记号进行视觉识别的虚像形成于图像显示部，求取表示利用者注视记号时的注视点的三维空间上的注视点坐标，对标准坐标与注视点坐标之间的偏移进行检测；以及增强现实感处理部，使得包含用于针对实际存在于现实世界的实际物体显示的、使用检测出的偏移而配置的虚拟物体的虚像形成于图像显示部。

【技术实现步骤摘要】

本专利技术涉及头部佩戴型显示装置。
技术介绍
公知有使用计算机对实际存在于现实世界的物体、即实际物体附加提示信息的被称为增强现实感(AR，AugmentedReality，扩展现实)的技术。在增强现实感中，也将附加性地显示于实际物体的信息称为“虚拟物体”。增强现实感的功能搭载于例如头戴式显示器(以下，也称为“HMD”或者“头部佩戴型显示装置”。)。HMD利用相机来拍摄外景，对拍摄所得的图像进行图像识别而生成或者获取虚拟物体。在佩戴着HMD的状态下利用者的视野不被遮挡的透过型HMD中，仅使利用者对包含虚拟物体的虚像进行视觉识别。利用者可以通过观察现实世界的实际物体与虚像所表示的虚拟物体这双方来体验增强现实感。在透过型的HMD中实现增强现实感的情况下，为了降低带给利用者的视觉上的不协调感，优选地使利用者要视觉识别的实际物体的位置与利用者要视觉识别的虚拟物体的位置对准。“位置”包含与利用者相距的距离以及利用者的视野内的水平方向和铅垂方向的位置。于是，以往，使利用者的左右眼对包含向利用者的左右眼赋予视差的虚拟物体的虚像进行视觉识别，据此将实际物体的位置与虚拟物体的位置对准。然而，人的眼是存在个人差异的。换言之，眼的位置、眼球的形状、眼中的与视觉相关的部位(例如，晶状体、视网膜，中央凹等)的位置等是因人而异的。因此，为了将实际物体的位置与虚拟物体的位置对准，使利用者的左右眼对包含向利用者的左右眼赋予视差的虚拟物体的虚像进行视觉识别，但即便如此，若利用者不同，则各利用者所视觉识别的虚拟物体的位置会产生偏移。专利文献1中记载了通过对摄像机所获取的患者的面部图像进行图像处理来非接触性地检测患者的视线方向的技术。(现有技术文献)(专利文献)专利文献1：日本特开2005-100366号公报专利文献2：日本特开2005-128901号公报
技术实现思路
为了降低在增强现实感处理中对利用者赋予的视觉上的不协调感，优选地，考虑眼的个人差异来确定虚拟物体的位置。关于这点，在专利文献1、2所记载的技术中，关于增强现实感处理中对眼的个人差异的考虑未作任何记载。因此，可以实现考虑了眼的个人差异的增强现实感处理的头部佩戴型显示装置被人们所期望。(用于解决问题的措施)本专利技术为了解决上述的问题的至少一部分而提出，可以实现为以下的方式。(1)根据本专利技术的一个方式，提供一种利用者可以对虚像和外景进行视觉识别的头部佩戴型显示装置。上述头部佩戴型显示装置具备：使所述利用者对所述虚像进行视觉识别的图像显示部；偏移检测部，使得用于使所述利用者在三维空间上的任意的标准坐标上对记号进行视觉识别的所述虚像形成于所述图像显示部，求取表示所述利用者注视所述记号时的注视点的所述三维空间上的注视点坐标，对所述标准坐标与所述注视点坐标之间的偏移进行检测；以及增强现实感处理部，使得包含用于针对实际存在于现实世界的实际物体显示的、使用检测出的所述偏移而配置的虚拟物体的所述虚像形成于所述图像显示部。根据上述方式的头部佩戴型显示装置，偏移检测部可以检测形成在三维空间上的记号的标准坐标与表示利用者注视记号时的注视点的注视点坐标之间的偏移。上述“偏移”是标准的利用者注视记号时的注视点与头部佩戴型显示装置的实际的利用者注视记号时的注视点之间的偏移，是因实际的利用者的眼的个人差异而产生的偏移。另外，增强现实感处理部使用由偏移检测部检测出的标准坐标与注视点坐标之间的偏移(即，因实际的利用者的眼的个人差异而产生的偏移)，来配置用于针对实际物体显示的虚拟物体。结果，能够提供可实现考虑了眼的个人差异的增强现实感处理的头部佩戴型显示装置。(2)在上述方式的头部佩戴型显示装置中，所述偏移检测部也可以：求取连结发送至所述图像显示部的图像数据内的所述记号的坐标和所述标准坐标的标准向量与连结发送至所述图像显示部的图像数据内的所述记号的坐标和所述注视点坐标的注视点向量之间的角度差，作为所述标准坐标与所述注视点坐标之间的偏移。根据上述方式的头部佩戴型显示装置，偏移检测部可以将标准坐标与注视点坐标之间的偏移定义为：可等同视为连结标准的利用者的眼的中央凹与晶状体的中心的向量的“标准向量”与可等同视为连结实际的利用者的眼的中央凹与晶状体的中心的向量的“注视点向量”之间的角度差。(3)在上述方式的头部佩戴型显示装置中，所述角度差也可以包含滚转角的角度差、俯仰角的角度差以及偏航角的角度差。根据上述方式的头部佩戴型显示装置，偏移检测部可以求取关于三维空间上的正交坐标系中的x轴、y轴、z轴的每一个的、标准向量与注视点向量的角度差。(4)在上述方式的头部佩戴型显示装置中，还可以具备获取与所述利用者的左右眼对应的至少2张外景图像的外景图像获取部，所述偏移检测部引导所述利用者指示所述记号，基于由所述外景图像获取部获取的所述至少2张外景图像内的所述指示，来求取所述注视点坐标。根据上述方式的头部佩戴型显示装置，偏移检测部可以使用由头部佩戴型显示装置中较广泛地搭载的外景图像获取部(例如，立体相机)获取的至少2张外景图像，来求取注视点坐标。(5)在上述方式的头部佩戴型显示装置中，还具备获取所述利用者的视野方向的外景图像的外景图像获取部和获取到任意的目标物为止的距离的距离获取部，所述偏移检测部可以引导所述利用者指示所述记号，基于由所述外景图像获取部获取的所述外景图像内的所述指示和由所述距离获取部获取的到所述目标物为止的距离，来求取所述注视点坐标。根据上述方式的头部佩戴型显示装置，偏移检测部在外景图像获取部仅可以获取1张外景图像的情况下，可以通过同时使用距离获取部所获取的到指示为止的距离来求取注视点坐标。(6)在上述方式的头部佩戴型显示装置中，所述偏移检测部针对具有不同的多个标准坐标的不同的多个记号反复执行：使所述利用者在所述标准坐标上对所述记号进行视觉识别、求取所述注视点坐标、检测所述标准坐标与所述注视点坐标之间的偏移的一系列的处理，所述增强现实感处理部在所述虚拟物体的配置中，也可以使用针对不同的多个标准坐标分别检测出的多个偏移。根据上述方式的头部佩戴型显示装置，由于增强现实感处理部使用针对不同的多个标准坐标分别检测出的多个偏移来配置虚拟物体，因此可以提高在增强现实感处理中考虑的眼的个人差异的精度。(7)在上述方式的头部佩戴型显示装置本文档来自技高网...

【技术保护点】
一种头部佩戴型显示装置，其能使利用者对虚像和外景进行视觉识别，具备：使所述利用者对所述虚像进行视觉识别的图像显示部；偏移检测部，其使得用于使所述利用者在三维空间上的任意的标准坐标上对记号进行视觉识别的所述虚像形成于所述图像显示部，求取表示所述利用者注视所述记号时的注视点的所述三维空间上的注视点坐标，对所述标准坐标与所述注视点坐标之间的偏移进行检测；以及增强现实感处理部，其使得包含虚拟物体的所述虚像形成于所述图像显示部，该虚拟物体用于针对实际存在于现实世界的实际物体显示且使用检测出的所述偏移而配置。

【技术特征摘要】
2014.11.17 JP 2014-2327501.一种头部佩戴型显示装置，其能使利用者对虚像和外景进行视觉
识别，具备：
使所述利用者对所述虚像进行视觉识别的图像显示部；
偏移检测部，其使得用于使所述利用者在三维空间上的任意的标准
坐标上对记号进行视觉识别的所述虚像形成于所述图像显示部，求取表
示所述利用者注视所述记号时的注视点的所述三维空间上的注视点坐
标，对所述标准坐标与所述注视点坐标之间的偏移进行检测；以及
增强现实感处理部，其使得包含虚拟物体的所述虚像形成于所述图
像显示部，该虚拟物体用于针对实际存在于现实世界的实际物体显示且
使用检测出的所述偏移而配置。
2.根据权利要求1所述的头部佩戴型显示装置，其中，
所述偏移检测部求取：连结发送至所述图像显示部的图像数据内的
所述记号的坐标和所述标准坐标的标准向量与连结发送至所述图像显
示部的图像数据内的所述记号的坐标和所述注视点坐标的注视点向量
之间的角度差，作为所述标准坐标与所述注视点坐标之间的偏移。
3.根据权利要求2所述的头部佩戴型显示装置，其中，
所述角度差包含滚转角的角度差、俯仰角的角度差以及偏航角的角
度差。
4.根据权利要求1至3中任意一项所述的头部佩戴型显示装置，
其中，
还具备：获取与所述利用者的左右眼对应的至少2张外景图像的外
景图像获取部，
所述偏移检测部引导所述利用者指示所述记号，基于由所述外景图
像获取部获取的所述至少2张外景图像内的所述指示来求取所述注视点
坐标。
5.根据权利要求1至3中任意一项所述的头部佩戴型显示装置，
其中，
还具备：
获取所述利用者的视野方向的外景图像的外景图像获取部；以及
获取到任意的目标物为止的距离的距离获取部，
所述偏移检测部引导所述利用者指示所述记号，基于由所述外景图
像获取部获取的所述外景图像内的所述指示和由所述距离获取部获取<...

【专利技术属性】
技术研发人员：矢岛健郎，
申请(专利权)人：精工爱普生株式会社，
类型：发明
国别省市：日本;JP