头戴式显示器、显示控制方法以及程序技术

本发明专利技术提供一种头戴式显示器，能够改变在显示单元上显示的视频中的相机的光轴附近的成像目标的图像的显示的位置；一种显示控制方法；以及一种程序。相机控制单元(62)控制相机的光轴的方向以捕获位于用户眼睛前方的显示单元前方的图像。显示控制单元(70)在显示单元上显示从由相机捕获的图像中切出并构成与相机的光轴的方向对应的部分的部分图像。

Head mounted display, display control method and program

The present invention provides a head mounted display capable of changing the display position of the image of the imaging target near the optical axis of the camera displayed on the display unit, a display control method and a program. The camera control unit (62) controls the direction of the optical axis of the camera to capture an image in front of the display unit located in front of the user's eye. The display control unit (70) displays part images from the image captured by the camera and constitutes a part corresponding to the direction of the optical axis of the camera on the display unit.

【技术实现步骤摘要】
【国外来华专利技术】头戴式显示器、显示控制方法以及程序
本专利技术涉及头戴式显示器、显示控制方法以及程序。
技术介绍
例如，如在专利文献1到3中所描述的，存在用于视觉欣赏而穿戴在用户的头部的头戴式显示器(HMD)。一些HMD配备有捕获HMD的显示部分前方的图像的相机，使得用户将使用正在显示的捕获图像来识别在显示部分之前正在发生的事情。还存在一种用于视线跟踪的技术，允许使用虹膜检测来跟踪用户的视线方向。引用列表专利文献[PTL1]JP2004-205711A[PTL2]JP2012-2889A[PTL3]JP2013-210588A
技术实现思路
技术问题在相机捕获的图像中，目标越接近相机的光轴，目标显现的越清楚。因此，如果使得靠近相机的光轴的目标的图像显现在用户的视线的方向上的位置，那么用户能够观察到目标的清晰图像。然而，对于现有的HMD，靠近相机的光轴的目标的图像以固定在显示部分上出现的图像的中心的方式显现。如果用户的视线偏离在显示部分上显示的图像的中心，那么妨碍用户观看清晰的图像。本专利技术是基于上述情况而完成。因此，本专利技术的目的是提供一种头戴式显示器、显示控制方法以及程序，用于在显示部分上显示的图像内改变相机的光轴附近的目标图像的位置。对于问题的解决方案为了解决上述问题，根据本专利技术，提供了一种由用户穿戴的头戴式显示器，该头戴式显示器包括：显示部分，配置为设置在用户的眼睛的前方；相机，配置为捕获显示部分的前方的图像；相机控制部分，配置为控制相机的光轴的方向；以及显示控制部分，配置为使得显示部分显示从由相机捕获的图像中切出的部分图像，该部分图像构成与相机的光轴方向对应的部分。本专利技术的一个实施例可以进一步包括配置为检测用户的视线的方向的检测部分。相机控制部分根据用户的视线方向来控制相机的光轴方向。在本实施例中，如果相机的光轴方向改变，那么从中切出部分图像的捕获图像中的位置可能在与相机的改变的光轴方向相反的方向上改变。可替代地，显示控制部分可以以使得相机的光轴上的目标的图像显示在用户的视线方向上的位置的方式执行控制。同样在本实施例中，如果由相机捕获的图像包括预定的图像，则图像控制部分可以开始控制相机的光轴方向。根据本专利技术，提供了一种显示控制方法，包括：控制安装到由用户穿戴的头戴式显示器上的相机的光轴的方向的步骤；以及使设置在用户的眼睛的前方的显示部分显示从由相机捕获的图像中切出的部分图像的步骤，该部分图像构成与相机的光轴方向对应的部分。根据本专利技术，提供了一种程序，用于使得计算机执行：控制安装到由用户穿戴的头戴式显示器上的相机的光轴的方向的过程；以及使得设置在用户的眼睛的前方的显示部分显示从由相机捕获的图像中切出的部分图像的过程，该部分图像构成与相机的光轴方向对应的部分。附图说明图1是描绘体现本专利技术的图像显示系统的典型的整体配置的示意图。图2是描绘体现本专利技术的头戴式显示器的典型配置的框图。图3是描绘布置在真实空间中的椅子和填充玩具的示意图。图4是描绘典型的捕获图像的示意图。图5是描绘典型的部分图像的示意图。图6是描绘另一个典型的捕获图像的示意图。图7是描绘另一个典型的部分图像的示意图。图8是描绘另一个典型的捕获图像的示意图。图9是描绘另一个典型的部分图像的示意图。图10是描绘由体现本专利技术的头戴式显示器实现的典型功能的功能框图。图11是描绘由体现本专利技术的头戴式显示器执行的典型流程的流程图。具体实施方式下面参考附图描述本专利技术的一些实施例。图1是描绘体现本专利技术的图像显示系统10的典型的整体配置的示意图。图2是描绘体现本专利技术的头戴式显示器(HMD)12的典型配置的框图。如图1所示，体现本专利技术的图像显示系统10包括HMD12、娱乐设备14、中继设备16、显示单元18、相机/麦克风单元20以及控制器22。例如，如图2所示，体现本专利技术的HMD12包括控制部分30、存储部分32、输入/输出部分34、显示部分36、音频输出部分38、传感器部分40、相机部分42以及驱动部分44。例如，控制部分30可以是诸如根据安装在HMD12中的程序进行操作的微处理器的程控设备。存储部分32可以是诸如只读存储器(ROM)或随机存取存储器(RAM)的存储元件。存储部分32存储在其中由控制部分30执行的程序。输入/输出部分34是诸如高分辨率多媒体接口(HDMI，注册商标)端口或通用串行总线(USB)端口的输入/输出端口。显示部分是36是诸如液晶显示器或有机电致发光(EL)显示器的显示单元。显示部分36显示由娱乐设备14生成的或者由相机部分42捕获的图像。例如，在本实施例中的显示部分36被配置为通过呈现右眼用图像和左眼用图像来显示三维图像。可替代地，显示部分36可以被配置为只显示二维图像，而不呈现三维图像。配置作为例如扬声器的音频输出部分38输出通常由娱乐设备14生成的音频数据表示的声音。例如，本实施例中的传感器部分40可以包括视线传感器40a、运动/旋转传感器40b以及穿戴/卸除传感器40c。例如，本实施例中的视线传感器40a可以是能够使用已知的虹膜检测技术，以预定帧速率(例如，以1/60秒的间隔)跟踪穿戴有HMD12的用户的视线方向的相机。例如，本实施例中的运动/旋转传感器40b可以是加速传感器或运动传感器。运动/旋转传感器40b测量HMD12的姿态、旋转量和行进距离，并以预定帧速率将该测量输出到控制部分30。基于该测量，控制部分30识别每单位时间的HMD12的行进距离和旋转量，即，HMD12的速度和角速度。例如，穿戴/卸除传感器40c可以是红外线传感器，其能够检测HMD12是穿戴在用户上或从用户上卸除。传感器部分40可以包括除了视线传感器40a、运动/旋转传感器40b以及穿戴/卸除传感器40c之外的传感器。例如，相机部分42可以是数字相机，其以预定帧速率捕获穿戴HMD12的用户周围的图像。在本实施例中，相机部分42被配置为立体相机，其包括用于捕获左眼用图像的左眼相机42a和用于捕获右眼用图像的右眼相机42b。例如，左眼相机42a和右眼相机42b每个被配置为包括透镜和成像器件。在本实施例中，如图1所示，左眼相机42a和右眼相机42b并排设置在显示部分36的上方以捕获显示部分36的前方的图像。同样在本实施例中，左眼相机42a和右眼相机42b被配置为根据需要改变其光轴的方向。例如，安装在每个相机上的透镜的光轴方向可以根据需要改变。驱动部分44可以是电动机装置。例如，驱动部分44依照从控制部分30接收的位置控制信号，改变在相机部分42中的左眼相机42a和右眼相机42b的方向。例如，本实施例中的娱乐设备14可以是诸如游戏机、数字多功能盘(DVD)播放器或蓝光(注册商标)播放器的计算机。例如，本实施例中的娱乐设备14经由中继设备16向HMD12或显示单元18输出表示通过执行存储的游戏程序或通过再现记录在光盘上的内容而生成的图像的视频信号。例如，本实施例中的显示单元18可以是液晶显示器，其显示由从娱乐设备14输出的视频信号表示的图像。本实施例中的相机/麦克风单元20包括将目标的捕获图像输出到娱乐装设备14的相机20a，以及从周围获取声音、将获取的声音转换为音频数据以及将音频数据输出到娱乐设备14的麦克风20b。本实施例中的相机20a构成立体相机。例如，HMD12和中继设备本文档来自技高网...

【技术保护点】
一种由用户穿戴的头戴式显示器，包括：显示部分，配置为设置在用户的眼睛的前方；相机，配置为捕获所述显示部分的前方的图像；相机控制部分，配置为控制所述相机的光轴的方向；以及显示控制部分，配置为使所述显示部分显示从由所述相机捕获的图像中切出的部分图像，所述部分图像构成与所述相机的光轴方向对应的部分。

【技术特征摘要】
【国外来华专利技术】2015.06.10 JP 2015-1177621.一种由用户穿戴的头戴式显示器，包括：显示部分，配置为设置在用户的眼睛的前方；相机，配置为捕获所述显示部分的前方的图像；相机控制部分，配置为控制所述相机的光轴的方向；以及显示控制部分，配置为使所述显示部分显示从由所述相机捕获的图像中切出的部分图像，所述部分图像构成与所述相机的光轴方向对应的部分。2.根据权利要求1所述的头戴式显示器，还包括：检测部分，配置为检测所述用户的视线的方向；其中所述相机控制部分根据所述用户的视线方向来控制所述相机的光轴方向。3.根据权利要求2所述的头戴式显示器，其中，如果所述相机的光轴方向改变，那么从中切出所述部分图像的捕获图像中的位置在与所述相机的改变的光轴方向相反的方向上改变。4.根据权利要求2所述...

【专利技术属性】
技术研发人员：中村勇一郎，
申请(专利权)人：索尼互动娱乐股份有限公司，
类型：发明
国别省市：日本,JP