信息处理装置、信息处理方法和程序制造方法及图纸

根据该技术的信息处理装置包括控制单元。控制单元使头戴式显示器的第一显示单元以增强现实(AR)方式显示虚拟对象，检测关于虚拟对象的用户交互，所述交互通过交互装置执行，以及根据交互使交互装置的第二显示单元显示与虚拟对象有关的图像。虚拟对象有关的图像。虚拟对象有关的图像。

【技术实现步骤摘要】
【国外来华专利技术】信息处理装置、信息处理方法和程序


[0001]本技术涉及用于向用户呈现以增强现实(AR)方式显示的虚拟对象的技术。

技术介绍

[0002]近年来，用于在真实世界的真实空间中叠加和显示虚拟对象的增强现实(AR)技术已经变得广为人知。
[0003]例如，以下专利文献1描述了配备有AR技术的头戴式显示器。当在用户佩戴头戴式显示器的情况下以AR方式显示虚拟对象时，可以使用户在虚拟对象如同是存在于真实空间中的真实对象的那样来感知虚拟对象。
[0004][引用列表][0005][专利文献][0006]专利文献1：日本专利申请特许公开第2017
‑
120550号

技术实现思路

[0007][技术问题][0008]在这样的领域中，需要一种向用户呈现可以在头戴式显示器上显示的虚拟对象的新方法。
[0009]鉴于上述情况，提供了一种向用户呈现可以在头戴式显示器上显示的虚拟对象的新方法。
[0010][问题的解决方案][0011]根据本技术的信息处理装置包括：控制单元。控制单元使头戴式显示器的第一显示单元以增强现实(AR)方式显示虚拟对象，检测关于虚拟对象的用户交互，该交互通过交互装置执行，以及根据交互使交互装置的第二显示单元显示与虚拟对象有关的图像。
[0012]结果，可以提供一种向用户呈现可以在头戴式显示器上显示的虚拟对象的新方法。
[0013]在信息处理装置中，交互装置可以包括成像单元，以及控制单元可以将虚拟对象AR显示在第二显示单元上，并且检测由成像单元对AR显示的虚拟对象进行成像的操作作为交互。
[0014]在信息处理装置中，控制单元可以检测移动交互装置靠近虚拟对象的操作作为交互。
[0015]在信息处理装置中，移动操作可以是将交互装置保持在虚拟对象上方的操作。
[0016]在信息处理装置中，控制单元可以根据佩戴头戴式显示器的用户与AR显示的虚拟对象之间的距离来改变交互。
[0017]在信息处理装置中，在用户与虚拟对象之间的距离超过预定阈值的情况下，控制单元可以检测成像操作作为交互。
[0018]在信息处理装置中，在用户与虚拟对象之间的距离为预定阈值或更小的情况下，
控制单元可以检测移动操作作为交互。
[0019]在信息处理装置中，在用户与虚拟对象之间的距离为预定阈值或更小的情况下，控制单元可以检测移动操作和成像操作二者作为交互。
[0020]在信息处理装置中，控制单元可以在第一显示单元中与虚拟对象对应的位置处AR显示用于提醒用户交互的提醒用户界面。
[0021]在信息处理装置中，在多个提醒用户界面被AR显示在第一显示单元上并且提醒用户界面的显示区域与其他提醒用户界面的显示区域交叠的情况下，控制单元可以调整提醒用户界面的AR显示位置。
[0022]在信息处理装置中，在第一显示单元上AR显示的虚拟对象的显示区域与第二显示单元交叠的情况下，控制单元可以在与第二显示单元交叠的区域中隐藏虚拟对象。
[0023]在信息处理装置中，在第一显示单元上AR显示的虚拟对象的显示区域与第二显示单元交叠的情况下，控制单元可以隐藏整个对应的虚拟对象。
[0024]在信息处理装置中，在多个虚拟对象已经被AR显示在第二显示单元上的情况下，控制单元可以使第二显示单元AR显示用于使用户选择要成像的虚拟对象的选择用户界面。
[0025]在信息处理装置中，交互装置可以是可以被用户握持的移动装置或者可以被用户的手或手臂佩戴的可穿戴装置。
[0026]一种根据本技术的信息处理方法包括：使头戴式显示器的第一显示单元AR显示虚拟对象；检测关于虚拟对象的用户交互，该交互通过交互装置执行；以及根据交互使交互装置的第二显示单元显示与虚拟对象有关的图像。
[0027]一种根据本技术的程序使计算机执行以下处理：使头戴式显示器的第一显示单元AR显示虚拟对象；检测关于虚拟对象的用户交互，该交互通过交互装置执行；以及根据交互使交互装置的第二显示单元显示与虚拟对象有关的图像。
附图说明
[0028][图1]图1是示出根据本技术的第一实施方式的信息处理系统的图。
[0029][图2]图2是示出信息处理系统的内部配置的框图。
[0030][图3]图3是示出诸如由HMD进行的AR显示的处理的图。
[0031][图4]图4是示出当已经执行了关于虚拟对象的交互时的处理的流程图。
[0032][图5]图5是示出确定虚拟对象是否已经由智能电话进行成像的处理的流程图。
[0033][图6]图6是示出确定用户是否已经选择了成像模式的处理的流程图。
[0034][图7]图7是示出当虚拟对象根据需要在HMD中隐藏时的处理的流程图。
[0035][图8]图8是示出当已经针对虚拟对象AR显示了保持UI时的示例的图。
[0036][图9]图9是示出当已经针对虚拟对象AR显示了成像UI时的示例的图。
[0037][图10]图10是示出选择UI的示例的图。
[0038][图11]图11是示出在由HMD AR显示的虚拟对象和由智能电话AR显示的虚拟对象看起来不自然的情况下的示例的图。
[0039][图12]图12是示出在HMD的显示单元中虚拟对象与智能电话的显示单元之间的交叠区域已经被隐藏的情况下的示例的图。
[0040][图13]图13是示出在成像模式下已经隐藏了与智能电话的显示单元交叠的整个
虚拟对象的情况下的示例的图。
具体实施方式
[0041]在下文中，将参照附图描述根据本技术的实施方式。
[0042]<<第一实施方式>>
[0043]<整体构造和各个单元的构造>
[0044]图1是示出根据本技术的第一实施方式的信息处理系统100的图。图2是示出信息处理系统100的内部构造的框图。
[0045]如图1和图2中所示，根据第一实施方式的信息处理系统100包括HMD(头戴式显示器)10和智能电话(交互装置)20。
[0046]如图1和图2中所示，HMD 10包括HMD主体11、控制单元1、存储单元2、显示单元3、成像单元4、惯性传感器5、操作单元6和通信单元7。
[0047]HMD主体11附接至用户的头部并且被使用。HMD主体11包括前部12、设置在前部12的右侧上的右镜腿部分13、设置在前部12的左侧上的左镜腿部分14以及附接至前部12的下侧的玻璃部分15。
[0048]显示单元3是透视型显示单元并且被设置在玻璃部分15的表面上。显示单元3根据控制单元1的控制执行虚拟对象30的AR显示。注意，显示单元3可以是非透视型显示单元。在这种情况下，通过在显示单元3上显示以下图像来执行AR显示，该图像通过将虚拟对象30叠加在由成像单元4当前拍摄的图像上而获得。
[0049]成像单元4本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种信息处理装置，包括：控制单元，所述控制单元使头戴式显示器的第一显示单元以AR方式显示虚拟对象，检测关于所述虚拟对象的用户交互，所述交互通过交互装置执行，以及根据所述交互使所述交互装置的第二显示单元显示与所述虚拟对象有关的图像。2.根据权利要求1所述的信息处理装置，其中，所述交互装置包括成像单元，以及所述控制单元将所述虚拟对象AR显示在所述第二显示单元上，并且检测由所述成像单元对被AR显示的所述虚拟对象进行成像的操作作为所述交互。3.根据权利要求2所述的信息处理装置，其中，所述控制单元检测移动所述交互装置靠近所述虚拟对象的操作作为所述交互。4.根据权利要求3所述的信息处理装置，其中，所述移动操作是将所述交互装置保持在所述虚拟对象上方的操作。5.根据权利要求3所述的信息处理装置，其中，所述控制单元根据佩戴所述头戴式显示器的用户与所述AR显示的虚拟对象之间的距离来改变所述交互。6.根据权利要求5所述的信息处理装置，其中，在所述用户与所述虚拟对象之间的所述距离超过预定阈值的情况下，所述控制单元检测所述成像操作作为所述交互。7.根据权利要求6所述的信息处理装置，其中，在所述用户与所述虚拟对象之间的所述距离为所述预定阈值或更小的情况下，所述控制单元检测所述移动操作作为所述交互。8.根据权利要求6所述的信息处理装置，其中，在所述用户与所述虚拟对象之间的距离为所述预定阈值或更小的情况下，所述控制单元检测所述移动操作和所述成像操作二者作为所述交互。9.根据权利要求1所述的信息处理装置，其中，所述控制单元在所述第一显示单元中在与所述虚拟对象对应的位置处AR显示用于提醒所述用...

【专利技术属性】
技术研发人员：野村英祐，
申请(专利权)人：索尼集团公司，
类型：发明
国别省市：