信息处理装置、信息处理方法和程序制造方法及图纸

本技术涉及可以更准确地指示在显示区域外的位置的一种信息处理装置、信息处理方法和程序。显示区域外位置指定单元指定在图像显示单元的显示区域外的位置，并且绘图/声音控制单元在AR对象朝指定位置移动时控制所述AR对象的声音从声音输出单元的输出。可以将本技术应用于可穿戴式计算机，例如具有用于左眼和右眼的一对图像显示单元的眼镜型装置。

【技术实现步骤摘要】
【国外来华专利技术】
本技术涉及一种信息处理装置、信息处理方法和程序，并且特定而言涉及可以更准确地指示在显示区域外的位置的一种信息处理装置、信息处理方法和程序。
技术介绍
近年来，已开展对使用者可以在行走时携带的可穿戴式计算机的研究(例如，专利文献1)。作为此种可穿戴式计算机，可以安装在头部的如头戴式显示器(其将称为HMD)等的显示装置是已知的。另外，一种向使用者呈现覆盖在实空间的对象上的虚拟内容的被称为增强现实(AR)的技术已获得关注(例如，例如，参考专利文献2)。通过使用这种AR技术，例如，使用者透过透射型显示器所看到的场景的信息(AR对象)可以根据使用者的当前位置显示为覆盖在某个地方上。此外，专利文献3公开了一种基于使用者的当前位置和根据到目的地的路径所指定的方向来控制音源的再现的技术。引用列表专利文献专利文献1：JP2011-28763A专利文献2：JP2013-92964A专利文献3：JP2003-028663A
技术实现思路
技术问题由于在显示器(例如，如上文所描述的HMD)中仅可以显示有限的区域，所以存在其中难以在所述窄显示区域中既显示在使用者视野内的信息又显示在使用者视野外的信息的情况。因此，尽管存在使用图像来显示信息是直观的和明确的事实，但在显示器上还是会显示有限的区域且因此对显示所有信息存在限制。另外，在上文所描述的专利文献3中，因为耳机使用两个通道进行再现，所以使用r>者可以辨识直线的左右区域；但是，当使用头相关查函数(HRTF)来表达立体声音时，存在在使用声音进行位置显示的情况下错误地辨识前后侧的可能性。其中一个原因是，当HRTF不属于使用者时，听到声音的方式不同于使用者用他或她的耳朵正常地听到自然世界的声音的方式，并且因此使用者可能不能够捕捉到声音的位置。另外，即使HRTF属于使用者，听到的方式由于耳机或执行再现的再现装置的性质而仍可不同。如上文所描述，需要指示在具有有限显示区域的显示装置的显示区域外的信息，但即使使用专利文献3中所公开的声音再现方法，仍不可能准确地指示在显示区域外的信息。本技术考虑到以上情况，并且旨在更准确地指示在显示区域外的位置。问题的解决方案根据本技术的方面，一种信息处理装置包含：图像显示单元，其被配置成显示图像；声音输出单元，其被配置成输出声音；位置指定单元，其被配置成指定在图像显示单元的显示区域外的位置；以及控制单元，其被配置成在将增强现实(AR)对象朝指定位置移动时控制所述AR对象的声音的输出。控制单元可在AR对象穿过图像显示单元的显示区域时使显示AR对象的图像。可存在多个AR对象。控制单元在AR对象朝指定位置移动时致使AR对象在使用者的两边移动。控制单元可致使多个AR对象的声音以不同的定时进行输出。信息处理装置可进一步包含检测单元，所述检测单元被配置成检测图像显示单元的方向。控制单元可致使AR对象根据图像显示单元的方向来移动。控制单元可致使AR对象以在显示区域中显示AR对象的图像的方式来移动。控制单元可致使AR对象的声音的输出位置与在显示区域内的AR对象的图像的显示位置相同。控制单元可致使AR对象的声音的输出位置与在显示区域内的AR对象的图像的显示位置不同。信息处理装置可为具有用于左眼和右眼的一对图像显示单元的眼镜型装置。信息处理装置可为独立装置或构成一个装置的内部块。根据本技术的方面的信息处理方法和程序是与根据本技术的方面的信息处理装置相容的信息处理方法和程序。在根据本技术的方面的信息处理装置、信息处理方法和程序中，指定在图像显示单元的显示区域外的位置，并且在AR对象朝指定位置移动时控制AR对象的声音从声音输出单元的输出。本专利技术的有利效应根据本技术的方面，有可能更准确地指示在显示区域外的位置。应注意，本文中所公开的效应未必为限制性的，并且可展现本公开中所公开的任何效应。附图说明[图1]图1是示出AR系统的实施例的配置的框图，本技术被应用于所述AR系统。[图2]图2是示出控制箱和HMD的详细配置的框图。[图3]图3是示出智能手机的详细配置的框图。[图4]图4是示出AR服务器的详细配置的框图。[图5]图5是示出AR处理单元的详细配置的框图。[图6]图6是描述由构成AR系统的每个装置执行的处理的流程图。[图7]图7是描述AR对象通信处理1的流程图。[图8]图8是示出AR系统的圆柱坐标系的图式。[图9]图9是示出在圆柱坐标系中显示区域和AR对象之间的关系的图式。[图10]图10是示出在圆柱坐标系中显示区域和加入声音的AR对象之间的关系的图式。[图11]图11是描述加入声音的AR对象通信处理1的流程图。[图12]图12是示出对目标的位置的指定的示例的图式。[图13]图13是示出设定加入声音的AR对象的轨迹的示例的图式。[图14]图14是示出声音对象图像的显示示例的图式。[图15]图15是描述加入声音的AR对象通信处理2的流程图。[图16]图16是示出对目标的位置的指定的示例的图式。[图17]图17是示出设定加入声音的AR对象的轨迹的示例的图式。[图18]图18是示出声音对象图像的显示示例的图式。[图19]图19是描述AR对象通信处理2的流程图。[图20]图20是示出声音对象图像的显示示例的图式。[图21]图21是示出声音对象的双向移动的示例的图式。[图22]图22是示出AR对象的图像绘图路径的示例的图式。[图23]图23是示出VPT的概念的图式。[图24]图24是示出VPT的信号处理的示例的图式。[图25]图25是用于描述AR对象的第一声路的图式。[图26]图26是用于描述基本声音处理的图式。[图27]图27是用于描述对双向移动的声音处理的图式。[图28]图28是用于描述在中间位置处的声音处理的图式。[图29]图29是用于描述对连续声音的声音处理的图式。[图30]图30是用于描述AR对象的第二声路的图式。[图31]图31是用于描述基本声音处理的图式。[图32]图32是示出AR系统的特定操作示例1的图式。[图33]图33是示出AR系统的特定操作示例2的图式。具体实施方式下文将参考图式来描述本技术的实施例。<AR系统的配置>图1是示出AR系统的实施例的配置的框图，本技术被应用于所述AR系统。AR系统1使用增强现实(AR)技术向穿戴有头戴式显示器(HMD)20的使用者呈现关...

【技术保护点】
一种信息处理装置，其包括：图像显示单元，其被配置成显示图像；声音输出单元，其被配置成输出声音；位置指定单元，其被配置成指定在所述图像显示单元的显示区域外的位置；以及控制单元，其被配置成在将增强现实(AR)对象朝指定的所述位置移动时控制所述AR对象的声音的输出。

【技术特征摘要】
【国外来华专利技术】2013.11.05 JP 2013-2291211.一种信息处理装置，其包括：
图像显示单元，其被配置成显示图像；
声音输出单元，其被配置成输出声音；
位置指定单元，其被配置成指定在所述图像显示单元的显示区域外的位置；以及
控制单元，其被配置成在将增强现实(AR)对象朝指定的所述位置移动时控制所述AR对
象的声音的输出。
2.根据权利要求1所述的信息处理装置，其中所述控制单元在所述AR对象穿过所述图
像显示单元的所述显示区域时使所述AR对象的图像进行显示。
3.根据权利要求2所述的信息处理装置，其中存在多个AR对象。
4.根据权利要求3所述的信息处理装置，其中所述控制单元在所述AR对象朝指定的所
述位置移动时使所述AR对象在使用者的两边移动。
5.根据权利要求4所述的信息处理装置，其中所述控制单元使所述多个AR对象的声音
以不同的定时进行输出。
6.根据权利要求2所述的信息处理装置，其进一步包括：
检测单元，其被配置成检测所述图像显示单元的方向，
其中所述控制单元使所述AR对象根据所...

【专利技术属性】
技术研发人员：中川俊之，石川博隆，金间泰树，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本;JP