对象显示装置以及对象显示方法制造方法及图纸

在对象显示装置中，在当前无法检测到标记的情况下，显示补充部取得检测到标记的过去与当前之间的显示部显示的现实空间的图像的变化。由于假想对象是根据现实空间的图像中的标记的位置以及形状进行显示的，所以假想对象的显示位置以及显示方式也应该随着现实空间的图像的变化而变化。因此，显示决定部（6）基于该过去与当前之间的现实空间的图像的变化，根据该过去的假想对象的显示位置以及显示方式决定当前的假想对象的显示位置以及显示方式。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及。
技术介绍
近年来，已开发并提供了使用AR(Augmented Reality:增强现实)技术的服务。例如，公知有这样的技术:从由移动终端的照相机取得的现实空间的图像中检测预定的标记，将与该标记对应的假想对象重叠在现实空间的图像上而显示在显示器上。另外，公知有这样的终端装置:根据时间上不同的多个图像来估计摄影部与摄像对象的空间位置关系的变化，基于此变化进行显示部中的滚动等的控制。(例如，参照专利文献I)。现有技术文献专利文献专利文献1:日本特开2010-67090号公报
技术实现思路
专利技术要解决的问题在根据从由照相机等捕捉到的现实空间的图像中检测出的标记来在现实空间的图像上重叠显示假想对象的技术中，当由于某些原因而不能检测到标记时，无法显示假想对象。另一方面，当拍摄存在于现实空间中的标记时，即使是在标记存在于摄像范围内的情况下，有时也会由于照相机与标记的位置关系、以及亮度等摄像条件的各种原因而无法检测到标记。因此，本专利技术是鉴于上述问题点而完成的，其目的是提供即使在由于某些原因而无法检测到现实空间中的标记的情况下也能够显示假想对象的。用于解决问题的手段为了解决上述课题，本专利技术一实施方式的对象显示装置从由摄像单元取得的现实空间的图像中检测预定的标记，将与该标记对应的假想对象重叠在现实空间的图像上而显示在显示单元上,该对象显示装置具备:显示补充单元，其在无法检测到标记时，取得检测到标记的过去与当前之间的显示单元显示的现实空间的图像的变化；以及显示决定单元，其根据由显示补充单元取得的显示单元显示的现实空间的图像的变化来决定假想对象的显示位置以及显示方式，显示单元根据由显示决定单元决定的假想对象的显示位置以及显示方式，将假想对象重叠在现实空间的图像上进行显示。另外，为了解决上述课题，本专利技术一实施方式的对象显示方法是对象显示装置中的对象显示方法，该对象显示装置从由摄像单元取得的现实空间的图像中检测预定的标记，将与该标记对应的假想对象重叠在现实空间的图像上而显示在显示单元上，该对象显示方法包括以下步骤:显示补充步骤，在无法检测到标记时，取得检测到标记的过去与当前之间的显示单元显示的现实空间的图像的变化；显示决定步骤，根据在显示补充步骤中取得的显示单元显示的现实空间的图像的变化决定假想对象的显示位置以及显示方式；以及显示步骤，根据在显示决定步骤中决定的假想对象的显示位置以及显示方式，将假想对象重叠在现实空间的图像上进行显示。根据本专利技术一实施方式的，在当前无法检测到标记的情况下，取得检测到标记的过去与当前之间的显示单元显示的现实空间的图像的变化。因为假想对象是根据现实空间的图像中的标记的位置以及形状进行显示的，所以假想对象的显示位置以及显示方式也应该随着现实空间的图像变化而变化。因此，基于该过去与当前之间的现实空间的图像的变化，可根据该过去的假想对象的显示位置以及显示方式来决定当前的假想对象的显示位置以及显示方式。因此，即使在由于某些原因而无法检测到现实空间中的标记的情况下也能够显示假想对象。另外，在本专利技术一实施方式的对象显示装置中，也可以是，显示补充单元具备特定形状识别单元，该特定形状识别单元从现实空间的图像中提取特定形状，识别检测到标记的过去与当前之间的特定形状的形状以及位置的变化，显示补充单元根据由特定形状识别单元识别出的特定形状的形状以及位置的变化，取得显示单元显示的现实空间的图像的变化。在此情况下，根据从现实空间的图像中提取的特定形状的形状以及位置的变化来取得显示单元显示的现实空间的图像的变化。特定形状的形状以及位置的变化与用于决定假想对象的显示位置以及显示方式的标记同样是从现实空间的图像中提取的，所以能够高精度地取得显示单元显示的现实空间的图像的变化。因此，可根据过去的假想对象的显示位置以及显示方式来高精度地决定当前的显示位置以及显示方式。另外，用于取得显示单元显示的现实空间的图像的变化的特定形状可采用预定的物体的形状。在此情况下，能够可靠地取得显示单元显示的现实空间的图像的变化。另外，用于取得显示单元显示的现实空间的图像的变化的特定形状可采用预定的图形和线以及具有同一颜色的一定区域中的至少任意一个。在此情况下，特定形状识别单元的特定形状的提取概率得到提高。另外，在本专利技术一实施方式的对象显示装置中，也可以是，显示补充单元具备终端姿势检测单元，该终端姿势检测单元检测对象显示装置的位置以及摄像方向的变化，显示决定单元在显示补充单元无法取得显示单元显示的图像的变化时，根据由终端姿势检测单元识别出的对象显示装置的位置以及摄像方向的变化，决定假想对象的显示位置以及显示方式。在此情况下，根据对象显示装置的位置以及摄像方向的变化来决定假想对象的显示位置以及显示方式，所以在无法从现实空间的图像中提取特定形状的情况下，也能够进行假想对象的显示。另外，在本专利技术一实施方式的对象显示装置中，也可以是，显示决定单元根据显示单元显示的现实空间的图像的变化，估计显示单元显示的现实空间的图像中的标记的位置以及形状，根据所估计的标记的位置以及形状决定假想对象的显示位置以及显示方式。在此情况下，根据显示单元显示的现实空间的图像的变化来估计作为用于决定假想对象的显示位置以及显示方式的依据的标记在现实空间中的位置以及形状，因此能够适当地决定假想对象的当前的显示位置以及显示方式。专利技术效果在AR技术中，能够高精度且可靠地确定移动终端的位置。附图说明图1是示出对象显示装置的功能性结构的框图。图2是对象显示装置的硬件框图。图3是示出显示部中的基于标记的假想对象的显示例、以及在未检测到标记时不能显示假想对象的状态的例子的图。图4是示出标记数据库的结构以及所存储的数据的例子的图。图5是对象数据库的结构以及所存储的数据的例子的图。图6是示出对象显示装置与标记的位置关系的示意图、以及示出处于该位置关系时的显示图像的例子的图。图7是示出基于显示部中的特定形状变化以及标记形状变化的假想对象的显示例的图。图8是示出每帧的对象显示装置的姿势数据、标记位置以及估计标记形状的数据的例子的图。图9是示出对象显示方法的处理内容的流程图。具体实施例方式参照附图来说明本专利技术的的实施方式。另外，在可能的情况下，对相同的部分标注相同的标号，省略重复的说明。图1是示出对象显示装置I的功能性结构的框图。本实施方式的对象显示装置I从由摄像单元取得的现实空间的图像中检测预定的标记，将与该标记对应的假想对象重叠在现实空间的图像上而显示在显示单元上。标记是存在于现实空间的预定的标识。对象显示装置I预先存储与标记对应地显示的假想对象的数据。对象显示装置I从现实空间的图像中检测到标记后，根据该标记的形状(偏斜)以及大小来决定假想对象的显示位置以及显示方式，按照所决定的显示位置以及显示方式将假想对象重叠在现实空间的图像上而显示在显示器上。此外，对象显示装置I也可以通过通信来取得假想对象的数据。假想对象是用于通过重叠显示在现实空间的图像上来向对象显示装置I的用户提供各种信息的假想的对象。如图2所示，对象显示装置I在功能上具备:照相机2 (摄像单元)、图像取得部3、标记识别部4、标记数据库5、显示决定部6 (显示决定单元)、对象数据库7、显示部8 (显示单元)以及显示补充部9 (显示本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】...

【专利技术属性】
技术研发人员：森永康夫，太田学，
申请(专利权)人：株式会社NTT都科摩，
类型：
国别省市：