图像显示装置制造方法及图纸

提供图像显示装置，即使用户移动而位置对准产生偏差，也能够简单地校正该位置。图像显示装置(100)具有校正处理部(102)，该校正处理部(102)在由于用户(U)移动而产生的所述用户的视野中的图像数据(G)与钢筋骨架(T)产生了偏差时，校正该偏差。该校正处理部(102)使用存储部(103)所存储的设计数据和用户(U)相对于钢筋骨架(T)的自身位置，从部分部件即钢筋骨架(T1)等中取得作为校正处理用的基准位置的坐标修改位置(S)。校正处理部(102)根据该一个坐标修改位置(S)，进行图像数据(G)的位置对准，由此进行校正。由此进行校正。由此进行校正。

【技术实现步骤摘要】
【国外来华专利技术】图像显示装置


[0001]本专利技术涉及利用了混合现实空间(MR：Mixed Reality)的图像显示装置。

技术介绍

[0002]公知有使用MR技术将图像与位于现实空间的物体进行合成的技术。例如，在专利文献1中，记载了现实空间图像与虚拟空间图像的重叠描绘。
[0003]现有技术文献
[0004]专利文献
[0005]专利文献1：日本特开2008
‑
293209号公报

技术实现思路

[0006]专利技术要解决的课题
[0007]近年来，考虑使用MR技术，在建筑物的施工阶段，将装饰材料等的图像数据仅与骨架、仅与梁等结构物进行合成，由此想要使成品的掌握变得容易。
[0008]但是，难以在结构物上进行该图像数据的位置对准的情况较多。一般来说，考虑在结构物上附加标记，由此进行图像数据的位置对准。在该情况下，当佩戴了MR护目镜等能够观察MR空间的护目镜的用户移动而远离附加有该标记的结构物时，结构物与图像数据之间的位置对准产生偏差。因此，也考虑在结构物的各处配置与该位置对应的标记，但设定与位置对应的标记以及该配置非常费事。
[0009]因此，为了解决上述的课题，其目的在于提供一种能够简单地校正混合空间中用户移动时所产生的位置对准的偏差的图像显示装置。
[0010]用于解决课题的手段
[0011]本专利技术的图像显示装置针对位于现实空间的合成对象物合成预定的图像并进行显示，其中，该图像显示装置具有：存储部，其存储表示所述合成对象物中的各部分的位置关系的设计数据；显示部，其生成将所述合成对象物的一个部分作为基准位置合成预定的图像而得的合成图像并进行显示；以及校正部，其校正由于所述用户移动而产生的所述预定的图像与所述合成对象物的偏差，所述校正部使用所述设计数据和所述用户相对于所述合成对象物的自身位置，取得所述合成对象物的所述一个部分中的作为校正处理用的基准位置的坐标修改位置，根据该坐标修改位置，校正所述预定的图像的合成位置。
[0012]专利技术效果
[0013]根据本专利技术，能够简单地校正混合现实空间中的位置对准的偏差。
附图说明
[0014]图1示出本实施方式中的结构物即钢筋骨架T的图、以及在该钢筋骨架T中合成了柱的图像数据G的图。
[0015]图2是关于坐标修改位置的说明图。
[0016]图3是示出使用了坐标修改位置的合成处理的说明图。
[0017]图4是示出图像显示装置100的功能结构的框图。
[0018]图5是示出图像显示装置100的动作的流程图。
[0019]图6是示出处理S101的详细动作的流程图。
[0020]图7是示出校正处理部102中的自身位置姿势估计结果的选定处理以及校正处理的详细处理的流程图。
[0021]图8是示出从坐标修改位置候选中选定要利用的坐标修改位置的处理的流程图。
[0022]图9是示出校正处理部102中的坐标修改位置的偏差的计算处理的流程图。
[0023]图10是示出计算图像数据G与钢筋骨架T的位置偏差时的其他处理的流程图。
[0024]图11是示出本公开的一个实施方式的图像显示装置100的硬件结构的一例的图。
具体实施方式
[0025]参照附图说明本专利技术的实施方式。在可能的情况下，对相同的部分标注相同的标号，并省略重复的说明。
[0026]图1是示出本实施方式中的结构物即钢筋骨架T的图、以及在该钢筋骨架T中合成了表示是柱的装饰材料的图像数据G的图。图1示出佩戴了本实施方式的图像显示装置即MR护目镜的用户能够看到的图。图1的(a)是示出装饰材料的图像数据G的合成前的、存在于现实空间的结构物即钢筋骨架T的图。在图1中，钢筋骨架T由钢筋骨架T～Tn构成。在图1中，示出了直到钢筋骨架T9，但当然也可以存在直到钢筋骨架Tn(n为自然数)。关于图像数据Gn(n为自然数，例如为G1～G9)也同样如此。
[0027]另外，在本实施方式中，将柱设为了钢筋骨架，但柱不限于钢筋骨架，也可以是混凝土柱，还可以是被装饰材料覆盖的状态。作为合成并进行显示的图像，不限于装饰材料，也可以是管道、布线或家具等。
[0028]图1的(b)是通过用于装饰的装饰材料覆盖实际的钢筋骨架T的状态的图，是在混合现实空间中将表示该装饰材料的图像数据G与钢筋骨架T进行了合成时的图。表示钢筋骨架T1～Tn的位置以及大小等的设计数据、以及装饰材料的图像数据G1～Gn是预先存储的。图像数据G是由图像数据G1～Gn构成的三维图像。多个装饰材料的图像数据G1～Gn是结合钢筋骨架T1～Tn的位置而预先进行关联的。
[0029]后述的与坐标修改位置对应的修改对应部位被设定在各图像数据Gn中。例如，当使装饰材料的图像数据G1的修改对应部位与被设定在钢筋骨架T1上的坐标修改位置进行位置对准而合成时，其他装饰材料的图像数据G2也被位置对准在对应的钢筋骨架T2上。其他装饰材料的图像数据Gn等也同样地被位置对准在对应的钢筋骨架Tn上。但是，存在图像数据G2等的修改对应部位与被设定在钢筋骨架T2等上的坐标修改位置的位置对准包含误差的情况。
[0030]在钢筋骨架T与装饰材料的图像数据G最初被位置对准时，例如通过在钢筋骨架T1的预定位置上附加图像数据G1用的初始标记来进行位置对准。由于图像数据G2等构成了位置关系被相互固定的图像数据G，因此针对其他钢筋骨架T2等，也自动地进行位置对准。另外，由于图像数据G是三维图像，因此该图像数据G根据用户观察钢筋骨架T的方向而旋转。这样，根据初始标记进行位置对准，由此能够进行全部钢筋骨架T1～Tn与图像数据G1～Gn
的位置对准。
[0031]对位置对准进一步详细地进行说明。图2说明坐标修改位置。在图1中，仅说明了进行位置对准。如图2所示，钢筋骨架T1在4个方向上分别具有面。装饰材料的图像数据G1以一个该面为基准进行位置对准。坐标修改位置表示钢筋骨架T的位置与装饰材料的图像数据G的位置对准用的基准位置。
[0032]图2的(a)是从钢筋骨架T的上表面观察的示意图。在本实施方式中，该钢筋骨架T是将定位轴线的交点C置于其中心的棱柱，其截面为四边形。这里，着眼于钢筋骨架T1。在钢筋骨架T1的各个面上设定有坐标修改位置S11～S14。
[0033]当用户一边观察钢筋骨架T1一边移动时，其他钢筋骨架T2～T4(装饰材料K2～K4)与装饰材料的图像数据G2～G4的位置产生偏差。因此，在产生了偏差的情况下，需要修改该偏差。即，当用户一边观察钢筋骨架T1一边移动时，最初设定的基准标记从视野消失，由此不能再进行基于该基准标记的位置角度的跟踪，进行基于SLAM的自身位置姿势估计的跟踪。该自身位置姿势估计由于移动而产生估计误差。
[0034]在本实施方式中，确定距用户最近的钢筋骨架T及其坐标修改位置S，由此确定作为修改基准的钢筋骨架T。
[0035]图2的(b)是示出佩戴了作为MR护目镜的图像显示本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种图像显示装置，其针对位于现实空间的合成对象物合成预定的图像并进行显示，其中，该图像显示装置具有：存储部，其存储表示所述合成对象物的各部分的位置关系的设计数据；显示部，其生成将所述合成对象物的一个部分作为基准位置合成预定的图像而得的合成图像并进行显示；以及校正部，其校正由于用户移动而产生的所述预定的图像与所述合成对象物的偏差，所述校正部使用所述设计数据和所述用户相对于所述合成对象物的自身位置，取得所述合成对象物的所述一个部分中的作为校正处理用的基准位置的坐标修改位置，所述校正部根据该坐标修改位置，校正所述预定的图像的合成位置。2.根据权利要求1所述的图像显示装置，其中，所述校正部在取得作为校正处理用的基准位置的坐标修改位置时，取得多个坐标修改位置，所述校正部从所述多个坐标修改位置中选择对于所述用户的自身位置满足预定条件的一个坐标修改位置。3.根据权利要求1或2所述的图像显示装置，其中，所述预定的图像表示被配置为覆盖所述合成对象物的覆盖部件。4.根据权利要求2所述的图像显示装置，其中，所述校正部...

【专利技术属性】
技术研发人员：山崎健生，田村隆幸，高谷友贵，
申请(专利权)人：株式会社NTT都科摩，
类型：发明
国别省市：