基于增强现实的智能界面制造技术

一种由终端装置实现的交互方法包括：获取空间的界面底层，所述界面底层包括具有方向信息和距离信息的测量图纸；建立外部设备和标记在所述界面底层上的、与所述外部设备相对应的标识之间的映射关系，所述标识指示所述外部设备的物理位置；从所述外部设备接收所述外部设备的属性信息；获取所述空间中的实景图像；确定所述实景图像中包含了目标对象；根据所述外部设备的所述属性信息，确定所述目标对象的目标呈现信息；以及显示所述实景图像以及所述目标呈现信息，所述目标演示信息是作为增强现实(AR)标记添加到所述实景图像中的与所述目标对象相对应的图像位置处。对象相对应的图像位置处。对象相对应的图像位置处。

【技术实现步骤摘要】
基于增强现实的智能界面


[0001]本公开内容涉及交互控制领域，并且更具体地涉及一种基于增强现实的智能界面。

技术介绍

[0002]目前，在人们生活和工作的方方面面几乎都需要用到测距设备进行线路、区域的测量和规划，如在建筑领域、道路工程领域、交通领域、管线的铺设、园林风景领域等。较为常用的测距设备为激光测距仪和测距轮。
[0003]现有技术中揭示了多种测距设备结构。例如，CN201420143325.0公开的一种激光测距仪的内外光路切换系统，用于实现激光测距仪内、外光路两种工作状态的切换。切换系统包括激光源、半透射半反射镜、反射镜、遮光板、电机及电机驱动电路。所述遮光板固定于电机转动轴上，并由电机驱动选择位于第一遮光位置或第二遮光位置。所述激光源发出的激光经半透射半反射镜分成测距光和内部参考光两路光波。所述测距光透过半透射半反射镜形成外光路。所述内部参考光经反射镜反射后形成内光路。又如CN201410152898.4公开了一种单光路激光测距系统，用于对被测目标物的距离进行准确测定，该测距系统包括微处理器、信号发生器、激光发生器、光电二极管及混频器。所述微处理器控制所述信号发生器输出两组脉冲信号。一组脉冲信号被分别送至激光发生器和光电二极管，形成外光路用的光电混频信号。另一组脉冲信号被送至混频器，混频产生测距用的参考信号，微处理器同步采样光电混频信号和参考信号，并计算出两者的电压值，从而精确得到测量的距离值。
[0004]但是，由以上公开的技术方案可知，传统的测距设备只能进行直线测距，均不能实现以下功能：1、不能既测量曲线路径又测量直线距离，不能生成测量图纸，不能指导标示打线和打点；2、不能对标识点添加备注说明文字、图片、语音、视频等；3、不能将测绘路径与实景拍摄照片进行合成成像，以提升直观度；4、不能监测与控制地图上智能设备的状态。这些问题对测距设备的应用起到很大程度的限制。

技术实现思路

[0005]本专利技术的目的在于克服现有技术的缺陷，提供一种交互方法，将增强现实(Augmented Reality，AR)标记与实景合成，在测量图纸的基础上完成与感兴趣对象的各种交互功能，比如状态读取，标识说明，设备控制，测量等。
[0006]根据本公开内容，提出了一种由终端装置实现的交互方法。所述方法包括：获取空间的界面底层，所述界面底层包括具有方向信息和距离信息的测量图纸；建立外部设备和标记在所述界面底层上的、与所述外部设备相对应的标识之间的映射关系，所述标识指示所述外部设备的物理位置；从所述外部设备接收所述外部设备的属性信息；获取所述空间中的实景图像；确定所述实景图像中包含了目标对象；根据所述外部设备的所述属性信息，确定所述目标对象的目标呈现信息；以及在与所述终端装置相对应的显示屏上，显示所述实景图像以及所述目标呈现信息，所述目标呈现信息作为增强现实(AR)标记添加到所述实
景图像中的与所述目标对象相对应的图像位置处。
[0007]根据本公开内容，还提出了一种终端装置，包括存储器和与所述存储器配合的处理器。所述处理器被配置为执行以下操作：获取空间的界面底层，所述界面底层包括具有方向信息和距离信息的测量图纸；建立外部设备和标记在所述界面底层上的、与所述外部设备相对应的标识之间的映射关系，所述标识指示所述外部设备的物理位置；从所述外部设备接收所述外部设备的属性信息；获取所述空间中的实景图像；确定所述实景图像中包含了目标对象；根据所述外部设备的所述属性信息，确定所述目标对象的目标呈现信息；以及在与所述终端装置相对应的显示屏上，显示所述实景图像以及所述目标呈现信息，所述目标呈现信息作为增强现实(AR)标记添加到所述实景图像中的与所述目标对象相对应的图像位置处。
[0008]本专利技术的有益效果是：1、本专利技术可以根据测量图纸和真实场景的图片在实景中迅速准确的定位和识别感兴趣对象。2、本专利技术的AR标记能为用户直观地提供场景中一个或多个感兴趣对象的各种信息。3、本专利技术的AR标记能实现与实景中的设备的UI控制，用户无需单独打开与所述设备对应的控制器(如物理开关，遥控器，手机APP等)来进行监测和控制。4、本专利技术可以用来测距，用户可以选择场景中的任意两个标记物体进行距离测量，并通过AR标记直观显示测量结果。5、本专利技术可以用来指导用户进行物品摆放，比如根据家居设计图在实景图像中叠加显示AR标记，用所述AR标记表明所设计的家具摆放处。6、本专利技术通过AR标识增加时间维度信息，比如标注实景中显示的感兴趣对象的故障发生时间。7、本专利技术可以监控不在实景图中的其他对象，所述其他对象与实景中某个对象是属于同一组别的，显示实景中对象的AR标记时可包括同组其他对象的状态。8、本专利技术可以将测量图纸信息与实景图像叠加，在实景图像中通过AR标记看到立体的地图信息。
附图说明
[0009]为了更清楚地示出本公开内容的技术方案，下面简要描述在所公开的实施例的描述中使用的附图。下面描述的附图仅仅是本公开内容的一些实施例。其它附图可以由本领域普通技术人员根据这些附图得出而无需创造性的努力，并且可以包括在本公开内容中。
[0010]图1是本公开内容的智能交互界面的界面底层的形成过程的示意图；
[0011]图2是本公开内容的智能交互界面的原理示意图。
[0012]图3是根据本公开内容的示例性实施例的基于增强现实的交互方法的流程图。
[0013]图4A是根据本公开内容的示例性实施例示出的一个真实场景示意图。
[0014]图4B是根据本公开内容的示例性实施例示出的用于显示的实景图像。
[0015]图5是根据本公开内容的示例性实施例示出校对界面的示意图。
[0016]图6是根据本公开内容的示例性实施例示出具有AR标记的图像的示意图。
[0017]图7是根据本公开内容的示例性实施例示出具有AR标记的另一个图像的示意图。
[0018]图8是根据本公开内容的示例性实施例示出应用场景的示意图。
[0019]图9是根据本公开内容的一些实施例的示例性计算机系统的框图。
[0020]通过以下参考附图的详细描述，本公开内容的其他特点、特征、优点和益处将变得更加明显。
具体实施方式
[0021]下面将结合本专利技术的附图，对本专利技术实施例的技术方案进行清楚、完整的描述。下面参考附图详细描述本公开内容的实施例。附图中的相同或相似的附图标记表示相同或相似的元件或在整个说明书中具有相同或相似的功能的元件。将理解的是，所描述的实施例是本公开内容的一些而不是所有实施例。由本领域的普通技术人员基于所描述的实施例而无需创造性努力所获得的其他实施例应当落入本公开内容的范围内。
[0022]参考图1和图2，本公开内容公开了一种智能交互界面，并且该智能交互界面使得终端装置能够实现对外部设备的控制、监测等功能性交互。外部设备可以是家用电器，也可以是工业设备。智能交互界面主要包括界面底层、多个标识和终端装置。界面底层由测量形成的轨迹绘制而成，优选为电子地图，该电子地图是由测距形成的本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种由终端装置实现的交互方法，其特征在于，所述方法包括：获取空间的界面底层，所述界面底层包括具有方向信息和距离信息的测量图纸；建立外部设备和标记在所述界面底层上的、与所述外部设备相对应的标识之间的映射关系，所述标识指示所述外部设备的物理位置；从所述外部设备接收所述外部设备的属性信息；获取所述空间中的实景图像；确定所述实景图像中包含了目标对象；根据所述外部设备的所述属性信息，确定所述目标对象的目标呈现信息；以及在与所述终端装置相对应的显示屏上，显示所述实景图像以及所述目标呈现信息，所述目标呈现信息作为增强现实(AR)标记添加到所述实景图像中的与所述目标对象相对应的图像位置处。2.根据权利要求1所述的方法，其特征在于，所述目标对象为所述外部设备或与所述外部设备相对应的感兴趣对象。3.根据权利要求1所述的方法，其特征在于：所述外部设备的所述属性信息包括所述外部设备的特征信息、所述外部设备的当前状态信息、所述外部设备的记录信息或所述外部设备的控制选项中的至少一项。4.根据权利要求1所述的方法，其特征在于，在显示所述AR标记后，所述方法进一步包括：在检测到用户对所述AR标记的操作时生成所述控制指令；以及向所述外部设备发送所述控制指令，所述控制指令用于指示所述外部设备执行相应的动作。5.根据权利要求4所述的方法，其特征在于，所述AR标记显示为与所述外部设备的一个或多个控制选项相对应的一个或多个用户界面(UI)项，且所述生成所述控制指令包括：在检测到对具有一个或多个子项的UI项执行用户操作时，更新所述AR标记，以显示所述一个或多个子项；以及在检测到对与所述外部设备的控制选项相对应的UI项或子项执行用户操作时，根据所述用户操作和所述控制选项生成所述控制指令。6.根据权利要求4所述的方法，其特征在于，在发送所述控制指令后，所述方法进一步包括：接收与所述控制指令相对应的反馈信息；根据所述反馈消息，更新所述目标呈现信息；以及将更新后的所述目标呈现信息显示为更新后的所述AR标记。7.根据权利要求6所述的方法，其特征在于：当所述控制指令对应于调整所述外部设备的参数的写入动作时，所述反馈消息包括指示相应动作是否执行成功的执行结果；以及当所述控制指令对应于查询所述外部设备的记录的读取动作时，所述反馈消息包括查询结果。8.根据权利要求1所述的方法，其特征在于，所述目标对象为所述外部设备，且所述确定所述实景图像中包含了目标对象包括：
执行校准过程，并确定所述终端装置在所述界面底层中的位置和方向；根据所述终端装置在所述界面底层中的所述位置以及所述外部设备在所述界面底层中的所述标识，确定所述外部设备相对于所述终端装置的目标位置；以及如果所述终端装置的所述方向指示所述终端装置面向所述外部设备，则确定所述外部设备位于所述实景图像中。9.根据权利要求8所述的方法，其特征在于，所述执行校准过程包括：在所述实景图像上的预设图像位置处显示校准图标，所述校准图标指示校准对象的预期轮廓；以及在确定所述实景图像中包括的所述校准对象与所述预期轮廓相匹配时，确定所述终端装置位于所述界面底层上具有参考方向的参考点处。10.根据权利要求9所述的方法，其特征在于：在使用测距设备生成所述测量图纸的过程中，记录所述参考点的位置和所述参考方向、所述校准图标、以及所述预设图像位置。11.根据权利要求8所述的方法，其特征在于，所述方法进一步包括：根据所述界面底层中的所述外部设备的标识和所述终...

【专利技术属性】
技术研发人员：石昕，邢星，
申请(专利权)人：美国西北仪器公司，
类型：发明
国别省市：