用于显示3D增强现实导航信息的方法和装置制造方法及图纸

本公开提供了用于显示3D增强现实导航信息的方法和装置。该装置包括通信模块、存储器以及处理器。该处理器被配置为经由通信模块获取交通工具的位置信息，确定是否获取与位置信息相对应的HD地图信息；当获取了HD地图信息时，通过使用HD地图信息，以增强现实显示3D导航信息；以及当未获取HD地图信息时，以增强现实显示2D导航信息，其中显示3D导航信息包括通过使用HD地图信息，将用于驾驶引导的虚拟3D图形信息空间匹配到现实世界的实际物体并被显示在实际物体上，其中显示2D导航信息包括用于驾驶引导的虚拟2D图形信息被平面匹配到现实世界中的实际物体并显示在实际物体上。各种其他实施例也是可能的。

【技术实现步骤摘要】
用于显示3D增强现实导航信息的方法和装置
本公开涉及用于显示3D增强现实导航信息的方法和装置。更具体地，本公开涉及基于高分辨率地图的可用性来显示3D增强现实信息。
技术介绍
导航系统可以基于在运输工具领域中的诸如汽车或飞机运输工具的位置信息，提供驾驶所必需的各种类型的信息。导航系统可以提供二维信息，并且，最近，已经开始提供三维信息。为了提供三维导航信息，可能需要获取的地图的分辨率变高。一种具有高分辨率以及能够被实时获取的新地图，可以被称为高分辨率(HD)地图(或动态地图)。导航系统可以通过将增强现实(AR)应用于HD地图来提供导航信息。提供抬头显示器以将增强现实应用于导航信息。抬头显示器可以是在诸如汽车或飞机的运输工具中增加用户(例如，驾驶员)安全和便利的电子装置。驾驶员在看向前方时可以看到由抬头显示器提供的多种类型的信息(例如，导航信息以及路线信息)。例如，在高速行驶的交通工具中，驾驶员可以转动他或她的眼睛1～3秒钟来观察仪表盘或导航单元。交通工具以每小时100公里(km/h)的速度行驶时，仅两秒就移动55米(m)，因此，驾驶员可能在没有任何准备的情况下，被暴露于不可预测的情形中。抬头显示器将信息显示在运输工具的挡风玻璃上，因此，驾驶员可以使他或她的视线向前，从而可以降低发生事故的风险。上述信息作为背景信息呈现仅用于辅助理解本公开。关于上述内容中的任何一项是否可以用作本公开的现有技术，没有确定，也没有断言。
技术实现思路
抬头显示器通过使用高分辨率(HD)地图(或HD地图信息)可以二维地或三维地提供导航信息。所述抬头显示器可以通过使用HD地图信息来识别道路空间，因此可以在实际驾驶环境中以增强现实来显示导航信息。然而，当以三维提供导航信息时，根据用户眼睛的位置或交通工具的位置，在覆盖导航信息的位置上可能产生误差。本公开的各方面至少解决上述的问题和/或缺点并且提供至少如下的优点。因此，本公开的一个方面，提供了一种基于交通工具的位置信息、用户的注视信息、或车道信息，以三维增强现实或二维适当地提供导航信息的方法和装置。另外的方面将在下面的描述中被部分地阐述，并且部分地从在描述中是显而易见的，或者可以通过实践所呈现的实施例而获知。根据本公开的一个方面，提供一种电子装置。所述电子装置包括：通信模块、存储器以及处理器，其中，所述处理器被配置为：经由所述通信模块获取交通工具的位置信息，确定是否获取与位置信息相对应的HD地图信息；并且，当获取了所述HD地图信息时，通过使用所述HD地图信息以增强现实显示三维导航信息，并且，当未获取所述HD地图信息时，以增强现实显示二维导航信息，其中，所述三维导航信息是如下信息：在该信息中，通过使用所述HD地图信息，将用于驾驶引导的虚拟三维图形信息空间匹配到现实世界中的实际物体并且显示在现实世界中的实际物体上，并且，其中，所述二维导航信息是如下信息：在该信息中，用于驾驶的虚拟二维图形信息被平面匹配到现实世界中的实际物体并且被显示在现实世界中的实际物体上。根据本公开的另一方面，提供一种操作方法。所述方法包括从电子装置的通信模块获取交通工具的位置信息，确定是否获得与所述位置信息相对应的HD地图信息；当获取了所述HD地图信息时，通过所述HD地图信息，以增强现实显示三维导航信息，并且，当未获取所述HD地图信息时，以增强现实显示二维导航信息，其中，所述三维导航信息是如下信息：在该信息中，通过使用所述HD地图信息，将用于驾驶引导的虚拟三维图形信息空间匹配到现实世界中的实际物体并且显示在现实世界中的实际物体上，并且，所述二维导航信息是如下信息：在该信息中，用于驾驶引导的虚拟二维图形信息被平面匹配到现实世界中的实际物体并被显示在现实世界中的实际物体上。根据各个实施例，可以通过基于交通工具的位置信息、用户的注视信息或车道信息，以三维增强现实或以二维适当地提供导航信息，来增强用户的便利性。根据各个实施例，可以通过使用HD地图信息来检测物体(例如地势、地形特征)、计算物体与交通工具之间的距离(或深度)、通过使用设置在交通工具内部/外部的传感器来检测注视信息或车道信息，并且校正所计算的距离的误差，来提供三维增强现实(AR)导航信息。根据各个实施例，可以基于关于驾驶员的注视的信息，调整被显示在物体上的三维导航信息，从而在正确位置覆盖并显示导航信息。根据下面结合附图公开了本公开的各种实施例的具体实施方式，本公开的其他方面、优点和显著特征对于本领域技术人员而言是显而易见的。附图说明根据以下结合附图的描述，本公开的某些实施例的上述和其他方面、特征和优点将变得更加明显，其中：图1是根据本公开的实施例的网络环境中的电子装置的框图；图2A示出了根据本公开的实施例的电子装置中包括的元件被设置在交通工具中的示例；图2B示出了根据本公开的实施例的电子装置中包括的元件被设置在交通工具中的示例；图2C示出了根据本公开的实施例的电子装置的显示类型；图2D示出了根据本公开的实施例的电子装置的显示类型；图3示出了根据本公开的实施例的电子装置的功能处理模块的示例；图4A是示出了根据本公开的实施例的电子装置的操作方法的流程图；图4B是示出了根据本公开的实施例的电子装置的操作方法的流程图；图5A示出了根据本公开的实施例的基于用户注视的导航信息显示点；图5B示出了根据本公开的实施例的基于用户注视的导航信息显示点；图5C示出了根据本公开的实施例的基于用户注视的导航信息显示点；图5D示出了根据本公开的实施例的基于用户注视的导航信息显示点；图6A示出了根据本公开的实施例的导航信息的示例；图6B示出了根据本公开的实施例的导航信息的示例；图6C示出了根据本公开的实施例的导航信息的示例；图6D示出了根据本公开的实施例的导航信息的示例；图7是示出了根据本公开的实施例的由电子装置显示三维(3D)导航信息的方法的流程图；图8A是示出了根据本公开的实施例的第一3D导航信息的示例；图8B是示出了根据本公开的实施例的第一二维(2D)导航信息的示例；图9A示出了根据本公开的实施例的第二3D导航信息；图9B示出了根据本公开的实施例的第三3DAR导航信息；图10A示出了根据本公开的实施例的第四3D导航信息；图10B示出了根据本公开的实施例的3D与2D导航信息；图11是示出了根据本公开的实施例的由电子装置显示3D与2D导航信息的方法的流程图；并且图12是示出了根据本公开的实施例的由电子装置显示导航信息的方法的流程图。在所有附图中，相似的附图标记将被理解为指代相似的部件、组件和结构。具体实施方式提供以下参考附图的描述，以帮助全面理解本公开的由权利要求及其等同限定的各种实施例。它包括各种具体细节以帮助理解，但是这些具体细节仅被认为是示例性的。因此，本领域普通技术人员将认识到，在不脱本文档来自技高网...

【技术保护点】
1.一种电子装置，所述电子装置包括：/n通信模块；/n存储器；以及/n处理器，其中，所述处理器被配置为：/n经由所述通信模块获取交通工具的位置信息，/n确定是否获取了与所述位置信息相对应的高分辨率(HD)地图信息；/n当获取了所述HD地图信息时，通过使用所述HD地图信息，以增强现实显示三维(3D)导航信息；以及/n当未获取所述HD地图信息时，以增强现实显示二维(2D)导航信息，/n其中，显示所述3D导航信息包括通过使用所述HD地图信息，用于驾驶引导的虚拟3D图形信息被空间匹配到现实世界中的实际物体并显示在所述实际物体上，并且/n其中，显示所述2D导航信息包括用于驾驶引导的虚拟2D图形信息被平面匹配到现实世界中的实际物体并显示在所述实际物体上。/n

【技术特征摘要】
20200102 KR 10-2020-00003291.一种电子装置，所述电子装置包括：
通信模块；
存储器；以及
处理器，其中，所述处理器被配置为：
经由所述通信模块获取交通工具的位置信息，
确定是否获取了与所述位置信息相对应的高分辨率(HD)地图信息；
当获取了所述HD地图信息时，通过使用所述HD地图信息，以增强现实显示三维(3D)导航信息；以及
当未获取所述HD地图信息时，以增强现实显示二维(2D)导航信息，
其中，显示所述3D导航信息包括通过使用所述HD地图信息，用于驾驶引导的虚拟3D图形信息被空间匹配到现实世界中的实际物体并显示在所述实际物体上，并且
其中，显示所述2D导航信息包括用于驾驶引导的虚拟2D图形信息被平面匹配到现实世界中的实际物体并显示在所述实际物体上。


2.根据权利要求1所述的电子装置，还包括：
第一相机，所述第一相机被配置为捕获交通工具中的驾驶员图像，
其中，所述处理器还被配置为：
通过使用由所述第一相机捕获的所述驾驶员图像来识别所述驾驶员的注视信息，并且，
基于所述注视信息控制显示所述3D导航信息或所述2D导航信息。


3.根据权利要求2所述的电子装置，还包括：
第二相机，所述第二相机被配置为捕获所述交通工具前方的图像，
其中，所述处理器被配置为：
通过使用由所述第二相机捕获的所述交通工具前方的所述图像来识别所述交通工具的车道信息；并且
基于所述注视信息和所述车道信息，控制显示所述三维导航信息或所述二维导航信息。


4.根据权利要求1所述的电子装置，其中，所述处理器被配置为：
从所述通信模块获取关于所述交通工具与所述交通工具附近的实际物体之间的距离的信息，所述距离通过设置在所述交通工具中的传感器测量；并且
通过使用所述HD地图信息以及关于所述距离的信息，将所述三维导航信息匹配到并显示于现实世界中的所述实际物体上。


5.根据权利要求1所述的电子装置，其中，所述处理器被配置为：当获取了所述HD地图信息时，基于所述车道信息，确定是否辨别出车道；
当所述车道被辨别出时，通过使用所述HD地图信息显示所述三维导航信息；并且
当所述车道未被辨别出时，使用所述HD地图信息，显示3D与2D导航信息，其中，根据距离不同地显示三维导航信息以及二维导航信息。


6.根据权利要求3所述的电子装置，其中，所述处理器被配置为：
基于所述车道信息或所述注视信息计算用于显示所述3D导航信息的角度和距离，
基于所计算的角度和距离，确定所述3D导航信息的显示位置，并且
基于所述显示位置，将所述3D导航信息显示在现实世界的实...

【专利技术属性】
技术研发人员：金度亨，林镛埈，孔填阿，金奎成，卢在姸，刘注莲，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：韩国;KR