车辆用AR显示装置及其动作方法制造方法及图纸

一种车辆用AR显示装置及其动作方法。本发明专利技术的车辆用AR显示装置包括：至少一个接口模块，接收包括车辆的前方图像的数据、包括车辆的当前位置的位置数据以及对于车辆的当前位置的地图数据；处理器，以与前方图像重叠的方式渲染AR图形界面，AR图形界面包括基于地图数据来显示车辆的行驶状态的第一AR对象和显示对于车辆的行驶状况的指引的第二AR对象；显示器，根据渲染，显示包括重叠了AR图形界面的前方图像的导航画面，处理器根据基于地图数据和车辆的当前位置来推测的车辆的下一个行驶状况，在导航画面上从第一AR对象选择性地分离第二AR对象或者将第二AR对象结合到第一AR对象来渲染AR图形界面。来渲染AR图形界面。来渲染AR图形界面。

【技术实现步骤摘要】
车辆用AR显示装置及其动作方法


[0001]本专利技术涉及与车辆联动的AR显示装置及其动作方法，更具体而言，涉及一种能够在车辆前方以AR形式预先显示车辆行驶期间预测的下一个行驶状况的指引的AR显示装置及其动作方法。

技术介绍

[0002]为了使用车辆的用户的安全和便利，在车辆设置有各种传感器和装置，车辆的功能逐渐多样化。这种车辆的功能可以分为用于提高驾驶员的便利的便利功能以及用于提高驾驶员和/或行人的安全的安全功能。
[0003]车辆的便利功能具有与驾驶员便利相关的研发动机，例如向车辆赋予信息娱乐(information+ente rtainment)功能，支持部分的自动驾驶功能或者帮助确保夜间视野或盲区等驾驶员的视野。例如，具有主动巡航控制(active cruise control，ACC)、智能停车系统(smartparking assist system，SPAS)、夜视(night vision，NV)、抬头显示器(head up display，HUD)、全景显示器(around view moni tor，AVM)、自适应前灯控制(adaptive headlight system，AHS)功能等。
[0004]另外，车辆的安全功能是确保驾驶员的安全和/或行人的安全的技术，具有车道偏离警告系统(lane departure warning system，LDWS)、车道保持辅助系统(lane keeping assist system，LKAS)、自动紧急制动(autonomous emergency braking，AEB)功能等。
[0005]近年来，正在积极开发通过车辆的挡风玻璃、HUD(Head Up Display：抬头显示器)输出图形对象，或者通过在由摄像头拍摄的图像中输出图形对象来将图形对象追加输出到现实世界的增强现实(Augmented Reality，AR)的技术。尤其，利用这种增强现实(AR)技术，正在进一步扩大通过增强现实(AR)技术给驾驶员指引路径的技术的开发。
[0006]另一方面，在现有技术中，即使根据AR行驶模式将这种增强现实(AR)技术应用到路径指引，也只是简单地以AR形式显示现有的行驶指引。例如，只是在固定的特定位置以AR图像显示行驶方向变更指引。
[0007]因此，很难与AR行驶模式的其他AR特征(feature)区分显示，因此在接收直观的路径指引方面存在限制。另外，在驾驶经验不足的驾驶员的情况下，在按照指引准确地行驶方面存在限制。即使一起显示行驶方向变更显示和剩余的距离值，也是如此。因此，有必要研究用于执行更直观且更完整的AR行驶模式。

技术实现思路

[0008]本专利技术的目的在于，解决前述的问题及其他问题。
[0009]根据本专利技术的一些实施例，目的在于，提供一种能够执行更直观且更完整的AR行驶模式的AR显示装置及其动作方法。
[0010]另外，根据本专利技术的一些实施例，目的在于，提供一种能够在车辆的当前位置直观地观察预测的下一个行驶状况，并且仅沿显示的AR界面行进就能够实现方便且安全的行驶
的AR显示装置及其动作方法。
[0011]另外，根据本专利技术的一些实施例，目的在于，提供一种能够自由切换UX显示诸如结合、分离、变形以能够利用一个AR界面来提供各种信息的AR显示装置及其动作方法。
[0012]另外，根据本专利技术的一些实施例，目的在于，提供一种能够对预测的下一个行驶状况以及AR行驶模式中与行驶相关的导航信息或POI信息进行更协调且扩张的UX显示的AR显示装置及其动作方法。
[0013]为此，本专利技术的与车辆联动的AR显示装置利用AR图形界面，在车辆行驶期间显示车辆的当前行驶状态，并可以在导航画面显示与预测的下一个行驶状况相关的指引。
[0014]此时，所述AR显示装置在距预测的地点规定距离或规定时间之前，可以分离所述图形界面的一部分并使其预先指引预测的行驶状况。
[0015]此时，被分离的AR对象根据车辆的当前位置和道路形成实时改变并可以显示在导航。另外，被分离的AR对象可以反映预测的行驶状况以及导航的状态信息、设定信息、周边POI信息等并显示。
[0016]并且，若该状况结束，则被分离的AR对象可以以再次结合的状态的AR图形界面显示在导航画面。另外，在车辆行驶期间，每当预测特定行驶状况时，可以继续重复所述AR图形界面分离成AR对象并指引后结合。
[0017]具体而言，本专利技术的AR显示装置可以包括：至少一个接口模块(通信模块)，接收包括通过摄像头获取的车辆前方图像的数据、对于车辆的当前位置的地图数据以及包括车辆的当前位置的位置数据；处理器，以与所述前方图像重叠的方式渲染AR图形界面，所述AR图形界面包括基于所述地图数据来显示车辆的行驶状态的第一AR对象和显示对于车辆的行驶状况的指引的第二AR对象；以及显示器，根据所述渲染，显示包括重叠了所述AR图形界面的前方图像的导航画面。此时，所述处理器可以根据基于所述地图数据和车辆的当前位置来推测的车辆的下一个行驶状况，在导航画面上从所述第一AR对象选择性地分离所述第二AR对象或者将所述第二AR对象结合到所述第一AR对象来改变所述AR图形界面并渲染。
[0018]在实施例中，还可以包括视觉传感器，所述视觉传感器通过所述接口模块提供包括所述车辆的前方图像的数据。
[0019]在实施例中，所述视觉传感器可以包括摄像头或智能玻璃(Smart Glass)。
[0020]在实施例中，所述AR图形界面可以在第二位置分离，所述第二位置是距所述车辆的下一个行驶状况开始的第一位置提前规定时间或距离的位置。
[0021]在实施例中，基于所述地图数据、所述位置数据以及车辆的导航信息中的至少一种来确定第一条件和第二条件中的任一条件，所述处理器如下显示所述AR图形界面：在所述第一条件下，以所述第一AR对象和所述第二AR对象的结合状态显示所述AR图形界面，在所述第二条件下，所述第一AR对象和所述第二AR对象分离，被分离的第二AR对象表示下一个行驶状况。
[0022]在实施例中，在所述第一条件下，所述处理器可以渲染为，包括与车辆的行驶信息相关的AR对象的面板区域重叠在所述前方图像的指定的区域，在所述第二条件下，所述处理器可以渲染更新为，在所述被分离的第二AR对象表示下一个行驶状况的期间，隐藏或倾斜地显示所述面板区域。
[0023]由此，可以更协调地显示基于AR特征(feature)和AR图形界面的行驶指引，提高AR
行驶模式的完整性，提供行驶稳定性和便利性。
[0024]在实施例中，所述车辆的下一个行驶状况包括基于所述地图数据和感测数据中的至少一种以及所述车辆的当前位置来推测的道路形状信息，所述处理器可以显示更新为，与所述道路形状信息对应的变化反映到所述AR图形界面。
[0025]例如，可以以构成AR图形界面的AR对象的一部分结合的状态在三轴方向上移动，以将道路的弯曲或倾斜度反映到AR图形界面本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种车辆用AR显示装置，其中，包括：至少一个接口模块，接收包括车辆的前方图像的数据、包括车辆的当前位置的位置数据以及对于车辆的当前位置的地图数据；处理器，以与所述前方图像重叠的方式渲染AR图形界面，所述AR图形界面包括基于所述地图数据来显示车辆的行驶状态的第一AR对象和显示对于车辆的行驶状况的指引的第二AR对象；以及显示器，根据所述渲染，显示包括重叠了所述AR图形界面的前方图像的导航画面，所述处理器根据基于所述地图数据和车辆的当前位置来推测的车辆的下一个行驶状况，在导航画面上从所述第一AR对象选择性地分离所述第二AR对象或者将所述第二AR对象结合到所述第一AR对象来渲染所述AR图形界面。2.根据权利要求1所述的车辆用AR显示装置，其中，还包括视觉传感器，所述视觉传感器通过所述接口模块提供包括所述车辆的前方图像的数据。3.根据权利要求2所述的车辆用AR显示装置，其中，所述视觉传感器包括摄像头或智能玻璃。4.根据权利要求1所述的车辆用AR显示装置，其中，所述AR图形界面在第二位置分离，所述第二位置是距所述车辆的下一个行驶状况开始的第一位置提前规定时间或距离的位置。5.根据权利要求1所述的车辆用AR显示装置，其中，基于所述地图数据、所述位置数据以及车辆的导航信息中的至少一种来确定第一条件和第二条件中的任一条件，所述处理器如下显示所述AR图形界面：在所述第一条件下，以所述第一AR对象和所述第二AR对象的结合状态显示所述AR图形界面，在所述第二条件下，所述第一AR对象和所述第二AR对象分离，被分离的第二AR对象表示下一个行驶状况。6.根...

【专利技术属性】
技术研发人员：崔秉埈，蔡知锡，孙正勋，金一完，朴钟兑，
申请(专利权)人：LG电子株式会社，
类型：发明
国别省市：