场景显示方法及装置、电子设备、车辆、可读存储介质制造方法及图纸

技术编号:30321793 阅读:21 留言:0更新日期:2021-10-09 23:46
本申请公开了一种场景显示方法及装置、电子设备、车辆、可读存储介质,其中,场景显示方法包括:响应于车辆行驶中,获取图像采集设备实时拍摄的当前帧的现实场景图像;对现实场景图像进行语义识别,以识别出现实场景图像中的目标物;基于目标物确定目标显示特效;将目标显示特效添加到现实场景图像中,生成目标物与目标显示特效相叠加的增强现实数据;将增强现实数据通过车载显示组件进行显示。上述方案,能够增强目标物的显示效果,且能够增强用户对现实场景中的目标物进行理解和辨识,帮助用户对目标物进行更加详细和深入的了解。对目标物进行更加详细和深入的了解。对目标物进行更加详细和深入的了解。

【技术实现步骤摘要】
场景显示方法及装置、电子设备、车辆、可读存储介质


[0001]本申请涉及增强现实
,特别是涉及一种场景显示方法及装置、电子设备、车辆、可读存储介质。

技术介绍

[0002]增强现实(Augmented Reality,AR)技术是通过将实体信息(视觉信息、声音、触觉等)通过模拟仿真后,叠加到真实世界中,从而将真实的环境和虚拟的物体实时地在同一个画面或空间呈现。近年来,AR设备的应用领域越来越广,使得AR设备在生活、工作、娱乐中起到了重要的作用,对AR设备呈现的增强现实场景的效果的优化,愈发重要。
[0003]导览车是属于区域用车的一种,可作为旅游景区、公园、科技园、大型游乐园、封闭社区、校园、度假村、城市步行街等区域的交通工具,以及工业园区、科技园区等大型企业和政府产业园的接驳工具。目前常见的导览车主要是环保型电动车,且部分导览车除了具有代步作用外,还可以兼具视频播放与讲解功能等常规导览功能。但目前导览车的导览功能单一且展示效果差,比如仅能播放固定的视频讲解,或者依赖人工进行讲解。

技术实现思路

[0004]本申请主要解决的技术问题是提供一种场景显示方法及装置、电子设备、车辆、可读存储介质。
[0005]本申请第一方面提供了一种场景显示方法,所述方法包括:响应于车辆行驶中,获取图像采集设备实时拍摄的当前帧的现实场景图像;对所述现实场景图像进行语义识别,以识别出所述现实场景图像中的目标物;基于所述目标物确定目标显示特效;将所述目标显示特效添加到所述现实场景图像中,生成所述目标物与所述目标显示特效相叠加的增强现实数据;将所述增强现实数据通过车载显示组件进行显示。
[0006]因此,通过在车辆行驶过程中图像采集设备拍摄到现实场景图像后,可以识别到现实场景图像中的目标物,然后可以确定与目标物对应的目标显示特效,并将目标显示特效融入现实场景图像中,生成并显示目标物与目标显示特效相叠加的增强现实数据,并通过车载显示组件进行显示,可以增强目标物的显示效果,且可以增强用户对现实场景中的目标物进行理解和辨识,帮助用户对目标物进行更加详细和深入的了解。
[0007]其中,所述基于所述目标物确定目标显示特效,包括:获取到所述目标物的各部分的拆分特效;所述将所述目标显示特效添加到所述现实场景图像中,生成所述目标物与所述目标显示特效相叠加的增强现实数据,包括:将所述目标物的所述各部分的拆分特效分别添加到所述现实场景中所述各部分的对应位置,生成所述目标物与所述目标物的各部分的拆分特效相叠加的增强现实数据。
[0008]因此,根据目标物获取目标物中各部分的拆分特效,并将各部分的拆分特效添加到目标物各部分的对应位置,丰富了显示场景中当前显示图像中的显示内容,拆分特效可以对目标物各部分进行分解和凸出展示与讲解,能够帮助用户对目标物中的各部分进行更
加详细和深入的了解。
[0009]其中,所述将所述目标物各部分的拆分特效分别添加到所述现实场景中所述各部分的对应位置,生成所述目标物与所述目标物的各部分的拆分特效相叠加的增强现实数据,还包括:依次对所述目标物的各部分的拆分特效进行语音讲解。
[0010]因此,在将目标物的各部分的拆分特效添加到目标物各部分的对应位置处,还依次对目标物各部分的拆分特效进行语音讲解,在拆分特效显示的基础上,叠加语音讲解,实现了目标物各部分进行分解和凸出展示与讲解,对目标物实现了多维度的展示和介绍,增加了场景显示的多样性,并且可以帮助用户对目标物及其各部分进行更加详细和深入的了解。
[0011]其中,所述识别所述现实场景图像中的目标物,包括:利用目标识别网络对获取的所述现实场景图像进行语义识别,识别出所述目标物;其中,所述目标识别网络是利用神经网络训练得到的。
[0012]因此,利用目标识别网络,可以通过语义识别快速识别出并确定现实场景图像中的目标物,以便于确定与目标物对应的目标显示特效,丰富了显示场景,提高场景显示的多样性以及增强对目标物的展示效果。
[0013]其中,所述识别所述现实场景图像中的目标物,包括:响应于识别出多个目标,按照预设规则从所述多个目标中确定一个作为所述目标物。
[0014]因此,在现实场景图像较为复杂,识别出现实场景图像中具有多个目标时,可以根据预设规则,从多个目标中确定其中一个作为目标物,以进一步根据目标物确定目标显示特效,从而提高场景显示的多样性以及增强对目标物的展示效果,并且可以帮助用户对目标物进行更加详细和深入的了解。
[0015]其中,所述响应于识别出多个目标,按照预设规则从所述多个目标中确定一个作为所述目标物,包括:响应于识别出多个目标,将面积最大的目标、知名度最高的目标、预先设定的目标或者接收用户选择指令确定的目标中的一种或多种作为所述目标物。
[0016]因此,在现实场景图像较为复杂,识别出现实场景图像中具有多个目标时,通过将面积最大的目标、知名度最高的目标、预先设定的目标或者接收用户选择指令确定的目标中的一种或多种作为目标物,以将现实场景图像中重要的目标或者需要重点显示的目标作为目标物,对应叠加相应的目标显示特效,以增强目标物的显示效果,实现对目标物的重点和凸出展示,提高场景显示的多样性和画面的丰富度,并且可以帮助用户对目标物进行更加详细和深入的了解。
[0017]其中,所述获取图像采集设备实时拍摄的当前帧的现实场景图像,包括:利用AR车的图像采集设备实时拍摄的当前帧的现实场景图像;和/或,所述对所述现实场景图像进行语义识别,以识别出所述现实场景图像中的目标物,包括:利用所述AR车连接的云端服务器对所述现实场景图像进行语义识别,以识别出所述现实场景图像中的目标物;和/或,所述基于所述目标物确定目标显示特效,包括:通过所述云端服务器确定所述目标显示特效;和/或,所述将所述目标显示特效添加到所述现实场景图像中,生成所述目标物与所述目标显示特效相叠加的增强现实数据,包括:通过所述云端服务器将所述目标显示特效添加到所述现实场景图像中,生成所述目标物与所述目标显示特效相叠加的增强现实数据;和/或所述将所述增强现实数据通过车载显示组件进行显示,包括:将所述增强现实数据回传到
所述AR车的车载显示屏进行显示。
[0018]因此,利用AR车的图像采集设备实时拍摄的当前帧的现实场景图像,然后利用AR车连接的云端服务器对现实场景图像进行语义识别,以识别出现实场景图像中的目标物,并通过云端服务器基于目标物确定目标显示特效以及将目标显示特效添加到现实场景图像中,生成目标物与目标显示特效相叠加的增强现实数据,云端服务器将增强现实数据回传到AR车的显示屏进行显示,从而提高AR车的场景显示多样性以及增强对目标物的展示效果,丰富了AR车的导览功能,并且通过AR车可以帮助用户对目标物进行更加详细和深入的了解。
[0019]为了解决上述问题,本申请第二方面提供了一种场景显示装置,包括:获取模块,所述获取模块用于响应于车辆行驶中,获取图像采集设备实时拍摄的当前帧的现实场景图像;识别模块,所述识本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种场景显示方法,其特征在于,所述方法包括:响应于车辆行驶中,获取图像采集设备实时拍摄的当前帧的现实场景图像;对所述现实场景图像进行语义识别,以识别出所述现实场景图像中的目标物;基于所述目标物确定目标显示特效;将所述目标显示特效添加到所述现实场景图像中,生成所述目标物与所述目标显示特效相叠加的增强现实数据;将所述增强现实数据通过车载显示组件进行显示。2.根据权利要求1所述的场景显示方法,其特征在于,所述基于所述目标物确定目标显示特效,包括:获取到所述目标物的各部分的拆分特效;所述将所述目标显示特效添加到所述现实场景图像中,生成所述目标物与所述目标显示特效相叠加的增强现实数据,包括:将所述目标物的所述各部分的拆分特效分别添加到所述现实场景中所述各部分的对应位置,生成所述目标物与所述目标物的各部分的拆分特效相叠加的增强现实数据。3.根据权利要求2所述的场景显示方法,其特征在于,所述将所述目标物各部分的拆分特效分别添加到所述现实场景中所述各部分的对应位置,生成所述目标物与所述目标物的各部分的拆分特效相叠加的增强现实数据,还包括:依次对所述目标物的各部分的拆分特效进行语音讲解。4.根据权利要求1所述的场景显示方法,其特征在于,所述对所述现实场景图像进行语义识别,以识别出所述现实场景图像中的目标物,包括:利用目标识别网络对获取的所述现实场景图像进行语义识别,识别出所述目标物;其中,所述目标识别网络是利用神经网络训练得到的。5.根据权利要求1所述的场景显示方法,其特征在于,所述对所述现实场景图像进行语义识别,以识别出所述现实场景图像中的目标物,包括:响应于识别出多个目标,按照预设规则从所述多个目标中确定一个作为所述目标物。6.根据权利要求5所述的场景显示方法,其特征在于,所述响应于识别出多个目标,按照预设规则从所述多个目标中确定一个作为所述目标物,包括:响应于识别出多个目标,将面积最大的目标、知名度最高的目标、预先设定的目标或者接收用户选择指令确定的目标中的一种或多种作为所述目标物。...

【专利技术属性】
技术研发人员:孙红亮王子彬李炳泽朱赟
申请(专利权)人:浙江商汤科技开发有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1