一种视频显示方法、装置、电子设备及存储介质制造方法及图纸

技术编号:37133043 阅读:20 留言:0更新日期:2023-04-06 21:31
本发明专利技术涉及一种视频显示方法、装置、电子设备及存储介质,通过获取初始视频流和显示装置的显示格式,并对初始视频流进行帧率调整,得到待显示视频流,再输入预设感知融合模型以确定车辆的周围异常环境信息,基于显示格式对待显示视频流进行格式调整,生成显示格式视频流,根据周围环境信息对显示格式视频流进行标注,得到标注视频流并通过显示装置对标注视频流进行显示,本发明专利技术通过对初始视频流数据的分别处理同时得到异常环境信息与车辆周围环境显示,并且同时通过声音播报与画面显示危险路况进行警示,使得驾驶者可以在持续关注路面情况时了解异常环境信息,避免了驾驶者因关注视频画面分神而引起的危险状况。频画面分神而引起的危险状况。频画面分神而引起的危险状况。

【技术实现步骤摘要】
一种视频显示方法、装置、电子设备及存储介质


[0001]本申请涉及计算机领域,尤其涉及一种视频显示方法、装置、电子设备及存储介质。

技术介绍

[0002]基于当前汽车行业智能化技术的快速发展,越来越多自动驾驶产品被研发出来,其中的一种技术路线就是基于多传感器的数据融合来保证感知数据结果的可靠性,因此车上增加了众多的传感器。如:前视长距摄像头、前视短距摄像头、周视摄像头、后视摄像头、全景摄像头、毫米波雷达、激光雷达等。车内设置自动驾驶数据处理终端,对保证自动驾驶的传感器以及摄像头实时采集数据进行处理,以满足自动驾驶路径规划对环境数据的需求。
[0003]但是,现有流媒体摄像头需要单独的位置布置,且直接接入显示控制模块中,对于摄像头的原始图像处理能力有限,对于整车设计而言,需要设置独立的硬件传感器,且影响造型布置。而且,现有的图像显示只是对周边环境图像的显示,驾驶者需要时刻关注视频才可以知道车边异常,这样容易导致在关注视频的时候,出现驾驶失误,增加事故发生率。因此,提供减少车端硬件资源浪费和避免驾驶者注意力分散而引发危险状况的视频显示方案是急需解决的问题。

技术实现思路

[0004]本专利技术的目的在于提供一种视频显示方法、装置、电子设备及存储介质,以解决传统只显示车辆周边环境视频无异常环境信息提示以及警示方式无法在不影响驾驶者正常驾驶的环境下进行提示的问题。
[0005]本专利技术提供了一种视频显示方法,所述视频显示方法包括:获取初始视频流和显示装置的显示格式,所述初始视频流通过设置于车辆的至少一个图像采集装置采集;对所述初始视频流进行帧率调整,得到待显示视频流,并输入预设感知融合模型以确定所述车辆的周围异常环境信息;基于所述显示格式对所述待显示视频流进行格式调整,生成显示格式视频流;根据所述周围环境信息对所述显示格式视频流进行标注,得到标注视频流;通过所述显示装置对所述标注视频流进行显示。
[0006]于本专利技术的一实施例中,输入预设感知融合模型以确定所述车辆的周围异常环境信息包括:根据所述待显示视频流与预设安全驾驶环境信息确定车辆周围异常障碍目标;根据预设分类条件对所述异常障碍目标进行分类,生成至少一个异常障碍目标初始信息集;获取各所述异常障碍目标信息,根据各所述异常障碍目标信息建立异常障碍目标信息集,所述异常障碍目标信息集包括所述异常障碍目标的位置信息、距离信息及尺寸信息;根据预设融合算法与各所述异常障碍目标信息集确定当前各异常障碍目标的融合信息;基于所述融合信息确定所述车辆的周围异常环境信息。
[0007]于本专利技术的一实施例中,根据预设分类条件对所述异常障碍目标进行分类包括:
对各所述异常障碍目标进行特征提取,得到各所述异常障碍目标的特征向量;根据各所述特征向量与预设分类条件的映射关系确定各特征向量的分类信息;根据所述分类信息生成至少一个异常障碍目标初始信息集。
[0008]于本专利技术的一实施例中,对各所述异常障碍目标进行特征提取之前,还包括:将所述待显示视频流中异常障碍目标所在的帧作为关键帧进行提取;对所述关键帧进行噪点去除与坏点校正处理,得到调优后图像,以对各所述异常障碍目标进行特征提取。
[0009]于本专利技术的一实施例中,根据各所述异常障碍目标信息建立异常障碍目标信息集之后,还包括:分别对所述异常障碍目标的位置信息、距离信息及尺寸信息设置权重,得到带有权重信息的所述位置信息、距离信息及尺寸信息;根据所述带有权重信息的所述位置信息、距离信息及尺寸信息进行加权计算,得到当前异常障碍目标的评级,其中所述评级包括一般异常障碍目标与危险异常障碍目标。
[0010]于本专利技术的一实施例中,基于所述融合信息确定所述车辆的周围异常环境信息之后,还包括:根据所述异常障碍目标的所述位置信息、距离信息及尺寸信息确定警示信息;根据所述警示信息与所述异常障碍目标的评级确定警示信息显示方式:当所述评级为一般异常障碍目标,采用文本信息对警示信息进行显示;当所述评级为危险异常障碍目标,采用文本信息与语音播报对警示信息进行显示。
[0011]于本专利技术的一实施例中,对所述初始视频流进行帧率调整,得到待显示视频流包括:若所述初始视频流的数量为多个,获取各所述初始视频流的视频帧率;将各所述视频帧率中的最低帧率确定为待显示视频帧率;对各目标视频流进行降帧处理,直至各所述目标视频流的视频帧率达到待显示视频帧率,得到待显示视频流,所述降帧处理包括抽帧、跳帧、合帧中至少一种降帧操作,所述目标视频流为视频帧率大于所述待显示视频帧率的初始视频流。
[0012]于本专利技术的一实施例中,根据所述待显示视频帧率对各所述初始视频流进行降帧处理,得到待显示视频流之后,所述视频显示方法还包括:获取所述待显示视频流的时序信息;根据预先选定的视频流起始时间,对所述待显示视频流中视频流起始时间时刻的视频帧进行标记,得到视频起始标识帧;基于所述视频起始标识帧对所述待显示视频流进行时序同步,得到同步时序的待显示视频流。
[0013]于本专利技术的一实施例中,基于所述显示格式对所述待显示视频流进行格式调整包括:根据显示装置的显示格式确定视频数据输入的数据格式信息和像素信息;基于所述视频数据输入的数据格式信息与像素信息对所述待显示视频流进行格式更改,以通过所述显示装置显示所述初始视频流。
[0014]本专利技术实施例还提供了一种视频显示装置,所述视频显示装置包括:获取模块,用于获取初始视频流和显示装置的显示格式,所述初始视频流通过设置于车辆的至少一个图像采集装置采集;处理模块,用于对所述初始视频流进行帧率调整,得到待显示视频流,并输入预设感知融合模型以确定所述车辆的周围异常环境信息;基于所述显示格式对所述待显示视频流进行格式调整,生成显示格式视频流;根据所述周围环境信息对所述显示格式视频流进行标注,得到标注视频流;显示模块,用于通过所述显示装置对所述标注视频流进行显示。
[0015]本专利技术实施例还提供了一种电子设备,所述电子设备包括:一个或多个处理器;存
储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述电子设备实现如上述任一项实施例所述的视频显示方法。
[0016]本专利技术实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机可读指令,当所述计算机可读指令被计算机的处理器执行时,使计算机执行如上述任一项实施例所述的视频显示方法。
[0017]本专利技术实施例中的视频显示方法、装置、电子设备及存储介质,通过获取初始视频流和显示装置的显示格式,并对初始视频流进行帧率调整,得到待显示视频流,再输入预设感知融合模型以确定车辆的周围异常环境信息,基于显示格式对待显示视频流进行格式调整,生成显示格式视频流,根据周围环境信息对显示格式视频流进行标注,得到标注视频流并通过显示装置对标注视频流进行显示,本专利技术通过对初始视频流数据的分别处理同时得到异常环境信息与车辆周围环境显示,并且同时通过声音播报与画面显示危险路况进行警示,使得驾驶者可以在持续关注路面情况时本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种视频显示方法,其特征在于,所述视频显示方法包括:获取初始视频流和显示装置的显示格式,所述初始视频流通过设置于车辆的至少一个图像采集装置采集;对所述初始视频流进行帧率调整,得到待显示视频流,并输入预设感知融合模型,以确定所述车辆的周围异常环境信息;基于所述显示格式对所述待显示视频流进行格式调整,生成显示格式视频流;根据所述周围环境信息对所述显示格式视频流进行标注,得到标注视频流;通过所述显示装置对所述标注视频流进行显示。2.根据权利要求1所述的视频显示方法,其特征在于,输入预设感知融合模型,以确定所述车辆的周围异常环境信息包括:根据所述待显示视频流与预设安全驾驶环境信息确定车辆周围异常障碍目标;根据预设分类条件对所述异常障碍目标进行分类,生成至少一个异常障碍目标初始信息集;获取各所述异常障碍目标信息,根据各所述异常障碍目标信息建立异常障碍目标信息集,所述异常障碍目标信息集包括所述异常障碍目标的位置信息、距离信息及尺寸信息;根据预设融合算法与各所述异常障碍目标信息集确定当前各异常障碍目标的融合信息;基于所述融合信息确定所述车辆的周围异常环境信息。3.根据权利要求2所述的视频显示方法,其特征在于,根据预设分类条件对所述异常障碍目标进行分类包括:对各所述异常障碍目标进行特征提取,得到各所述异常障碍目标的特征向量;根据各所述特征向量与预设分类条件的映射关系确定各特征向量的分类信息;根据所述分类信息生成至少一个异常障碍目标初始信息集。4.根据权利要求3所述的视频显示方法,其特征在于,对各所述异常障碍目标进行特征提取之前,所述视频显示方法还包括:将所述待显示视频流中异常障碍目标所在的帧作为关键帧进行提取;对所述关键帧进行噪点去除与坏点校正处理,得到调优后图像,以对各所述异常障碍目标进行特征提取。5.根据权利要求2所述的视频显示方法,其特征在于,根据各所述异常障碍目标信息建立异常障碍目标信息集之后,所述视频显示方法还包括:分别对所述异常障碍目标的位置信息、距离信息及尺寸信息设置权重,得到带有权重信息的所述位置信息、距离信息及尺寸信息;根据所述带有权重信息的所述位置信息、距离信息及尺寸信息进行加权计算,得到当前异常障碍目标的评级,其中所述评级包括一般异常障碍目标与危险异常障碍目标。6.根据权利要求2所述的视频显示方法,其特征在于,基于所述融合信息确定所述车辆的周围异常环境信息之后,所述视频显示方法还包括:根据所述异常障碍目标的所述位置信息、距离信息及尺寸信息确定警示信息;根据所述警示信息与所述异常障碍目标的评级确定警示信息显示方式:当所述评级为一般异常障碍目标,...

【专利技术属性】
技术研发人员:邬栋海李成文杨辉
申请(专利权)人:重庆长安汽车股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1