视频编解码方法、装置、车辆、存储介质及程序产品制造方法及图纸

技术编号:42608825 阅读:22 留言:0更新日期:2024-09-03 18:17
本发明专利技术涉及视频处理技术领域,公开了视频编解码方法、装置、车辆、存储介质及程序产品,本发明专利技术通过运动信息提取模块提取当前帧图像相较于上一帧图像的光流图,以提取运动信息,接着利用多尺度特征融合模块基于当前帧图像、上一帧图像和光流图进行多尺度特征提取和融合得到多尺度融合特征,便于后续视频编码,然后通过可变码率模块根据确定的可变码率参数对多尺度融合特征进行加权,便于实现视频输出码率的动态调整,最后通过编解码模块对加权后的多尺度融合特征进行编码和解码,得到与当前帧图像相对应的解码图像,从而基于卷积神经网络实现动态的视频编解码,能够适应不同车载设备和操作系统,从而针对不同场景灵活调节解码视频质量。

【技术实现步骤摘要】

本专利技术涉及视频处理,具体涉及视频编解码方法、装置、车辆、存储介质及程序产品


技术介绍

1、在现代汽车中,车载视频系统已经成为提升驾驶体验和行车安全的重要配置。随着技术的进步,车辆装备的传感器和影音设备越来越多,使得车辆能够执行更加复杂的任务。但是,随之而来的挑战是巨大的数据处理需求,尤其是图像和视频数据,这些数据必须被快速且高效地编解码,以便车道线辅助、行人车辆识别等算法能够实时运作。这就要求视频编解码技术既能保证视频质量,又要控制数据带宽的占用,以免影响车辆其他系统的正常运行。

2、目前,神经网络视频编解码方案通常在训练时使用单一参数来确定码率,且使用神经网络实现这些功能通常需要多个网络模块。然而,智能汽车自身留给视频编解码算法的空间资源十分有限,且不同的车载设备和操作系统对视频编解码方案有不同的要求,传统方法无法对码率的进行灵活调节。

3、因此,如何考虑不同车载设备和操作系统的兼容性实现高效地视频编解码便成为了目前亟需解决的关键问题。


技术实现思路

1、有鉴于此,本专利技术提本文档来自技高网...

【技术保护点】

1.一种基于卷积神经网络的视频编解码方法,应用于车辆端,其特征在于,所述卷积神经网络包括:运动信息提取模块、多尺度特征融合模块、可变码率模块和编解码模块;所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述多尺度特征融合模块包括多尺度特征提取模块和卷积拼接模块;所述基于所述当前帧图像、所述上一帧图像和所述光流图进行多尺度特征提取和特征融合,得到多尺度融合特征,包括:

3.根据权利要求2所述的方法,其特征在于,所述可变码率模块包括激活层、多个第一卷积层和多个权重层,每个所述权重层对应一个第一卷积层,每个所述第一卷积层和相对应的权重层之间的运算关系为点积运算...

【技术特征摘要】

1.一种基于卷积神经网络的视频编解码方法,应用于车辆端,其特征在于,所述卷积神经网络包括:运动信息提取模块、多尺度特征融合模块、可变码率模块和编解码模块;所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述多尺度特征融合模块包括多尺度特征提取模块和卷积拼接模块;所述基于所述当前帧图像、所述上一帧图像和所述光流图进行多尺度特征提取和特征融合,得到多尺度融合特征,包括:

3.根据权利要求2所述的方法,其特征在于,所述可变码率模块包括激活层、多个第一卷积层和多个权重层,每个所述权重层对应一个第一卷积层,每个所述第一卷积层和相对应的权重层之间的运算关系为点积运算;所述根据可变码率参数对多尺度融合特征进行加权,得到加权后的多尺度融合特征,包括:

4.根据权利要求3所述的方法,其特征在于,每个所述权重层由多层全连接网络构成;所述多层全连接神经网络用于将所述可变码率参数转化为与第一卷积层大小相同的权重矩阵。

5.根据权利要求1至4中任一项所述的方法,其特征在于,所述卷积神经网络的训练步骤包括:

6.根据权利要求1所述的方法,其特征在于,编解码模块包括编码层和解码层,所述编码层包括自编码器和熵编码器;所述对加权后的多尺度融合特征进行编码和解码,得到与所...

【专利技术属性】
技术研发人员:武开群罗咏刚江天谢乐成
申请(专利权)人:重庆长安科技有限责任公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1