基于图像的运动预测方法、装置、电子设备和存储介质制造方法及图纸

技术编号:37207622 阅读:21 留言:0更新日期:2023-04-20 22:59
本公开提供基于图像的运动预测方法、装置、电子设备和存储介质。所述方法包括:获取扩展现实设备的触控信息;根据所述触控信息,生成渲染场景的深度图像;获取相邻两帧所述深度图像对应的点云坐标信息;根据所述点云坐标信息,确定所述深度图像的深度向量;对所述深度向量进行向量计算,得到三维立体仿射向量;向所述扩展现实设备发送所述三维立体仿射向量,以使所述扩展现实设备根据所述三维立体仿射向量进行运动预测。本公开的方法解决了二维图像中运动物体在前后方向运动预测不准确的问题。题。题。

【技术实现步骤摘要】
基于图像的运动预测方法、装置、电子设备和存储介质


[0001]本公开涉及计算机
,尤其涉及一种基于图像的运动预测方法、装置、电子设备和存储介质。

技术介绍

[0002]相关技术通过计算二维平面图像的平移向量实现对运动物体的运动预测,其对于运动物体的平面运动预测比较有效,但当运动物体在垂直于图像画面方向上进行运动时,相关技术计算的运动预测结果往往与实际运动结果偏差较大,若将不准确的预测帧应用于视频图像的预测插帧,则会产生图像显示异常、画面抖动等负优化现象。

技术实现思路

[0003]提供该
技术实现思路
部分以便以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。该
技术实现思路
部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。
[0004]本公开提供一种基于图像的运动预测方法、装置、电子设备和存储介质。
[0005]本公开采用以下的技术方案。
[0006]在一些实施例中,本公开提供一种基于图像的运动预测方法,应用于接入扩展现实设备的系统,本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于图像的运动预测方法,应用于接入扩展现实设备的系统,其特征在于,包括:获取扩展现实设备的触控信息;根据所述触控信息,生成渲染场景的深度图像;获取相邻两帧所述深度图像对应的点云坐标信息;根据所述点云坐标信息,确定所述深度图像的深度向量;对所述深度向量进行向量计算,得到三维立体仿射向量;向所述扩展现实设备发送所述三维立体仿射向量,以使所述扩展现实设备根据所述三维立体仿射向量进行运动预测。2.根据权利要求1所述的方法,其特征在于,所述获取扩展现实设备的触控信息,包括:通过所述扩展现实设备的控制器获取用户的触控信息;其中,所述触控信息包括六自由度传感器数据、针对所述控制器的动作信息、用户手势信息和用户头部动作信息中的至少一种。3.根据权利要求1所述的方法,其特征在于,所述根据所述触控信息,生成渲染场景的深度图像,包括:根据所述触控信息,生成渲染后的三色图像和深度图像。4.根据权利要求1所述的方法,其特征在于,所述获取相邻两帧所述深度图像对应的点云坐标信息,包括:构建相邻两帧所述深度图像对应的第一点云和第二点云;获取所述深度图像中每个编码单元对应的第一点云坐标信息和第二点云坐标信息。5.根据权利要求4所述的方法,其特征在于,所述根据所述点云坐标信息,确定所述深度图像的深度向量,包括:根据所述第一点云坐标信息和所述第二点云坐标信息,确定所述编码单元在相邻两帧所述深度图像中的深度信息;计算所述编码单元在相邻两帧所述深度图像中的深度信息的差值,得到所述编码单元的深度向量。6.根据权利要求5所述的方法,其特征在于,所述对所述深度向量进行向量计算,得到三维立体仿射向量,包括:获取所述编码单元的平面运动向量;对所述平面运动向量和所述深度向量进行向量叠加计算,得到所述编码单元的三维立体仿射向量。7.根据权利要求3所...

【专利技术属性】
技术研发人员:李蕾崔新宇
申请(专利权)人:北京字跳网络技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1