图像处理方法及其电子设备技术

技术编号:41567270 阅读:21 留言:0更新日期:2024-06-06 23:48
提供了一种图像处理方法及其电子设备。扩展现实XR系统包括滚动快门RS相机和全局快门GS相机,所述方法包括:基于XR系统对应的第一运动矩阵和XR系统坐标系到RS相机坐标系的转换系数,获得第二运动矩阵,其中,第二运动矩阵是针对与RS相机捕捉的RS彩色图像的第一扫描线的时间戳相应的GS相机捕捉的GS深度图像的时间戳的运动矩阵;基于第二运动矩阵,将当前帧RS彩色图像投影到GS彩色图像坐标系,获得当前帧GS彩色图像。

【技术实现步骤摘要】

本申请涉及增强现实领域,更具体地,涉及一种图像处理方法及其电子设备


技术介绍

1、增强现实(ar)技术通过在用户面前的现实场景中添加虚拟内容来为用户提供真实的信息体验。在三维空间中,ar系统需要对周围物体的三维状态具有高精度的实时处理和理解,以完成在用户面前呈现高质量的虚实融合效果。

2、准确且快速的滚动快门(rs)相机图像的矫正对于ar互动非常重要。rs相机图像校正是提高ar场景用户体验的重要一步。现有的rs相机图像校正方法涉及深度估计或者是采用多帧图像进行运动反向估计进行校正。然而,这些现有方法的运算速度太慢,无法使用在速度苛刻的ar场景;此外,现有方法均假设rs相机图像校正效果良好,但是这样的假设会损害下游任务的鲁棒性。


技术实现思路

1、根据本专利技术的示例性实施例,提供了一种图像处理方法,其中,扩展现实xr系统包括滚动快门rs相机和全局快门gs相机,所述方法包括:基于xr系统对应的第一运动矩阵和xr系统坐标系到rs相机坐标系的转换系数,获得第二运动矩阵,其中,第二运动矩阵是针对与rs相本文档来自技高网...

【技术保护点】

1.一种图像处理方法,其中,扩展现实XR系统包括滚动快门RS相机和全局快门GS相机,所述方法包括:

2.如权利要求1所述的图像处理方法,还包括:

3.如权利要求2所述的图像处理方法,其中,基于RS彩色相机的运动信息来确定是否执行获得第二运动矩阵的步骤包括:

4.如权利要求1所述的图像处理方法,其中,与第一扫描线的时间戳相应的GS深度图像为时间戳与第一扫描线的时间戳最接近的GS深度图像。

5.如权利要求1所述的图像处理方法,还包括:

6.如权利要求1所述的图像处理方法,还包括:

7.如权利要求6所述的图像处理方法,还包...

【技术特征摘要】

1.一种图像处理方法,其中,扩展现实xr系统包括滚动快门rs相机和全局快门gs相机,所述方法包括:

2.如权利要求1所述的图像处理方法,还包括:

3.如权利要求2所述的图像处理方法,其中,基于rs彩色相机的运动信息来确定是否执行获得第二运动矩阵的步骤包括:

4.如权利要求1所述的图像处理方法,其中,与第一扫描线的时间戳相应的gs深度图像为时间戳与第一扫描线的时间戳最接近的gs深度图像。

5.如权利要求1所述的图像处理方法,还包括:

6.如权利要求1所述的图像处理方法,还包括:

7.如权利要求6所述的图像处理方法,还包括:

8.如权利要求2所述的图像处理方法,其中,若确定不执行获得第二运动矩阵的步骤,所述方法还包括:

9.如权利要求5、7、8中任一项所述的图像处理方法,其中,将与当前帧rs彩色图像的每个第一扫描线相应的gs深度图像投影到rs相机坐标系的步骤包括:

10.如权利要求9所述的图像处理方法,其中,所述多个第二扫描线包...

【专利技术属性】
技术研发人员:何宝李炜明权南燮马林全明帝郑景夫王强成映勋
申请(专利权)人:北京三星通信技术研究有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1