一种基于SCFlow2的位姿优化方法技术

技术编号:45883904 阅读:8 留言:0更新日期:2025-07-22 21:16
本发明专利技术属于位姿优化技术领域,具体涉及一种基于SCFlow2的位姿优化方法,通过将3D场景流中的刚体运动嵌入与目标的3D形状先验引入估计网络,同时将深度信息作为迭代中的正则化,构建了一种即插即用的端到端位姿优化网络,仅使用合成数据训练、无需任何针对特定物体的微调即可泛化到真实场景下训练过程中未见目标的6D位姿估计任务。

【技术实现步骤摘要】

本专利技术涉及位姿优化,具体涉及一种基于scflow2的位姿优化方法。


技术介绍

1、目前基于rgb图像的物体6d姿态估计方法可以被分为:(1)基于2d-3d对应关系的方法,首先利用深度神经网络来建立从像素坐标系到物体坐标系的2d-3d对应关系,之后利用pnp算法来从2d-3d对应关系中求解目标物体的6d姿态;(2)利用神经网络端到端地直接预测图像中目标物体的6d姿态。相比于两阶段的基于2d-3d对应关系的方法,尽管端到端的方法更利于实际应用场景下的部署,但是其精度往往不如基于2d-3d对应关系的方法。为了准确地估计物体的6d姿态,各种不同的方法被提出,包括基于rgb-d图像的方法、基于深度图像的方法、基于点云的方法以及基于rgb图像的方法等;然而,当前现有的大多数方法都假设目标存在许多真实的图像,并根据这些真实图像训练网络模型。这类方法通常对训练过的目标表现出准确的姿态估计效果,但无法处理训练过程中未涉及的新物体。重新训练或微调可以使网络适应新物体,但这通常是麻烦且耗时的,限制了算法在实际场景中的应用。为了实现训练过程中未涉及的新物体的6d姿态估计,需要本文档来自技高网...

【技术保护点】

1.一种基于SCFlow2的位姿优化方法,其特征在于,所述方法包括:

2.根据权利要求1所述的一种基于SCFlow2的位姿优化方法,其特征在于,所述构建4D相关金字塔具体为:

3.根据权利要求2所述的一种基于SCFlow2的位姿优化方法,其特征在于,所述密集特征图Fs和Fr通过使用具有共享参数的编码器DINOv2以1/8分辨率获得,对于两幅图像对应的深度图Ds和Dr,根据相机本征矩阵将两幅深度图提升为点云,分别记为Cs和Cr。

4.根据权利要求2所述的一种基于SCFlow2的位姿优化方法,其特征在于,所述三维信息获取具体包括:>

5.根据权利...

【技术特征摘要】

1.一种基于scflow2的位姿优化方法,其特征在于,所述方法包括:

2.根据权利要求1所述的一种基于scflow2的位姿优化方法,其特征在于,所述构建4d相关金字塔具体为:

3.根据权利要求2所述的一种基于scflow2的位姿优化方法,其特征在于,所述密集特征图fs和fr通过使用具有共享参数的编码器dinov2以1/8分辨率获得,对于两幅图像对应的深度图ds和dr,根据相机本征矩阵将两幅深度图提升为点云,分别记为cs和cr。

<...

【专利技术属性】
技术研发人员:宋锐王庆元汤亮任国康李娇娇黄煌王铎
申请(专利权)人:西安电子科技大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1