一种基于图像的三维人-物体交互元素预测方法技术

技术编号:41632456 阅读:20 留言:0更新日期:2024-06-13 02:29
本发明专利技术公开了一种基于图像的三维人‑物体交互元素预测方法,其步骤包括:1、提取图像的特征和人体、物体的点云特征;2、计算物体和人体的点云中的交互意图特征;3、物体可供性、人体接触、人‑物体相对空间位置特征提取;4、解码人体接触特征,物体可供性特征和人‑物体相对空间位置特征;5、构建损失监督函数并训练。本发明专利技术综合考虑交互中的人和物体之间语义及几何的内在关联性,从而有效地完成三维人‑物体交互元素预测的任务。

【技术实现步骤摘要】

本专利技术属于计算机视觉领域,具体的说是一种基于图像的三维人-物体交互元素预测方法


技术介绍

1、理解三维人物交互的关系旨在捕获三维空间中发生交互的人和物体的语义共现性和几何兼容性,是迈向具身智能过程中重要的一环。现有的方法设计针对具体任务的模型去独立的预测一些体现人-物交互关系的元素,包括人体接触,物体可供性,空间关系等。这种独立的视角聚焦在交互中的一方(人或物体),缺乏了对交互关系中共生关系的利用,例如交互意图以及几何关联,这使得很难解决交互中的不确定性问题。


技术实现思路

1、本专利技术是为了解决上述现有技术存在的不足之处,提出基于图像的三维人-物体交互元素预测方法,旨在解决交互元素预测中的交互不确定性问题,通过建立图像中交互内容和人、物体几何结构的亲和性,实现三维人-物体交互元素预测。

2、本专利技术为达到上述专利技术目的,采用如下技术方案:

3、本专利技术一种基于图像的三维人-物体交互元素预测方法的特点在于,包括以下步骤:

4、步骤1、提取第b张图像ib的特征向本文档来自技高网...

【技术保护点】

1.一种基于图像的三维人-物体交互元素预测方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的一种基于图像的三维人-物体交互元素预测方法,其特征在于,所述步骤1包括:

3.根据权利要求1所述的一种基于图像的三维人-物体交互元素预测方法,其特征在于,所述步骤3.2包括:

4.根据权利要求1所述的一种基于图像的三维人-物体交互元素预测方法,其特征在于,所述步骤5中是利用式(1)构建总的损失函数

5.一种电子设备,包括存储器以及处理器,其特征在于,所述存储器用于存储支持处理器执行权利要求1-4中任一所述三维人-物体交互元素预测方法的程序,所...

【技术特征摘要】

1.一种基于图像的三维人-物体交互元素预测方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的一种基于图像的三维人-物体交互元素预测方法,其特征在于,所述步骤1包括:

3.根据权利要求1所述的一种基于图像的三维人-物体交互元素预测方法,其特征在于,所述步骤3.2包括:

4.根据权利要求1所述的一种基于图像的三维人-物体交互元素预测方法,其特征在于,所述步骤5中是利用式(...

【专利技术属性】
技术研发人员:查正军翟伟曹洋杨雨航
申请(专利权)人:中国科学技术大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1