当前位置: 首页 > 专利查询>浙江大学专利>正文

一种基于三维形状分析框架的编码器训练方法与电子设备技术

技术编号:41103104 阅读:29 留言:0更新日期:2024-04-25 13:58
本发明专利技术涉及一种基于三维形状分析框架的编码器训练方法;其通过将高维特征向量输入三维网格分支,并将多视图投影图像输入图像分支,训练第一编码器;其中,所述第一编码器通过高维特征向量获取其对应的三维面片特征;所述第一投影头通过三维面片特征获取其在特征空间内的面片特征向量;所述第一计算模块通过第一投影头获取的面片特征向量计算损失函数;所述数据增强模块对多视图投影图像进行数据增强得到增强图像集;所述第二编码器提取增强图像集中各增强图像对应的图像特征;所述第二投影头通过图像特征获取其在特征空间内的特征向量;所述第二计算模块通过第二投影头获取的特征向量计算损失函数,实现了图像特征与三维面片特征的对比学习。

【技术实现步骤摘要】

本申请涉及三维形状分析领域,特别是涉及一种基于三维形状分析框架的编码器训练方法与电子设备


技术介绍

1、近年来,三维形状分析在众多领域内都具有重要地位,在包括多媒体处理、计算机图形学、计算机视觉、虚拟现实等多个领域有着深渊的应用。从三维形状中理解和提取有意义的信息是支撑各种应用的基本任务,如形状检索、识别、生成等。然而,三维形状固有的复杂性和高维特性对传统的分析方法提出了重大挑战,需要创新有效的方法来解决这些难题。三维形状分析包含多种任务,包括三维形状分类、语义分割、兴趣点检测等。

2、三维形状的语义分割,是一种将三维形状分割成有意义的部分的任务,通常可以将其理解为对三维形状的每个面片进行分类的过程。而兴趣点检测,则是在三维形状的表面,标记出独特点的任务。这两个任务都是三维形状分析中非常重要的任务。

3、大多数现有的三维形状分析方法在很大程度上依赖于面片之间的几何相似性,因此,为每个面片提取有效的几何特征是进一步提高三维形状分析性能的关键。也有一部分方法基于二维投影视图进行分析,而仅通过面片之间的几何相似性或二维投影视图进行三维形本文档来自技高网...

【技术保护点】

1.一种基于三维形状分析框架的编码器训练方法,其特征在于,所述三维形状分析框架包括:投影模块、包含第一编码器、第一投影头与第一计算模块的三维网格分支,以及包含数据增强模块、第二编码器、第二投影头与第二计算模块的图像分支;所述编码器训练方法包括:

2.根据权利要求1所述的一种基于三维形状分析框架的编码器训练方法,其特征在于,获取数据集中各三维网格模型对应的高维特征向量,具体为:

3.根据权利要求2所述的一种基于三维形状分析框架的编码器训练方法,其特征在于,所述二维投影图像的像素与一个或多个三维面片对应;所述基于二维投影图像的像素与三维面片的对应关系,设定各二维投影图...

【技术特征摘要】

1.一种基于三维形状分析框架的编码器训练方法,其特征在于,所述三维形状分析框架包括:投影模块、包含第一编码器、第一投影头与第一计算模块的三维网格分支,以及包含数据增强模块、第二编码器、第二投影头与第二计算模块的图像分支;所述编码器训练方法包括:

2.根据权利要求1所述的一种基于三维形状分析框架的编码器训练方法,其特征在于,获取数据集中各三维网格模型对应的高维特征向量,具体为:

3.根据权利要求2所述的一种基于三维形状分析框架的编码器训练方法,其特征在于,所述二维投影图像的像素与一个或多个三维面片对应;所述基于二维投影图像的像素与三维面片的对应关系,设定各二维投影图像像素的...

【专利技术属性】
技术研发人员:孙旭菲舒振宇辛士庆庞超逸刘利刚
申请(专利权)人:浙江大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1