一种基于多模态预训练的建模过程与3D模型数据对齐方法技术

本发明专利技术公开了一种基于多模态预训练的建模过程与3D模型数据对齐方法，包括以下步骤：获取建模文件数据集，提取其中的建模特征树与对应的3D模型数据，并划分为训练集与测试集；使用预训练好的几何语义提取模型获取3D模型的几何语义表征；使用预训练好的建模语义提取模型获取建模特征树的建模语义表征；使用两种语义表征并采用对比学习的方式，构建模态融合网络正负样例对训练数据，训练模态融合网络，引入对比损失函数，对模型进行联合训练直至收敛。本发明专利技术可以在高维表征空间内与模型的3D形体特征对齐，之后可以用于其他下游任务。本发明专利技术实现零件从建模表征空间到模型表征空间的映射，进而通过对比学习的方式在高维空间中对齐。齐。齐。

【技术实现步骤摘要】
一种基于多模态预训练的建模过程与3D模型数据对齐方法


[0001]本专利技术涉及计算机图形学、人工智能、多模态融合
，特别是一种基于多模态预训练的建模过程与3D模型数据对齐方法。

技术介绍

[0002]在CAD/CAM中，建模技术是将现实世界中的物体及其属性转化为计算机内部数字化表达的原理和方法，是定义在计算机内部表示的数字模型、数字信息以及图形信息的工具，是产品信息化的源头。
[0003]建模特征被誉为CAD/CAM发展的里程碑，它作为产品开发过程中各种信息的载体，除了包含零件的几何拓扑信息外，还包含了涉及制造等过程所需要的一些非几何信息，因此建模特征包含丰富的工程语义，他是在更高层次上对几何形体上的凹腔、孔、槽等的集成描述。
[0004]STEP全称是Standard for the Exchange of Product Model Data，即产品模型数据交换标准，自1992成为ISO国际标准时起(ISO10303)，STEP文件作为三维CAD通用文本中间交换格式，在几何数据交互中起着重要作用。
[0005本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于多模态预训练的建模过程与3D模型数据对齐方法，其特征在于，包括以下步骤：1)获取建模文件数据集，提取其中的建模特征树与对应的3D模型数据，并划分为训练集与测试集；2)使用预训练好的几何语义提取模型获取3D模型的几何语义表征；3)使用预训练好的建模语义提取模型获取建模特征树的建模语义表征；4)使用步骤2)与3)中的两种语义表征并采用对比学习的方式，构建模态融合网络正负样例对训练数据，训练模态融合网络，引入对比损失函数，对模型进行联合训练直至收敛。2.根据权利要求1所述的一种基于多模态预训练的建模过程与3D模型数据对齐方法，其特征在于，所述步骤2)具体步骤如下：2.1)通过建模文件与建模软件输出STEP通用3D模型文件；2.2)提取STEP通用3D模型文件中的拓扑数据与曲面信息；2.3)将2.2)中提及的拓扑数据与曲面信息输入到与训练好的几何语义提取模型中，获得3D模型的几何语义表征。3.根据权利要求1所述的一种基于多模态预训练的建模过程与3D模型数据对齐方法，其特征在于，所述步骤3)具体步骤如下：3.1)通过预处理将建模文件处理为建模特征文本队列；3.2)使用预训练好的建模语义提取模型获得队列中每个建模特征的词向量；3.3)构建建模语义提取模型，将队列中的所有词向量融合为一个建模语义表征。4.根据权利...

【专利技术属性】
技术研发人员：过晓蒙，
申请(专利权)人：上海设序科技有限公司，
类型：发明
国别省市：