一种基于多源数据自动建模方法和系统技术方案

一种基于多源数据自动建模方法和系统，该方法包括将获取到的

【技术实现步骤摘要】
一种基于多源数据自动建模方法和系统


[0001]本申请涉及模型构建领域，尤其涉及一种基于多源数据自动建模方法和系统
。

技术介绍

[0002]在城市建设和基础设施管理中，地下管线的准确信息和三维模型对于规划
、
设计和维护工作至关重要
。
[0003]目前，已经有一些方法被应用于地下管线的三维模型构建
。
这些方法包括地面测量
、
地下雷达和高精度地图等技术
。
通过将这些不同的数据源进行整合和处理，可以生成地下管线的三维模型
。
[0004]然而，相关技术中的地下管线三维模型构建方法存在数据的异构性
。
地下管线的数据来自不同的来源，包括勘测数据
、
设计图纸
、
施工记录等，这些数据具有不同的格式
、
坐标系和精度，导致数据的异构性，进而使得工作人员无法确保构建的三维模型中哪些部位存在问题
。

技术实现思路

[0005]本申请提供了一种基于多源数据自动建模方法和系统，工作人员可以直接在三维模型中确定哪些部位存在问题，便于对有问题的数据进行调整
。
[0006]第一方面，本申请提供了一种基于多源数据自动建模方法，该方法包括：将获取到的
CAD
文件进行格式转换后，获得统一文件；从该统一文件中提取待训练数据信息；将该待训练数据信息输入算法模型进行训练后，对该算法模型进行调优；在选择该算法模型通过图像识别区分特征点后，对该特征点的历史管线数据进行多源对比，获得最终的待生成数据，该特征点为管线的特征部位，该待生成数据包括同一特征点中被标记的存在差异的多源数据；将该待生成数据转化为
CAD
三维模型，该
CAD
三维模型包括被标记的部位
。
[0007]在上述实施例中，系统可以直接通过图像识别获得特征点，并根据特征点的历史管线数据进行多源对比，将存在差异的特征点对应的数据做上标记，显示在三维模型上
。
这样工作人员就可以直接通过被标记的数据或是被标记的三维模型看出那个特征部位出现了问题，便于及时调整
。
[0008]结合第一方面的一些实施例，在一些实施例中，该将获取到的
CAD
文件进行格式转换后，获得统一文件的步骤之前，还包括：将该
CAD
文件转化为
json
格式，获得统一格式；从该统一格式中通过设定渠道抓取重要信息，该设定渠道包括相似匹配或
nlp
自然语言处理，该重要信息包括该
CAD
文件中的文字信息
、
图像信息和标注尺寸信息
。
[0009]在上述实施例中，将
CAD
文件转化为统一的格式一方面方便后续的算法计算，另一方面以便于工作人员管理与查看
。
[0010]结合第一方面的一些实施例，在一些实施例中，该从该统一文件中提取待训练数据信息的步骤，具体包括：将该统一文件中的待查数据与数据模板中的数据指标进行比对；检测该待查数据是否在该数据指标的容错范围内；若不在该容错范围内，则判定该待查数
据为错误数据，将该待查数据去除；若在该容错范围内，则判定该待查数据为正确数据，保留该待查数据后确定待训练数据信息
。
[0011]在上述实施例中，系统将不在数据指标的容错范围内的数据去除，保留在容错范围内的数据，这样能在去除错误数据的同时又能在一定程度上确保数据的完整性，为后续三维模型的构建提供了较为完整的数据
。
[0012]结合第一方面的一些实施例，在一些实施例中，该从该统一文件中提取待训练数据信息的步骤，具体包括：检测该统一文件中的重复数据；将该重复数据去除
。
[0013]在上述实施例中，将重复的数据去除有助于减少后续算法的计算量，进而提高算法计算的效率
。
[0014]结合第一方面的一些实施例，在一些实施例中，该在选择该算法模型通过图像识别区分特征点后，对该特征点的历史管线数据进行多源对比，获得最终的待生成数据的步骤，具体包括：通过图像识别获得特征点图像；对该特征点图像进行预处理，获得图像数据，该预处理包括图像的缩放
、
裁剪和灰度化；从该图像数据中提取特征，该特征包括颜色分布
、
纹理结构和边缘形状；将该特征进行合适的表示后，使用分类算法对该特征进行分类
。
[0015]在上述实施例中，通过图像识别进行特征点提取，从多维度来进行提取，能在一定程度上确保特征点的完整性，且利用算法对特征进行分类，也有助于提高后续的计算效率
。
[0016]结合第一方面的一些实施例，在一些实施例中，该将该待训练数据信息输入算法模型进行训练后，对该算法模型进行调优的步骤，具体包括：使用基准测试集对该算法模型进行性能评估，获得评估结果；通过该评估结果对该算法模型进行调优
。
[0017]在上述实施例中，使用基准测试集来对算法模型进行评估，并对算法模型进行调优，可以获得更合适的算法模型，这对三维模型的构建有着重要意义
。
[0018]结合第一方面的一些实施例，在一些实施例中，该在选择该算法模型通过图像识别区分特征点后，对该特征点的历史管线数据进行多源对比，获得最终的待生成数据的步骤，具体包括：将该特征点的多源数据进行比对，获得比对结果；根据比对结果将有差异的多源数据做上标记
。
[0019]在上述实施例中，将有差异的多源数据做上标记，可以帮助工作人员直观地查看哪些数据可能存在问题，提高了工作人员查看存在问题数据的效率
。
[0020]第二方面，本申请实施例提供了一种多源数据自动建模系统，该一种多源数据自动建模系统包括：统一文件获得模块，用于将获取到的
CAD
文件进行格式转换后，获得统一文件；待训练数据信息提取模块，用于从该统一文件中提取待训练数据信息；模型调优模块，用于将该待训练数据信息输入算法模型进行训练后，对该算法模型进行调优；待生成数据获得模块，用于在选择该算法模型通过图像识别区分特征点后，对该特征点的历史管线数据进行多源对比，获得最终的待生成数据，该特征点为管线的特征部位，该待生成数据包括同一特征点中被标记的存在差异的多源数据；三维模型获得模块，用于将该待生成数据转化为
CAD
三维模型，该
CAD
三维模型包括被标记的部位
。
[0021]第三方面，本申请实施例提供了一种多源数据自动建模系统，该一种多源数据自
动建模系统包括：一个或多个处理器和存储器；该存储器与该一个或多个处理器耦合，该存储器用于存储计算机程序代码，该计算机程序代码包括计算机指令，该一个或多个处理器调用该计算机指令以使得该一种多源数据自动建模系统执行如第一方面以及第一方面中任一可能的实本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种基于多源数据自动建模方法，其特征在于，所述方法包括：将获取到的
CAD
文件进行格式转换后，获得统一文件；从所述统一文件中提取待训练数据信息；将所述待训练数据信息输入算法模型进行训练后，对所述算法模型进行调优；在选择所述算法模型通过图像识别区分特征点后，对所述特征点的历史管线数据进行多源对比，获得最终的待生成数据，所述特征点为管线的特征部位，所述待生成数据包括同一特征点中被标记的存在差异的多源数据；将所述待生成数据转化为
CAD
三维模型，所述
CAD
三维模型包括被标记的部位
。2.
根据权利要求1所述的方法，其特征在于，所述将获取到的
CAD
文件进行格式转换后，获得统一文件的步骤之前，还包括：将所述
CAD
文件转化为
json
格式，获得统一格式；从所述统一格式中通过设定渠道抓取重要信息，所述设定渠道包括相似匹配或
nlp
自然语言处理，所述重要信息包括所述
CAD
文件中的文字信息
、
图像信息和标注尺寸信息
。3.
根据权利要求1所述的方法，其特征在于，所述从所述统一文件中提取待训练数据信息的步骤，具体包括：将所述统一文件中的待查数据与数据模板中的数据指标进行比对；检测所述待查数据是否在所述数据指标的容错范围内；若不在所述容错范围内，则判定所述待查数据为错误数据，将所述待查数据去除；若在所述容错范围内，则判定所述待查数据为正确数据，保留所述待查数据后确定待训练数据信息
。4.
根据权利要求1所述的方法，其特征在于，所述从所述统一文件中提取待训练数据信息的步骤，具体包括：检测所述统一文件中的重复数据；将所述重复数据去除
。5.
根据权利要求1所述的方法，其特征在于，所述在选择所述算法模型通过图像识别区分特征点后，对所述特征点的历史管线数据进行多源对比，获得最终的待生成数据的步骤，具体包括：通过图像识别获得特征点图像；对所述特征点图像进行预处理，获得图像数据，所述预处理包括图像的缩放
、<...

【专利技术属性】
技术研发人员：姜卓玮，曹俊，刘德骏，刘凯文，黄侃，孟校龙，王舒雨，朱莹莹，金文勋，杨矞皇，林济海，
申请(专利权)人：上海非开挖信息工程技术有限公司，
类型：发明
国别省市：