一种模型训练部署系统与方法技术方案

本发明专利技术公开了一种模型训练部署系统，包括：数据管理模块，用于导入原始数据，并对原始数据进行预处理得到最终数据；标注审核模块，用于基于最终数据进行标注得到初始标注数据，并对初始标注数据进行标注质量监控，调整异常标注数据得到最终标注数据；模型训练模块，基于最优优化器和最优模型参数对模型结构进行优化得到新模型结构，基于最终标注数据对新模型结构进行训练得到训练好的模型并进行压缩得到轻量化模型；模型部署模块，用于基于轻量化模型选择最优模型并进行服务化封装，对模型服务进行声明式定义，调整模型服务所需资源，将封装后的模型进行无损发布，并在故障时自动恢复。简单的实现了数据标注、模型训练以及模型部署。

【技术实现步骤摘要】

本专利技术涉及模型训练，更具体的说是涉及一种模型训练部署系统与方法。

技术介绍

1、传统模型训练中，数据收集和整理通常需要大量的人工操作，效率低下且容易出错，尤其是传输大文件时容易因为网络中断造成的文件错误、文件重复；同时，传统的数据标注往往需要大量的人力投入，且标注质量参差不齐，无法很好地协同多个标注员同时进行标注，人工审核繁琐；在模型训练过程中，用户通常需要手动配置训练参数，选择合适的模型，这对普通用户来说具有较高的技术门槛。

2、因此，如何简单的实现数据标注、模型训练与选择以及模型部署是本领域技术人员亟需解决的问题。

技术实现思路

1、有鉴于此，本专利技术提供了一种模型训练部署系统与方法，有效地解决了传统模型开发中数据管理繁琐、人工标注效率低、模型训练与选择复杂以及模型部署复杂的问题，为企业和个人开发者的应用提高了便利性和效率。

2、为了实现上述目的，本专利技术采用如下技术方案：

3、一种模型训练部署系统，包括：数据管理模块、标注审核模块、模型训练模块和模型部署模块；本文档来自技高网...

【技术保护点】

1.一种模型训练部署系统，其特征在于，包括：数据管理模块、标注审核模块、模型训练模块和模型部署模块；

2.根据权利要求1所述的一种模型训练部署系统，其特征在于，所述数据管理模块，包括：数据导入单元、数据处理单元和数据关联单元；

3.根据权利要求2所述的一种模型训练部署系统，其特征在于，所述数据管理模块，还包括：数据存储单元；

4.根据权利要求1所述的一种模型训练部署系统，其特征在于，所述标注审核模块，包括：自动标注单元、协同标注单元和标注监控单元；

5.根据权利要求1所述的一种模型训练部署系统，其特征在于，所述模型训练模块，包括：计算资源调...

【技术特征摘要】

1.一种模型训练部署系统，其特征在于，包括：数据管理模块、标注审核模块、模型训练模块和模型部署模块；

2.根据权利要求1所述的一种模型训练部署系统，其特征在于，所述数据管理模块，包括：数据导入单元、数据处理单元和数据关联单元；

3.根据权利要求2所述的一种模型训练部署系统，其特征在于，所述数据管理模块，还包括：数据存储单元；

4.根据权利要求1所述的一种模型训练部署系统，其特征在于，所述标注审核模块，包括：自动标注单元、协同标注单元和标注监控单元；

5.根据权利要求1所述的一种模型训练部署系统，其特征在于，所述模型训练模块，包括：计算资源调度单元、优化器确定单元、模...

【专利技术属性】
技术研发人员：黄海涌，陈正明，蔡佳峰，王兆均，
申请(专利权)人：暗物智能科技广州有限公司，
类型：发明
国别省市：