当前位置: 首页 > 专利查询>北京大学专利>正文

一种多模态大模型的自适应训练与推理性能优化系统技术方案

技术编号:42671844 阅读:14 留言:0更新日期:2024-09-10 12:25
本发明专利技术提供了一种多模态大模型的自适应训练与推理性能优化系统,涉及电数字数据处理领域,包括多模态数据监测模块、模型框架解析模块、对接协议模块和推理优化模块,所述多模态数据监测模块用于监测多模态数据的特征信息,所述模型框架解析模块用于解析训练模型的框架信息并获取训练过程的特征信息,所述对接协议模块用于设置与训练系统的对接方式以及对训练模型的调整方式,所述推理优化模块基于特征信息以及修改方式对训练模型进行优化处理;本系统能够与模型训练系统进行对接,对模型训练系统的训练过程进行监测并分析,对训练框架进行推理性优化,提高对接系统的训练效率。

【技术实现步骤摘要】

本专利技术涉及电数字数据处理领域,具体涉及一种多模态大模型的自适应训练与推理性能优化系统


技术介绍

1、随着人工智能技术的发展,各种大模型训练系统逐渐应用于各类场合,在现有技术中,通过训练大模型能够自动对模型中的参数进行优化,实现最终的模型功能,但针对模型本身框架的优化,仍需要人为进行,因此,需要一种能够对模型框架进行优化的系统,通过与训练系统的对接来自动化完成模型优化,提高训练系统的训练效率。

2、
技术介绍
的前述论述仅意图便于理解本专利技术。此论述并不认可或承认提及的材料中的任一种公共常识的一部分。

3、现在已经开发出了很多模型优化系统,经过大量的检索与参考,发现现有的模型优化系统有如公开号为cn116561542b所公开的系统,这些系统方法一般包括:数据采集模块基于数据采集配置获取多模态数据;数据评估模块基于为不同模态数据匹配的模型评估标准配置,确定多模态数据与大语言模型之间的匹配程度得到数据质量评估报告;模型训练模块根据数据质量评估报告,调整大语言模型的模型结构和/或训练超参数,生成模型训练需求信息;模型训练反馈模块基于模型本文档来自技高网...

【技术保护点】

1.一种多模态大模型的自适应训练与推理性能优化系统,其特征在于,包括多模态数据监测模块、模型框架解析模块、对接协议模块和推理优化模块;

2.如权利要求1所述的一种多模态大模型的自适应训练与推理性能优化系统,其特征在于,所述数据监测单元包括初始监测处理器、训练监测处理器和数据复制处理器,所述初始监测处理器用于与训练系统的数据输入接口进行对接并对输入的数据进行监测,所述训练检测处理器用于与训练模型的数据输入接口进行对接并对输入的数据进行监测,所述数据复制处理器用于对监测的数据进行复制。

3.如权利要求2所述的一种多模态大模型的自适应训练与推理性能优化系统,其特征在于,...

【技术特征摘要】

1.一种多模态大模型的自适应训练与推理性能优化系统,其特征在于,包括多模态数据监测模块、模型框架解析模块、对接协议模块和推理优化模块;

2.如权利要求1所述的一种多模态大模型的自适应训练与推理性能优化系统,其特征在于,所述数据监测单元包括初始监测处理器、训练监测处理器和数据复制处理器,所述初始监测处理器用于与训练系统的数据输入接口进行对接并对输入的数据进行监测,所述训练检测处理器用于与训练模型的数据输入接口进行对接并对输入的数据进行监测,所述数据复制处理器用于对监测的数据进行复制。

3.如权利要求2所述的一种多模态大模型的自适应训练与推理性能优化系统,其特征在于,所述推理分析单元包括数据解析处理器、性能评...

【专利技术属性】
技术研发人员:孙基男
申请(专利权)人:北京大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1