一种实现模型管理的方法、装置、计算机存储介质及终端制造方法及图纸

技术编号:23400528 阅读:24 留言:0更新日期:2020-02-22 12:44
一种实现模型管理的方法、装置、计算机存储介质及终端,包括:按照预设策略存储已有的各模型文件;从存储的模型文件中选择用于对待预测文本进行预测的模型文件;通过加载选择的模型文件对待预测文本进行预测处理。本发明专利技术实施例通过对模型文件进行统筹调用,提升了自然语言处理对任务的处理效率。

A method, device, computer storage medium and terminal for model management

【技术实现步骤摘要】
一种实现模型管理的方法、装置、计算机存储介质及终端
本文涉及但不限于人工智能技术,尤指一种实现模型管理的方法、装置、计算机存储介质及终端。
技术介绍
自然语言处理是人工智能领域中的一个重要方向,是研究计算机处理人类语言的一门技术。与一般的机器学习过程不同,自然语言处理的工作有很大一部分集中在包括分词、词性标注、去停用词等语料预处理。由于中文文本词语之间没有明显的空格标记、句子以字符串的形式出现、语料存在短文本或长文本等不同的形式,因此,如分词、文本标注等预处理在中文文本的自然语言处理中占较大比例的工作。自然语言处理的任务包括基础任务和高级任务;其中,基础任务包括:词向量、句法分析、中文分词、实体识别,关键词提取等;高级任务包括直接面向业务处理的任务包括自动摘要、文本分类、文本聚类、情感分析等。无论是基础任务和高级任务,一般都需要通过基于机器学习方法的模型来实现,模型的输入为由自然语言文本数据转化获得的词向量,输出为自然语言任务的目标。相关技术中自然语言处理的任务以单一形式进行,即每一项自然语言处理的任务都需要通过相应的任务模型来实现,这导致自然语言处理效率较低,如何提升自然语言处理对任务的处理效率成为一个有待解决的问题。
技术实现思路
以下是对本文详细描述的主题的概述。本概述并非是为了限制权利要求的保护范围。本专利技术实施例提供一种实现模型管理的方法、装置、计算机存储介质及终端,能够提升自然语言处理对任务的处理效率。本专利技术实施例提供了一种实现模型管理的方法,包括:按照预设策略存储已有的各模型文件;从存储的模型文件中选择用于对待预测文本进行预测的模型文件;通过加载选择的模型文件对待预测文本进行预测处理。在一种示例性实施例中,所述从存储的模型文件中选择用于对待预测文本进行预测的模型文件,包括:根据各所述模型文件的模型相关信息,确定存储的模型文件中是否包含可用于对所述待预测文本进行预测的模型文件;将确定的所述可用于对所述待预测文本进行预测的模型文件,选定为用于对所述待预测文本进行预测的模型文件;其中,所述模型相关信息包括以下一项或任意组合的信息:名称、类别、及描述信息。在一种示例性实施例中,所述确定存储的模型文件中不包含可用于对所述待预测文本进行预测的模型文件时,所述方法还包括:读取预设的训练文件;将读取的所述训练文件结合预先配置的机器学习算法,训练获得模型文件;其中,所述训练文件包括:用于生成可用于对所述待预测文本进行预测的模型文件。在一种示例性实施例中,所述按照预设策略存储已有的各模型文件,包括:根据各所述模型文件的类别,为已有的各所述模型文件分别设置相应的文件目录;根据为各所述模型文件设置的所述文件目录,存储各所述模型文件。另一方面,本专利技术实施例还提供一种实现模型管理的装置,包括:存储单元、选择单元及预测单元;其中,存储单元用于:按照预设策略存储已有的各模型文件;选择单元用于:从存储的模型文件中选择用于对待预测文本进行预测的模型文件;预测单元用于:通过加载选择的模型文件对待预测文本进行预测处理。在一种示例性实施例中,所述选择单元具体用于:根据各所述模型文件的模型相关信息,确定存储的模型文件中是否包含可用于对所述待预测文本进行预测的模型文件;将确定的所述可用于对所述待预测文本进行预测的模型文件,选定为用于对所述待预测文本进行预测的模型文件;其中,所述模型相关信息包括以下一项或任意组合的信息:名称、类别、及描述信息。在一种示例性实施例中,所述装置还包括训练单元,用于:读取预设的训练文件;将读取的所述训练文件结合预先配置的机器学习算法,训练获得模型文件;其中,所述训练文件包括:用于生成可用于对所述待预测文本进行预测的模型文件。在一种示例性实施例中,所述存储单元具体用于:根据各所述模型文件的类别,为已有的各所述模型文件分别设置相应的文件目录;根据为各所述模型文件设置的所述文件目录,存储各所述模型文件。再一方面,本专利技术实施例还提供一种计算机存储介质,所述计算机存储介质中存储有计算机程序,所述计算机程序被处理器执行时实现上述实现模型管理的方法。还一方面,本专利技术实施例还提供一种终端,包括:存储器和处理器,所述存储中保存有计算机程序;其中,处理器被配置为执行存储器中的计算机程序;所述计算机程序被所述处理器执行时实现如上述实现模型管理的方法。与相关技术相比,本申请技术方案包括:按照预设策略存储已有的各模型文件;从存储的模型文件中选择用于对待预测文本进行预测的模型文件;通过加载选择的模型文件对待预测文本进行预测处理。本专利技术实施例通过对模型文件进行统筹调用,提升了自然语言处理对任务的处理效率。本专利技术的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本专利技术而了解。本专利技术的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。附图说明附图用来提供对本专利技术技术方案的进一步理解,并且构成说明书的一部分,与本申请的实施例一起用于解释本专利技术的技术方案,并不构成对本专利技术技术方案的限制。图1为本专利技术实施例实现模型管理的方法的流程图;图2为本专利技术实施例实现模型管理的装置的结构框图。具体实施方式为使本专利技术的目的、技术方案和优点更加清楚明白,下文中将结合附图对本专利技术的实施例进行详细说明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互任意组合。在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行。并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。图1为本专利技术实施例实现模型管理的方法的流程图,如图1所示,包括:步骤101、按照预设策略存储已有的各模型文件;在一种示例性实施例中,所述按照预设策略存储已有的各模型文件,包括:根据各所述模型文件的类别,为已有的各所述模型文件分别设置相应的文件目录;根据为各所述模型文件设置的所述文件目录,存储各所述模型文件。步骤102、从存储的模型文件中选择用于对待预测文本进行预测的模型文件;在一种示例性实施例中,所述从存储的模型文件中选择用于对待预测文本进行预测的模型文件,包括:根据各所述模型文件的模型相关信息,确定存储的模型文件中是否包含可用于对所述待预测文本进行预测的模型文件;将确定的所述可用于对所述待预测文本进行预测的模型文件,选定为用于对所述待预测文本进行预测的模型文件;其中,所述模型相关信息包括以下一项或任意组合的信息:名称、类别、及描述信息。在一种示例性实施例中,确定存储的模型文件中是否包含可用于对所述待预测文本进行预测的模型文本文档来自技高网...

【技术保护点】
1.一种实现模型管理的方法,包括:/n按照预设策略存储已有的各模型文件;/n从存储的模型文件中选择用于对待预测文本进行预测的模型文件;/n通过加载选择的模型文件对待预测文本进行预测处理。/n

【技术特征摘要】
1.一种实现模型管理的方法,包括:
按照预设策略存储已有的各模型文件;
从存储的模型文件中选择用于对待预测文本进行预测的模型文件;
通过加载选择的模型文件对待预测文本进行预测处理。


2.根据权利要求1所述的方法,其特征在于,所述从存储的模型文件中选择用于对待预测文本进行预测的模型文件,包括:
根据各所述模型文件的模型相关信息,确定存储的模型文件中是否包含可用于对所述待预测文本进行预测的模型文件;
将确定的所述可用于对所述待预测文本进行预测的模型文件,选定为用于对所述待预测文本进行预测的模型文件;
其中,所述模型相关信息包括以下一项或任意组合的信息:名称、类别、及描述信息。


3.根据权利要求2所述的方法,其特征在于,所述确定存储的模型文件中不包含可用于对所述待预测文本进行预测的模型文件时,所述方法还包括:
读取预设的训练文件;
将读取的所述训练文件结合预先配置的机器学习算法,训练获得模型文件;
其中,所述训练文件包括:用于生成可用于对所述待预测文本进行预测的模型文件。


4.根据权利要求1~3任一项所述的方法,其特征在于,所述按照预设策略存储已有的各模型文件,包括:
根据各所述模型文件的类别,为已有的各所述模型文件分别设置相应的文件目录;
根据为各所述模型文件设置的所述文件目录,存储各所述模型文件。


5.一种实现模型管理的装置,包括:存储单元、选择单元及预测单元;其中,
存储单元用于:按照预设策略存储已有的各模型文件;
选择单元用于:从存储的模型文件...

【专利技术属性】
技术研发人员:丁中正袁灿于政
申请(专利权)人:北京明略软件系统有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1