模型的处理方法、装置、电子设备及存储介质制造方法及图纸

技术编号:33853727 阅读:13 留言:0更新日期:2022-06-18 10:40
本申请提供一种模型的处理方法、装置、电子设备及存储介质。该方法包括:获取待处理模型的元数据文件;将元数据文件和待处理模型对应的模型文件存储至预设位置,以生成目标模型制品,并且该目标模型制品符合OCI标准;将该目标模型制品推送至远程仓库中。本申请中,符合OCI标准的目标模型制品可以借助已有的符合OCI分发规范的仓库来实现不同类型的模型数据的存储、权限、复制和分发等能力,可以节约研发成本。同时,元数据文件和模型文件存放在一起,避免了使用第三方SDK存储模型文件,便于模型元数据文件和模型文件的维护。元数据文件和模型文件的维护。元数据文件和模型文件的维护。

【技术实现步骤摘要】
模型的处理方法、装置、电子设备及存储介质


[0001]本申请涉及数据处理
,尤其涉及一种模型的处理方法、装置、电子设备及存储介质。

技术介绍

[0002]模型仓库,全功能人工智能(Artificial Intelligence,AI)开发平台,面向企业和个人开发者的机器学习集成开发环境,帮助用户更快构建、训练和部署AI模型,助力企业快速构建高精度AI应用。开放容器计划(Open Container Initiative,OCI)是一个开放的治理组织,其目的是围绕容器格式和运行时创建开放的行业标准。AI模型制品定义了算法的模型文件和相应的元数据信息,主要用于模型部署平台发布模型服务及分发模型制品等场景。
[0003]现有的模型仓库,模型元数据文件一般存放在关系型数据库中,模型文件存放到硬盘中或者第三方的存储产品中。开发人员除了需要维护元数据文件和模型文件之间的关系,还需要开发新功能或者熟悉第三方软件开发工具包(Software Development Kit,SDK)来维护模型文件。
[0004]然而,开发新功能或使用第三方SDK来维护模型文件以及维护元数据文件和模型文件之间的关系,研发成本高,且不易于维护。

技术实现思路

[0005]本申请提供一种模型的处理方法、装置、电子设备及存储介质,用以解决现有技术中维护模型文件以及维护元数据文件和模型文件之间的关系时,研发成本高且不易于维护的问题。
[0006]第一方面,本申请提供一种模型的处理方法,包括:
[0007]获取待处理模型的元数据文件。
[0008]将元数据文件和待处理模型对应的模型文件存储至预设位置,以生成目标模型制品,目标模型制品符合OCI标准。
[0009]将目标模型制品推送至远程仓库中。
[0010]可选的,将待处理模型对应的模型文件存储至预设位置,包括:
[0011]对模型文件进行压缩,得到压缩后的模型文件。
[0012]将压缩后的模型文件存储至预设位置。
[0013]可选的,获取待处理模型的元数据文件,包括:
[0014]获取预设的模板文件,模板文件中的元数据项可动态扩展。
[0015]根据模板文件,生成待处理模型的元数据文件。
[0016]可选的,将目标模型制品推送至远程仓库中,包括:
[0017]获取认证信息,认证信息中包括账号信息和密码。
[0018]根据认证信息,与远程仓库建立连接,并将目标模型制品推送至远程仓库中。
[0019]可选的,将目标模型制品推送至远程仓库中,包括:
[0020]确定目标模型制品对应的第一功能类型。
[0021]将目标模型制品,以及目标模型制品对应的第一功能类型推送至远程仓库。
[0022]可选的,该方法还包括:
[0023]获取数据处理请求,数据处理请求中包括待处理数据。
[0024]根据数据处理请求,从远程仓库中获取第一模型制品,第一模型制品为除第一终端之外的第二终端推送至远程仓库的。
[0025]根据第一模型制品对待处理数据进行处理。
[0026]可选的,根据数据处理请求,从远程仓库中获取第一模型制品,包括:
[0027]确定数据处理请求对应的第二功能类型。
[0028]根据预设的功能类型和模型制品之间的对应关系,确定与第二功能类型对应的第一模型制品。
[0029]第二方面,本申请提供一种模型的处理装置,包括:
[0030]获取模块,用于获取待处理模型的元数据文件。
[0031]生成模块,用于将元数据文件和待处理模型对应的模型文件存储至预设位置,以生成目标模型制品,该目标模型制品符合OCI标准。
[0032]推送模块,用于将目标模型制品推送至远程仓库中。
[0033]可选的,生成模块,具体用于:
[0034]对模型文件进行压缩,得到压缩后的模型文件。
[0035]将压缩后的模型文件存储至预设位置。
[0036]可选的,获取模块,具体用于:
[0037]获取预设的模板文件,模板文件中的元数据项可动态扩展。
[0038]根据模板文件,生成待处理模型的元数据文件。
[0039]可选的,推送模块,具体用于:
[0040]获取认证信息,认证信息中包括账号信息和密码。
[0041]根据认证信息,与远程仓库建立连接,并将目标模型制品推送至远程仓库中。
[0042]可选的,推送模块,具体用于:
[0043]确定目标模型制品对应的第一功能类型。
[0044]将目标模型制品,以及目标模型制品对应的第一功能类型推送至远程仓库。
[0045]可选的,该装置还包括处理模块。
[0046]获取模块,还用于:
[0047]获取数据处理请求,数据处理请求中包括待处理数据。
[0048]根据数据处理请求,从远程仓库中获取第一模型制品,第一模型制品为除第一终端之外的第二终端推送至远程仓库的。
[0049]处理模块,用于根据第一模型制品对待处理数据进行处理。
[0050]可选的,处理模块,具体用于:
[0051]确定数据处理请求对应的第二功能类型。
[0052]根据预设的功能类型和模型制品之间的对应关系,确定与第二功能类型对应的第一模型制品。
[0053]第三方面,本申请提供一种电子设备,包括:存储器和处理器。
[0054]存储器,用于存储计算机程序。
[0055]处理器,用于读取存储器存储的计算机程序,并根据存储器中的计算机程序执行上述第一方面的模型的处理方法。
[0056]第四方面,本申请提供一种可读存储介质,其上存储有计算机程序,其特征在于,计算机程序中存储有计算机执行指令,计算机执行指令被处理器执行时用于实现如上述第一方面的模型的处理方法。
[0057]第五方面,一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时,用于实现上述第一方面的模型的处理方法。
[0058]本申请提供的模型的处理方法、装置、电子设备及存储介质,通过获取待处理模型的元数据文件,将元数据文件和待处理模型对应的模型文件存储至预设位置,以生成目标模型制品,目标模型制品符合OCI标准,最后将目标模型制品推送至远程仓库中。本方法中,符合OCI标准的目标模型制品可以借助已有的符合OCI分发规范的仓库来实现不同类型的模型数据的存储、权限、复制和分发等能力,可以节约研发成本。同时,元数据文件和模型文件存放在一起,避免了使用第三方SDK存储模型文件,便于模型元数据文件和模型文件的维护。
附图说明
[0059]图1为本申请实施例提供的一种模型的处理方法的系统架构图;
[0060]图2为本申请实施例提供的一种模型的处理方法的流程示意图;
[0061]图3为本申请实施例提供的一种模型的处理装置的结构示意图;
[0062]本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种模型的处理方法,其特征在于,应用于第一终端,所述方法包括:获取待处理模型的元数据文件;将所述元数据文件和所述待处理模型对应的模型文件存储至预设位置,以生成目标模型制品,所述目标模型制品符合OCI标准;将所述目标模型制品推送至远程仓库中。2.根据权利要求1所述的方法,其特征在于,将所述待处理模型对应的模型文件存储至预设位置,包括:对所述模型文件进行压缩,得到压缩后的模型文件;将所述压缩后的模型文件存储至所述预设位置。3.根据权利要求1或2所述的方法,其特征在于,所述获取待处理模型的元数据文件,包括:获取预设的模板文件,所述模板文件中的元数据项可动态扩展;根据所述模板文件,生成所述待处理模型的所述元数据文件。4.根据权利要求1或2所述的方法,其特征在于,所述将所述目标模型制品推送至远程仓库中,包括:获取认证信息,所述认证信息中包括账号信息和密码;根据所述认证信息,与所述远程仓库建立连接,并将所述目标模型制品推送至所述远程仓库中。5.根据权利要求1或2所述的方法,其特征在于,所述将所述目标模型制品推送至远程仓库中,包括:确定所述目标模型制品对应的第一功能类型;将所述目标模型制品,以及所述目标模型制品对应的第一功能类型推送至所述远程仓库。6.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:获取数据处理请求,所述数据处理请求中包括待...

【专利技术属性】
技术研发人员:岳永强魏正迪
申请(专利权)人:中国建设银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1