【技术实现步骤摘要】
本申请属于数据处理领域,尤其涉及一种深度学习模型存储一致性方法、计算子系统以及计算平台。
技术介绍
1、目前,为提升各个产业、各个领域的智能化应用普及程度,亟待构建一种智能化计算平台,用以辅助智能超算中心的建设,为科研、产业、城市服务提供人工智能平台的构建基础,进一步通过智能化计算平台实现人才聚集、产业升级、发展。
2、深度学习是机器学习的一个分支,它利用多层的人工神经网络来模拟人类的学习过程。深度学习模型通常需要大量的数据进行训练,因此,分布式训练成为了一种有效的解决方案。分布式训练可以将训练任务分配到多个计算节点上并行执行,从而大大提高训练效率。
3、然而,相关技术中,为解决分布式系统中数据不一致问题,提出了一致性存储技术。这种技术通过在多个计算节点之间复制数据,并维护数据的一致性状态,从而保证每个计算节点上的数据都是相同的。现有的一致性存储技术在处理大规模数据时,可能会出现性能瓶颈,影响训练效率。现有技术中,为了解决分布式训练中的数据一致性问题,主要是通过引入协调节点来管理所有计算节点的数据更新。但是,引入
...【技术保护点】
1.一种深度学习模型存储一致性方法,其特征在于,应用于深度学习模型的计算子系统中,所述计算子系统至少包括多个分布式节点;所述方法包括:
2.根据权利要求1所述的深度学习模型存储一致性方法,其特征在于,所述动态参数分发模型至少包括:当前状态监测层、决策引擎、动态门限计算层、参数调整层;
3.根据权利要求2所述的深度学习模型存储一致性方法,其特征在于,所述动态参数分发模型还包括:历史数据分析层;
4.根据权利要求2所述的深度学习模型存储一致性方法,其特征在于,所述选取与所述提议信息以及所述节点连接结构所匹配的提议响应决策策略,包括:
...【技术特征摘要】
1.一种深度学习模型存储一致性方法,其特征在于,应用于深度学习模型的计算子系统中,所述计算子系统至少包括多个分布式节点;所述方法包括:
2.根据权利要求1所述的深度学习模型存储一致性方法,其特征在于,所述动态参数分发模型至少包括:当前状态监测层、决策引擎、动态门限计算层、参数调整层;
3.根据权利要求2所述的深度学习模型存储一致性方法,其特征在于,所述动态参数分发模型还包括:历史数据分析层;
4.根据权利要求2所述的深度学习模型存储一致性方法,其特征在于,所述选取与所述提议信息以及所述节点连接结构所匹配的提议响应决策策略,包括:
5.根据权利要求4所述的深度学习模型存储一致性方法,其特征在于,多种提议响应决策策略至少...
【专利技术属性】
技术研发人员:邓练兵,巩志国,官全龙,王岩,
申请(专利权)人:广东琴智科技研究院有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。