基于云边协同架构的增量学习方法、装置、设备及介质制造方法及图纸

本发明专利技术提供一种基于云边协同架构的增量学习方法、装置、设备及介质，该方法包括：基于从各边缘节点收集的原始数据训练得到云端基础模型；基于各所述边缘节点的自有数据和所述云端基础模型，训练得到各所述边缘节点对应的边缘模型；对各所述边缘节点产生的增量数据进行筛选，得到增量数据集，所述增量数据是所述边缘节点基于所述边缘模型产生的；通过所述增量数据集对所述云端基础模型进行增量学习训练，得到更新后的云端基础模型。本发明专利技术通过云边协同架构，解决了模型泛化能力、模型准确率和推理时延三项重要指标难以同时满足业务需求的问题，通过云端训练策略保证云端基础模型在多个场景下能保持较好的泛化能力。在多个场景下能保持较好的泛化能力。在多个场景下能保持较好的泛化能力。

【技术实现步骤摘要】
基于云边协同架构的增量学习方法、装置、设备及介质


[0001]本专利技术涉及人工智能
，尤其涉及一种基于云边协同架构的增量学习方法、装置、设备及介质。

技术介绍

[0002]人工智能已经渗透到了工业生产的各个领域，在现阶段，计算机视觉技术在工业质检领域还存在较多的技术瓶颈，由于工业生产过程中各类机械高速运转，对人工智能算法的部署方式和推理时延带来了极大的挑战。目前，如何平衡模型泛化能力和准确率解决方案可以归纳为以下四类：1、云端训练，云端推理；2、云端训练，边缘推理；3、边缘训练，边缘推理；4、云边协同的联邦学习。
[0003]上述四种方法分别存在一定的局限性。首先采用云端训练，云端推理架构，在推理服务方面会存在较大的网络延迟问题，通常无法满足大部分工业级需求；采用云端训练，边缘推理架构，算法模型无法根据业务数据实时迭代更新，由于目标变量的统计特性通常会随时间发生变化，在使用一段时间后模型会出现漂移和退化现象；采用边缘训练，边缘推理架构，难以充分利用跨场景的共性数据，通过边缘算力训练模型效率较低，同时模型容易出现过拟合，泛化性能和本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于云边协同架构的增量学习方法，其特征在于，包括：基于从各边缘节点收集的原始数据训练得到云端基础模型；基于各所述边缘节点的自有数据和所述云端基础模型，训练得到各所述边缘节点对应的边缘模型；对各所述边缘节点产生的增量数据进行筛选，得到增量数据集，所述增量数据是所述边缘节点基于所述边缘模型产生的；通过所述增量数据集对所述云端基础模型进行增量学习训练，得到更新后的云端基础模型。2.根据权利要求1所述的基于云边协同架构的增量学习方法，其特征在于，所述基于从各边缘节点收集的原始数据训练得到云端基础模型包括：将带权聚焦损失函数作为神经网络优化的损失函数，基于梯度下降方法以及从各边缘节点收集的原始数据进行模型训练，得到云端基础模型。3.根据权利要求1所述的基于云边协同架构的增量学习方法，其特征在于，所述基于各所述边缘节点的自有数据和所述云端基础模型，训练得到各所述边缘节点对应的边缘模型包括：将所述云端基础模型下发到各所述边缘节点；冻结所述云端基础模型的骨干网络，将各所述边缘节点的自有数据作为模型训练输入；基于迁移学习方法和聚焦损失函数对所述云端基础模型进行小样本迁移学习，得到各所述边缘节点对应的边缘模型。4.根据权利要求1所述的基于云边协同架构的增量学习方法，其特征在于，所述基于各所述边缘节点的自有数据和所述云端基础模型，训练得到各所述边缘节点对应的边缘模型之后包括：将所述边缘节点在第一时间周期内产生的数据作为模型输入，通过增量学习方法更新所述边缘模型；将所述边缘节点在第二时间周期内产生的增量数据上传至云端服务器，所述第二时间周期为所述第一时间周期的正整数倍。5.根据权利要求1所述的基于云边协同架构的增量学习方法，其...

【专利技术属性】
技术研发人员：梁秉豪，崔洪志，张传刚，袁明明，
申请(专利权)人：浪潮通信信息系统有限公司，
类型：发明
国别省市：