一种制造过程智能化处理方法及装置制造方法及图纸

本发明专利技术公开了一种制造过程智能化处理方法及装置。所述制造过程智能化处理方法，包括：根据制造过程所包含的单元体设计多个智能体；其中，所述智能体包括系统管理智能体、接口智能体、车间控制智能体和设备智能体；构建多智能体分布式控制模型；其中，所述多智能体分布式控制模型分为第一控制层和第二控制层，所述第一控制层包括所述系统管理智能体和所述接口智能体，所述第二控制层包括所述车间控制智能体和所述设备智能体；基于DS_MADDPG强化学习算法，对所述多智能体分布式控制模型的控制策略进行整体协调。本发明专利技术能够在制造过程中协同控制多个智能体，满足变批量多品种的生产需求。

【技术实现步骤摘要】
一种制造过程智能化处理方法及装置
本专利技术涉及智能制造
，尤其涉及一种制造过程智能化处理方法及装置。
技术介绍
近年来，随着个性化产品需求量的不断增加，传统的制造方式已经不能满足变批量多品种的生产需求，制造过程智能化成为新时代制造业的发展趋势。制造过程智能化，就是将信息化融合到制造过程当中，使用信息系统而非人力来管理制造过程。但我国对智能制造
的研究仍停留在中低阶段，现有的多智能体控制模型按结构分为集中式模型、分层递阶式模型和分布式模型。集中式模型可以实现系统全局优化和整体协调，但容错能力低，一旦中央控制计算机发生故障，将导致整个系统瘫痪；分层递阶模型采用上下层子系统主从控制，从局部上看还是集中式结构，同样存在集中式模型的缺陷；分布式模型的各个子系统相对独立，可以实现局部优化，但难以实现系统全局优化和整体协调。应用现有的多智能体控制模型，难以针对变批量多品种的生产需求协同控制多个智能体，无法保障资源的合理利用和最大化配置。因此，如何在制造过程中协同控制多个智能体，满足变批量多品种的生产需求，成为当前推进制造过程智能化所亟需解决的一本文档来自技高网...

【技术保护点】
1.一种制造过程智能化处理方法，其特征在于，包括：/n根据制造过程所包含的单元体设计多个智能体；其中，所述智能体包括系统管理智能体、接口智能体、车间控制智能体和设备智能体；/n构建多智能体分布式控制模型；其中，所述多智能体分布式控制模型分为第一控制层和第二控制层，所述第一控制层包括所述系统管理智能体和所述接口智能体，所述第二控制层包括所述车间控制智能体和所述设备智能体；/n基于DS_MADDPG强化学习算法，对所述多智能体分布式控制模型的控制策略进行整体协调。/n

【技术特征摘要】
1.一种制造过程智能化处理方法，其特征在于，包括：
根据制造过程所包含的单元体设计多个智能体；其中，所述智能体包括系统管理智能体、接口智能体、车间控制智能体和设备智能体；
构建多智能体分布式控制模型；其中，所述多智能体分布式控制模型分为第一控制层和第二控制层，所述第一控制层包括所述系统管理智能体和所述接口智能体，所述第二控制层包括所述车间控制智能体和所述设备智能体；
基于DS_MADDPG强化学习算法，对所述多智能体分布式控制模型的控制策略进行整体协调。


2.如权利要求1所述的制造过程智能化处理方法，其特征在于，所述构建多智能体分布式控制模型，具体为：
将所述接口智能体与外部信息系统进行通信连接，使所述接口智能体获取外部信息；
将所述接口智能体与所述系统管理智能体进行通信连接，使所述系统管理智能体管理所述外部信息；
将所述系统管理智能体与所述车间控制智能体进行通信连接，使所述系统管理智能体调度并监控所述车间控制智能体；
将所述车间智能体与所述设备智能体进行通信连接，使所述车间智能体调度并监控所述设备智能体。


3.如权利要求1所述的制造过程智能化处理方法，其特征在于，所述基于DS_MADDPG强化学习算法，对所述多智能体分布式控制模型的控制策略进行整体协调，具体为：
使用多核多线程创建多个并行工作线程环境；
将从经验池中采样得到的批量数据分发给多个所述智能体处理；
计算所有所述智能体的网络损失，选择具有损失最大的所述批量数据作为全局网络的输入数据；
调整中心化网络的评价模式，使所述中心化网络输出一个预设值；
选定去中心化网络的评估方式，采用n步TD-error更新所述全局网络。


4.如权利要求1所述的制造过程智能化处理方法，其特征在于，在所述根据制造过程所包含的单元体设计多个智能体之前，还包括：

【专利技术属性】
技术研发人员：杜翠凤，蒋仕宝，周芳华，
申请(专利权)人：广州杰赛科技股份有限公司，
类型：发明
国别省市：广东;44