基于多智能体强化学习的导管装配顺序优化方法技术

本发明专利技术涉及一种基于多智能体强化学习的导管装配顺序优化方法，属于质量与可靠性工程领域，其包括以下步骤：S1、基于导管装配引入多智能体强化学习框架，定义智能体及其状态空间；S2、定义智能体在状态空间内的动作空间；S3、定义智能体在各状态下采取指定动作对应的奖励函数，以及反映未来回报对当前决策影响程度的折扣因子；S4、定义各智能体在进行动作决策时的约束条件；S5、提出深度多智能体分层Q网络算法对导管装配顺序进行优化；S6、对导管装配位置优化方法进行验证。本发明专利技术提出了一种分层的深度多智能体Q网络算法，实现了装配顺序的优化，能够提升产品制造过程能力和质量的一致性和稳定性，为定量化技术支撑和决策提供依据。

【技术实现步骤摘要】

本专利技术属于质量与可靠性工程领域，特别涉及一种基于多智能体强化学习的导管装配顺序优化方法。

技术介绍

1、金属导管作为飞机的主要零件，大量应用在飞机液压、环控、燃油系统等关键部位，起到传递能源与动力的作用。当导管存在较大装配应力时，会导致管路发生漏气、漏油等现象，从而使飞机中各个系统发生失压、能源泄露、着火等故障，严重影响飞机系统的性能和安全。在导管的装配过程中，装配应力的大小受到多个因素的影响，包括导管的材料，安装时的预紧力，以及导管本身的设计参数等等。除去这些因素之外，导管的装配顺序也会影响装配应力。由于装配误差的存在，不当的装配顺序会导致装配误差的累积较大，如果某些导管过早安装，可能会对后续导管的定位和对齐产生影响，导致系统中的偏差逐渐增大，从而使得装配应力变大，导致整个系统的密封性能降低。因此在导管装配过程中，合理的装配顺序非常重要。

2、在导管装配过程中，若我们把某一时刻装配的导管的末端位置看作整个系统在当前时刻的状态，那么整个导管装配过程可以看作一个动态转移过程，每装配一根新的导管，其末端位置就会发生改变。在每个阶段，我们需要决策本文档来自技高网...

【技术保护点】

1.一种基于多智能体强化学习的导管装配顺序优化方法，其特征在于：该方法具体步骤如下：

2.根据权利要求1所述的基于多智能体强化学习的导管装配顺序优化方法，其特征在于：步骤S1具体包括以下子步骤：

3.根据权利要求1所述的基于多智能体强化学习的导管装配顺序优化方法，其特征在于：步骤S2具体包括以下子步骤：

4.根据权利要求1所述的基于多智能体强化学习的导管装配顺序优化方法，其特征在于：步骤S2中，总智能体Agenttot的动作atot(t)为：

5.根据权利要求1所述的基于多智能体强化学习的导管装配顺序优化方法，其特征在于：步骤S3具体包括以...

【技术特征摘要】

1.一种基于多智能体强化学习的导管装配顺序优化方法，其特征在于：该方法具体步骤如下：

2.根据权利要求1所述的基于多智能体强化学习的导管装配顺序优化方法，其特征在于：步骤s1具体包括以下子步骤：

3.根据权利要求1所述的基于多智能体强化学习的导管装配顺序优化方法，其特征在于：步骤s2具体包括以下子步骤：

4.根据权利要求1所述的基于多智能体强化学习的导管装配顺序优化方法，其特征在于：步骤s2中，总智能体agenttot的动作atot(t)为：

5.根据权利要求1所述的基于多智能体强化学习的导管装配顺序优化方法，其特征在于：步骤s3具体包括以下子步骤：

6.根据权利要求1所述的基于多智能体强化学习的导管装配顺序优化方法，其特征在于：步骤s4具体包括以下子步骤...

【专利技术属性】
技术研发人员：臧阳阳，梁昭磊，潘讯，常志刚，梁家贤，
申请(专利权)人：中国航空综合技术研究所，
类型：发明
国别省市：