一种无人集群中认知协同赋能的智能体单元制造技术

本发明专利技术公开了一种无人集群系统中具备认知协同能力的智能体单元，通过对集群智能体单元进行功能任务的层级划分，由底向上构建了智能体单元的反射层、任务执行层、协商层、集群协同层、元认知层，其中反射层与任务执行层构成了智能体单元的底层快速反应与任务执行机构，协商层、集群协同层、元认知层构成了智能体单元顶层的任务规划与训练学习的认知协同机构。本发明专利技术提供了一种层级化、通用化、智能化的集群智能体构架，用以解决现有集群中智能体单元认知能力低、协同能力弱、功能难以扩展升级的缺点。

【技术实现步骤摘要】
一种无人集群中认知协同赋能的智能体单元
本专利技术属于人工智能中群体智能领域，具体为一种无人集群中认知协同赋能的智能体单元。
技术介绍
近些年人工智能技术取得了巨大的发展，群体智能(SwarmIntelligence，SI)是人工智能技术的一种，是指在集群中存在众多的智能体(Agent)单元，这些智能体单元之间通过简单的相互协作，从而使得整个群体表现出智能行为。群体智能技术有着众多的应用方向，尤其是在国防军事领域。利用智能无人集群技术对传统武器装备进行升级改造或深度融合，衍生了诸如无人飞机集群、无人战车集群、无人水面舰艇集群等种类丰富、功能独特的武器装备系统。智能无人集群具备体积小质量轻、数量多规模大、种类多样式全特点，拥有去中心化自组织、灵活机动、隐蔽性好、快速部署、造价低等优势。智能无人集群技术不是某项单一技术，而是无人控制、群体智能、人工智能、无线移动网络等多种相关技术的综合运用。群体中智能体单元的设计与构建是现今智能无人集群作战系统所面临的关键技术难点。现有集群中智能体单元认知能力低、协同能力弱、功能难以升级扩展。
技术实现思路
本专利技术的目的在于提出了一种无人集群中认知协同赋能的智能体单元，用以解决现有集群中智能体单元认知能力低、协同能力弱、功能难以升级扩展的缺点。实现本专利技术目的的技术方案为：一种无人集群中认知协同赋能的智能体单元，包括传感单元、执行单元、反射层、任务执行层、协商层、集群协同层、元认知层，所述传感单元用于获取外界环境信息，所述反射层用于根据各传感单元采集的信息发送动作指令至执行单元，所述任务执行层根据外界环境信息以及反射层的状态信息生成智能体集群的状态信息、目标任务信息、地理空间信息、电磁态势信息，并根据协商层下达的任务完成任务调度及资源分配，所述协商层用于进行信息融合与特征提取，并生成任务执行列表；所述用于实现外界与底层信息的综合存储，网络训练更新，集群智能体单元之间的互相学习以及强化学习器的认知传递，所述元认知层用于实现认知综合与传递。优选地，所述反射层包括第一信息综合模块、有限状态机以及快速反应模块，所述第一信息综合模块接收传感单元的机体运动姿态、外界障碍位置信息并进行融合，有限状态机根据融合的信息快速下达动作指令，所述快速反应模块接收动作指令，协调执行单元完成相应动作。优选地，所述任务执行层包括第二信息综合模块、任务调度模块、资源分配模块，所述第二信息综合模块接收传感单元的外界环境信息与反射层综合的状态信息并进行综合处理，生成智能体集群的状态信息、目标任务信息、地理空间信息、电磁态势信息提供给等待执行列表，任务调度模块根据任务的重要等级、时效性、执行状态进行任务的调度安排，资源分配器根据计算能力、功率限制、武器损耗、电磁频谱的消耗情况对各项任务进行相应的资源分配，并通过执行单元的合作完成各项任务的执行。优选地，所述第三信息综合模块接收任务执行层综合的任务执行信息、智能体状态信息、外界环境信息，进行多元信息融合与特征提取，并将上述融合的信息作为任务决策网络的输入，决策网络根据任务执行累积收益最大化原则，生成任务执行列表，并下达给任务执行层，评估网络根据决策网络的任务安排，结合外界任务执行收益，对决策网络进行反馈与更新。优选地，所述集群协同层包括信息存储模块、强化学习器、协同接口和认知接口，存储模块用于记录协商层综合的智能体状态信息、地理空间信息、电磁态势信息、目标任务信息、任务执行信息；强化学习器根据存储模块存储的信息对决策网络与评估网络进行训练更新，并通过协同接口进行经验数据共享、决策网络升级、评估网络修正，同时强化学习器对存储模块进行相应的数据更新。优选地，所述元认知层包括信息提炼模块与元学习器，所述信息提炼模块通过集群协同层存储的外界环境、下层状态、智能体单元之间这三者信息进行进一步的提炼，元学习器在此基础上对集群协同层的强化学习器进行升级。本专利技术与现有技术相比，其显著优点为：本专利技术包括五个层级，涉及了底层的动作反应、任务执行，和上层的任务规划、决策评估更新、学习器提升与协同互助，提供了一种层级化、通用化、智能化的集群单体构架，认知能力高、协同能力强。附图说明附图仅用于出示具体实施例的目的，而并不认为是对本专利技术的限制。图1为一个实施例中多层次自组织集群的水面作战场景示意图。图2为一个实施例中集群智能体单元的认知协同构架示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述。其中，附图构成本申请的一部分，并与本专利技术的实施例一起用于阐释本专利技术的原理，并非用于限定本专利技术的范围。本专利技术的一个具体实施例，公开了一种水面集群作战场景下具备认知协同能力的智能体单元。如图1所示，在作战指挥控制中心的安排下，划分了多个任务区域，任务区域中的集群由若干无人舰艇、无人飞行器构成，不同的无人装备负责探测、干扰、打击等多种作战任务。集群中同种类或异类的各智能体单元在任务执行的过程中从不同的时间空间中获得了差异化的信息，这些信息将用于智能体单元自身的学习、训练与互相之间的知识迁移、认知传递。如图2所示，一种无人集群中认知协同赋能的智能体单元，包括传感单元、执行单元、反射层、任务执行层、协商层、集群协同层、元认知层，所述传感单元用于获取外界环境信息，所述反射层用于根据各传感单元采集的信息发送动作指令至执行单元，所述任务执行层根据外界环境信息以及反射层的状态信息生成智能体集群的状态信息、目标任务信息、地理空间信息、电磁态势信息，并根据协商层下达的任务完成任务调度及资源分配，所述协商层用于进行信息融合与特征提取，并生成任务执行列表；所述用于实现外界与底层信息的综合存储，网络训练更新，集群智能体单元之间的互相学习以及强化学习器的认知传递，所述元认知层用于实现认知综合与传递。具体地，所述反射层包括第一信息综合模块、有限状态机以及快速反应模块，所述第一信息综合模块接收各传感单元的机体运动姿态、外界障碍位置等低层级信息并进行融合，有限状态机根据融合的信息快速下达姿态调整、障碍规避等相应动作指令。快速反应模块接收动作指令，协调执行单元完成相应动作，包含伺服驱动、姿态维持、障碍规避等底层基础性功能，不涉及任务级、协同级、认知级的高层次运作。进一步的实施例中，所述任务执行层包括第二信息综合模块、任务调度模块、资源分配模块，所述第二信息综合模块接收传感单元的外界环境信息与反射层综合的状态信息并进行综合处理，生成智能体集群的状态信息、目标任务信息、地理空间信息、电磁态势信息，提供给等待执行列表中相应任务，作为任务信息输入。其中外界环境信息包含邻域智能体位置、作战对象目标位置、脉冲描述等高层级信息。等待执行列表中候选任务由协商层下达指定，包括路径规划、电磁干扰、武器打击等共有或专有任务。任务调度模块根据任务的重要等级、时效性、执行状态等多方因素进行任务的调度安排，资源分配器根据计算能力、功率限制、武器损耗、电磁频谱等资源的消耗情况对各项任务进本文档来自技高网...

【技术保护点】
1.一种无人集群中认知协同赋能的智能体单元，其特征在于，包括传感单元、执行单元、反射层、任务执行层、协商层、集群协同层、元认知层，所述传感单元用于获取外界环境信息，所述反射层用于根据各传感单元采集的信息发送动作指令至执行单元，所述任务执行层根据外界环境信息以及反射层的状态信息生成智能体集群的状态信息、目标任务信息、地理空间信息、电磁态势信息，并根据协商层下达的任务完成任务调度及资源分配，所述协商层用于进行信息融合与特征提取，并生成任务执行列表；所述用于实现外界与底层信息的综合存储，网络训练更新，集群智能体单元之间的互相学习以及强化学习器的认知传递，所述元认知层用于实现认知综合与传递。/n

【技术特征摘要】
1.一种无人集群中认知协同赋能的智能体单元，其特征在于，包括传感单元、执行单元、反射层、任务执行层、协商层、集群协同层、元认知层，所述传感单元用于获取外界环境信息，所述反射层用于根据各传感单元采集的信息发送动作指令至执行单元，所述任务执行层根据外界环境信息以及反射层的状态信息生成智能体集群的状态信息、目标任务信息、地理空间信息、电磁态势信息，并根据协商层下达的任务完成任务调度及资源分配，所述协商层用于进行信息融合与特征提取，并生成任务执行列表；所述用于实现外界与底层信息的综合存储，网络训练更新，集群智能体单元之间的互相学习以及强化学习器的认知传递，所述元认知层用于实现认知综合与传递。


2.根据权利要求1所述的无人集群中认知协同赋能的智能体单元，其特征在于，所述反射层包括第一信息综合模块、有限状态机以及快速反应模块，所述第一信息综合模块接收传感单元的机体运动姿态、外界障碍位置信息并进行融合，有限状态机根据融合的信息快速下达动作指令，所述快速反应模块接收动作指令，协调执行单元完成相应动作。


3.根据权利要求1所述的无人集群中认知协同赋能的智能体单元，其特征在于，所述任务执行层包括第二信息综合模块、任务调度模块、资源分配模块，所述第二信息综合模块接收传感单元的外界环境信息与反射层综合的状态信息并进行综合处理，生成智能体集群的状态信息、目标任务信息、地理空间信息、电磁态势信息提供给等待执行列表，任务调度模块根据任务的重要等级、时效...

【专利技术属性】
技术研发人员：童真，柴恒，石远东，黎仁刚，李宏圆，
申请(专利权)人：中国船舶重工集团公司第七二三研究所，
类型：发明
国别省市：江苏;32