基于人工智能可视化的对象定位方法及可视化监控系统技术方案

本申请实施例提供一种基于人工智能可视化的对象定位方法及可视化监控系统，通过将作业轨迹交互向量序列加载到对象行为预警决策网络，生成目标对象采集图像序列对应的对象异常行为预测数据，将对象异常行为预测数据和作业轨迹交互向量序列加载到对象异常行为迭代预测网络，该对象异常行为迭代预测网络中可包括预先训练的对象异常行为迭代权重值，该对象异常行为迭代权重值可以表征对象异常行为之间的迭代变化，可以精确生成与目标对象采集图像序列对应的对象异常行为分布图，通过结合对象行为预警决策网络与对象异常行为迭代预测网络，由此结合了对象异常行为的预测权重值以及对象异常行为之间的迭代变化权重值，极大提高异常行为预测的准确度。高异常行为预测的准确度。高异常行为预测的准确度。

【技术实现步骤摘要】
基于人工智能可视化的对象定位方法及可视化监控系统


[0001]本申请实施例涉及人工智能
，具体而言，涉及一种基于人工智能可视化的对象定位方法及可视化监控系统。

技术介绍

[0002]当前，针对各种工厂现场作业的安全监控操作正逐步向远程化、智能化、可视化转变。基于人工智能可视化的智能监控方案已经慢慢应用到工厂现场作业中，利用人工智能可视化技术，针对现场作业场景进行对象异常行为的预警，以降低安全事故的发生率。然而，相关技术中进行对象异常行为预警和定位过程中，没有考虑到对象异常行为之间的迭代变化，导致异常行为预测的准确度不够，进而影响对象定位的可靠性。

技术实现思路

[0003]为了至少克服现有技术中的上述不足，本申请实施例的目的在于提供一种基于人工智能可视化的对象定位方法及可视化监控系统。
[0004]依据本申请实施例的一个方面，提供了一种基于人工智能可视化的对象定位方法，包括：获取目标对象采集图像序列；对所述目标对象采集图像序列进行对象作业区域图像分割获得对象作业区域图像，对各个对象作业区域图像进行图像特征提取获得对应的作业轨迹交互向量，以输出作业轨迹交互向量序列；将作业轨迹交互向量序列加载到训练完成的对象行为预警决策网络，生成所述目标对象采集图像序列对应的对象异常行为预测数据，所述对象异常行为预测数据包括各种对象异常行为的预测权重值；将所述对象异常行为预测数据和作业轨迹交互向量序列加载到训练完成的对象异常行为迭代预测网络生成对应的对象异常行为分布图，所述训练完成的对象异常行为迭代预测网络包括预先进行迭代变化知识学习的对象异常行为迭代权重值；基于所述对象异常行为分布图确定所述目标对象采集图像序列对应的目标对象异常行为，并基于所述目标对象异常行为对对应的作业对象进行定位。
[0005]在第一方面的一种可能的实施方式中，所述将所述对象异常行为预测数据和作业轨迹交互向量序列加载到训练完成的对象异常行为迭代预测网络生成对应的对象异常行为分布图，所述训练完成的对象异常行为迭代预测网络包括预先进行迭代变化知识学习的对象异常行为迭代权重值，具体包括：将所述作业轨迹交互向量序列作为所述对象异常行为迭代预测网络的预测判别特征；获取预设权重值阵列，基于所述预设权重值阵列、对象异常行为预测数据和所述对象异常行为迭代权重值确定与所述预测判别特征对应的对象异常行为分布图。
[0006]在第一方面的一种可能的实施方式中，所述获取预设权重值阵列，基于所述预设权重值阵列、对象异常行为预测数据和所述对象异常行为迭代权重值确定与所述预测判别特征对应的对象异常行为分布图，具体包括：获取所述预测判别特征对应的参考对象异常行为轨迹构成对象异常行为轨迹序列；基于所述预设权重值阵列、对象异常行为预测数据和所述对象异常行为迭代权重值计算所述对象异常行为轨迹序列中各个参考对象异常行为轨迹对应的对象异常行为轨迹权重值；将所述最大权重值所对应的对象异常行为轨迹作为预测判别特征对应的对象异常行为分布图。
[0007]在第一方面的一种可能的实施方式中，所述对象异常行为的预测权重值包括体态异常行为的预测权重值；所述基于所述对象异常行为分布图确定与所述目标对象采集图像序列对应的对象异常行为，具体包括：基于所述对象异常行为分布图中包含的体态异常行为解析出体态异常定位图像，基于所述体态异常定位图像将所述目标对象采集图像序列进行分段得到体态异常追踪图像流；基于各个体态异常追踪图像流对应的对象异常行为分布图确定各个体态异常追踪图像流对应的对象异常行为。
[0008]在第一方面的一种可能的实施方式中，在将作业轨迹交互向量序列加载到训练完成的对象行为预警决策网络，生成所述目标对象采集图像序列对应的对象异常行为预测数据的步骤之前还包括：获取样本对象采集图像序列，对所述样本对象采集图像序列进行对象作业区域图像分割获得样本对象作业区域图像流，提取各个样本对象作业区域图像流对应的作业轨迹交互向量形成样本作业轨迹交互向量序列；获取所述样本对象作业区域图像流对应的对象异常行为标签数据，所述对象异常行为标签数据包括体态异常行为标签数据和/或违规操作行为标签数据；将所述样本作业轨迹交互向量序列作为初始对象行为预警决策网络的输入，将对应的对象异常行为标签数据作为对象行为预警知识学习的方向进行知识学习，生成所述训练完成的对象行为预警决策网络。
[0009]在第一方面的一种可能的实施方式中，所述对所述目标对象采集图像序列进行对象作业区域图像分割获得对象作业区域图像，对各个对象作业区域图像进行图像特征提取获得对应的作业轨迹交互向量，以输出作业轨迹交互向量序列，具体包括：对所述目标对象采集图像序列进行对象作业区域图像分割到的对象作业区域图像；获取当前对象作业区域图像，获取与当前对象作业区域图像对应的联动对象作业区域图像；提取当前对象作业区域图像对应的当前作业轨迹交互向量，提取所述联动对象作业区域图像对应的联动作业轨迹交互向量；
基于所述当前作业轨迹交互向量和所述联动作业轨迹交互向量生成与当前对象作业区域图像对应的目标轨迹交互向量；基于各个对象作业区域图像对应的目标轨迹交互向量形成与所述目标对象采集图像序列对应的作业轨迹交互向量序列。
[0010]在第一方面的一种可能的实施方式中，提取各个样本对象作业区域图像流对应的作业轨迹交互向量形成样本作业轨迹交互向量序列，以及将所述样本作业轨迹交互向量序列作为初始对象行为预警决策网络的输入，将对应的对象异常行为标签数据作为对象行为预警知识学习的方向进行知识学习，生成所述训练完成的对象行为预警决策网络的步骤，包括：基于初始对象行为预警决策网络确定参考训练对象和前向训练对象，所述参考训练对象为参考样本对象作业区域图像流的训练对象，所述前向训练对象为依据参考样本对象作业区域图像流的各个训练对象的变化信息排列，接近并且位于所述参考训练对象之前的训练对象，或表征所述参考样本对象作业区域图像流触发的前置训练节点，各个所述训练对象携带对应的对象异常行为标签数据；获取所述参考训练对象对应的各个样本对象作业区域图像流的参考作业位置特征；基于所述参考作业位置特征和参考训练对象在参考样本对象作业区域图像流的变化信息，获取参考对象作业迁移特征；将所述参考作业位置特征和所述参考对象作业迁移特征进行融合，生成参考对象作业融合特征；通过基于期望交叉熵的特征项选择单元对所述参考对象作业融合特征进行特征项选择，生成显著性期望作业特征；对所述显著性期望作业特征和所述参考对象作业融合特征进行加权和规则化转换，生成目标融合对象作业特征；对所述目标融合对象作业特征进行主成分特征分析，生成参考样本作业轨迹交互向量序列；获取所述前向训练对象的对象异常行为标签数据的触发异常行为估计向量，对所述参考样本作业轨迹交互向量序列和所述触发异常行为估计向量进行融合，生成所述参考训练对象的样本融合异常行为估计向量；基于所述参考样本作业轨迹交互向量序列对所述参考训练对象的对象异常行为进行估计训练，生成第一样本对象异常行为估计数据，基于所述样本融合异常行为估计向量对所述参考训练对象的对象异本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于人工智能可视化的对象定位方法，其特征在于，所述方法包括：获取目标对象采集图像序列；对所述目标对象采集图像序列进行对象作业区域图像分割获得对象作业区域图像，对所述各个对象作业区域图像进行图像特征提取获得对应的作业轨迹交互向量，以输出作业轨迹交互向量序列；将作业轨迹交互向量序列加载到训练完成的对象行为预警决策网络，生成所述目标对象采集图像序列对应的对象异常行为预测数据，所述对象异常行为预测数据包括各种对象异常行为的预测权重值；将所述对象异常行为预测数据和作业轨迹交互向量序列加载到训练完成的对象异常行为迭代预测网络生成对应的对象异常行为分布图，所述训练完成的对象异常行为迭代预测网络包括预先进行迭代变化知识学习的对象异常行为迭代权重值；基于所述对象异常行为分布图确定所述目标对象采集图像序列对应的目标对象异常行为，并基于所述目标对象异常行为对对应的作业对象进行定位。2.根据权利要求1所述的基于人工智能可视化的对象定位方法，其特征在于，所述将所述对象异常行为预测数据和作业轨迹交互向量序列加载到训练完成的对象异常行为迭代预测网络生成对应的对象异常行为分布图，所述训练完成的对象异常行为迭代预测网络包括预先进行迭代变化知识学习的对象异常行为迭代权重值，具体包括：将所述作业轨迹交互向量序列作为所述对象异常行为迭代预测网络的预测判别特征；获取预设权重值阵列，基于所述预设权重值阵列、对象异常行为预测数据和所述对象异常行为迭代权重值确定与所述预测判别特征对应的对象异常行为分布图。3.根据权利要求2所述的基于人工智能可视化的对象定位方法，其特征在于，所述获取预设权重值阵列，基于所述预设权重值阵列、对象异常行为预测数据和所述对象异常行为迭代权重值确定与所述预测判别特征对应的对象异常行为分布图，具体包括：获取所述预测判别特征对应的参考对象异常行为轨迹构成对象异常行为轨迹序列；基于所述预设权重值阵列、对象异常行为预测数据和所述对象异常行为迭代权重值计算所述对象异常行为轨迹序列中各个参考对象异常行为轨迹对应的对象异常行为轨迹权重值；将最大权重值所对应的对象异常行为轨迹作为预测判别特征对应的对象异常行为分布图。4.根据权利要求1所述的基于人工智能可视化的对象定位方法，其特征在于，所述对象异常行为的预测权重值包括体态异常行为的预测权重值；所述基于所述对象异常行为分布图确定与所述目标对象采集图像序列对应的对象异常行为，具体包括：基于所述对象异常行为分布图中包含的体态异常行为解析出体态异常定位图像，基于所述体态异常定位图像将所述目标对象采集图像序列进行分段得到体态异常追踪图像流；基于各个体态异常追踪图像流对应的对象异常行为分布图确定各个体态异常追踪图像流对应的对象异常行为。5.根据权利要求1所述的基于人工智能可视化的对象定位方法，其特征在于，在将作业轨迹交互向量序列加载到训练完成的对象行为预警决策网络，生成所述目标对象采集图像
序列对应的对象异常行为预测数据的步骤之前还包括：获取样本对象采集图像序列，对所述样本对象采集图像序列进行对象作业区域图像分割获得样本对象作业区域图像流，提取各个样本对象作业区域图像流对应的作业轨迹交互向量形成样本作业轨迹交互向量序列；获取所述样本对象作业区域图像流对应的对象异常行为标签数据，所述对象异常行为标签数据包括体态异常行为标签数据和/或违规操作行为标签数据；将所述样本作业轨迹交互向量序列作为初始对象行为预警决策网络的输入，将对应的对象异常行为标签数据作为对象行为预警知识学习的方向进行知识学习，生成所述训练完成的对象行为预警决策网络。6.根据权利要求1所述的基于人工智能可视化的对象定位方法，其特征在于，所述对所述目标对象采集图像序列进行对象作业区域图像分割获得对象作业区域图像，对各个对象作业区域图像进行图像特征提取获得对应的作业轨迹交互向量，以输出作业轨迹交互向量序列，具体包括：对所述目标对象采集图像序列进行对象作业区域图像分割到的对象作业区域图像；获取当前对象作业区域图像，获取与当前对象作业区域图像对应的联动对象作业区域图像；提取当前对象作业区域图像对应的当前作业轨迹交互向量，提取所述联动对象作业区域图像对应的联动作业轨迹交互向量；基于所述当前作业轨迹交互向量和所述联动作业轨迹交互向量生成与当前对象作业区域图像对应的目标轨迹交互向量；基于各个对象作业区域图像对应的目标轨迹交互向量形成与所述目标对象采集图像序列对应的作业轨迹交互向量序列。7.根据权利要求5所述的基于人工智能可视化的对象定位方法，其特征在于，提取各个样本对象作业区域图像流对应的作业轨迹交互向量形成样本作业轨迹交互向量序列，以及将所述样本作业轨迹交互向量序列作为初始对象行为预警决策网络的输入，将对应的对象异常行为标签数据作为对象行为预警知识学习的方向进行知识学习，生成所述训练完成的对象行为预警决策网络的步骤，包括：基于初始对象行为预警决策网络确定参考训练对象和前向训练对象，所述参考训练对象...

【专利技术属性】
技术研发人员：冯文雅，胡新平，
申请(专利权)人：天津君萌科技有限公司，
类型：发明
国别省市：