生产过程管理方法、装置、设备和存储介质制造方法及图纸

本公开提供了一种生产过程管理方法、装置、设备和存储介质，其中，该方法包括：获取目标工位的工作人员在生产时的生产动作视频；对生产动作视频进行动作识别，得到工作人员针对生产动作的动作识别结果；基于动作识别结果、以及与目标工位对应的动作模板进行匹配处理，得到目标工位的工作人员在生产时的动作规范性信息；基于动作规范性信息、以及生产动作视频，生成目标工位的生产过程管理数据。生成目标工位的生产过程管理数据。生成目标工位的生产过程管理数据。

【技术实现步骤摘要】
生产过程管理方法、装置、设备和存储介质


[0001]本公开涉及视觉检测和数据管理
，具体而言，涉及一种生产过程管理方法、装置、设备和存储介质。

技术介绍

[0002]针对工业场景中依赖人为操作的生产节点，生产过程中容易出现失误，导致产品质量问题。如何对生产节点的人为操作的动作进行记录，并与生产的视频进行关联，做到生产过程有迹可查，内容真实，是工业场景中依赖人为操作的生产领域亟待解决的问题。

技术实现思路

[0003]本公开实施例至少提供一种生产过程管理方法、装置、设备和存储介质。
[0004]第一方面，本公开实施例提供了一种生产过程管理方法，包括：
[0005]获取目标工位的工作人员在生产时的生产动作视频；
[0006]对所述生产动作视频进行动作识别，得到所述工作人员针对生产动作的动作识别结果；
[0007]基于所述动作识别结果、以及与所述目标工位对应的动作模板进行匹配处理，得到所述目标工位的工作人员在生产时的动作规范性信息；
[0008]基于所述动作规范性信息、以及所述生产动作视频，生成所述目标工位的生产过程管理数据。
[0009]这样，通过获取目标工位的工作人员在生产时的生产动作视频，并基于生产动作视频，确定工作人员在生产时的动作规范性信息，然后基于动作规范性信息、以及生产动作视频，生成目标工位的生产过程管理数据，这样，通过生成生产过程管理数据，建立了动作规范性信息、以及生产动作视频之间的关联性，做到对生产过程中的各个生产动作细节都有迹可查。<br/>[0010]一种可选的实施方式中，所述获取目标工位的工作人员在生产时的生产动作视频之前，还包括：
[0011]建立所述目标工位与对所述目标工位进行拍摄的拍摄设备之间的关联关系；
[0012]所述获取目标工位的工作人员在生产时的生产动作视频，包括：
[0013]获取与所述目标工位存在所述关联关系的拍摄设备采集的生产动作视频，并将采集得到的生产动作视频作为所述目标工位的工作人员在生产时的生产动作视频。
[0014]这样，通过建立目标工位与对目标工位进行拍摄的拍摄设备之间的关联关系，能够较为准确地确定与该目标工位存在关联关系的拍摄设备，进而准确地获取到该拍摄设备采集的生产动作视频。
[0015]一种可选的实施方式中，所述建立所述目标工位与对所述目标工位进行拍摄的拍摄设备之间的关联关系，包括：
[0016]获取所述目标工位的工位属性信息；所述工位属性信息包括下述至少一种：所述
目标工位所属生产线的生产线标识、生产线名称、生产线类型、生产线管理员信息、所述目标工位的工位标识、用于表征所述目标工位在生产线中位置的工位位置参数、用于表征所述目标工位对应生产内容的工位职能名称；
[0017]基于所述目标工位的工位属性信息，创建与所述目标工位对应的工位实例；
[0018]响应于对所述工位实例的设备添加操作，将所述设备添加操作对应的拍摄设备的设备属性信息添加至所述工位属性信息中，以建立所述目标工位和所述拍摄设备之间的关联关系；
[0019]所述设备属性信息包括下述至少一种：所述拍摄设备的名称、所述拍摄设备的标识、所述拍摄设备的互联网协议IP地址。
[0020]这样，创建工位实例能够方便管理目标工位的信息，如工位属性信息，以及添加的拍摄设备的设备属性信息。
[0021]一种可选的实施方式中，所述匹配处理，包括下述至少一种：工作时长匹配、生产规范性匹配、生产效率匹配。
[0022]这样，通过不同维度下的匹配方式，能够在不同方面保证得到的动作规范性信息的精度。
[0023]一种可选的实施方式中，基于所述动作识别结果、以及与所述目标工位对应的动作模板进行工作时长匹配处理，得到所述动作规范性信息，包括：
[0024]确定所述动作识别结果对应的识别动作时长；
[0025]将所述识别动作时长、和所述动作模板对应的参考动作时长进行匹配，得到所述工作时长的规范性信息。
[0026]这样，通过工作时长的匹配，能够在工作时长方面保证动作规范性信息的精度。
[0027]一种可选的实施方式中，所述动作识别结果包括：识别动作序列；所述识别动作序列包括：执行一个生产动作时所做的多个识别子动作；所述动作模板包括：与所述目标工位对应的参考动作序列；所述参考动作序列包括：执行一个生产动作时需要做的多个参考子动作；
[0028]基于所述动作识别结果、以及与所述目标工位对应的动作模板进行生产规范性匹配处理，包括：
[0029]将所述识别动作序列中的识别子动作和所述参考动作序列中的参考子动作进行动作类型匹配，得到与所述动作类型相关的、用于反映生产动作规范性的规范性信息；和/或
[0030]将所述识别动作序列中的识别子动作和所述参考动作序列中的参考子动作进行动作顺序匹配，得到与所述动作顺序相关的、用于反映生产动作规范性的规范性信息。
[0031]这样，通过生产规范性的匹配，能够在生产动作规范性方面保证动作规范性信息的精度。
[0032]一种可选的实施方式中，基于所述动作识别结果、以及与所述目标工位对应的动作模板进行生产效率匹配处理，包括：
[0033]基于所述动作识别结果，获取所述工作人员执行所述生产动作的总时长和间隔时长中的至少一项；
[0034]基于获取的所述工作人员执行生产动作的总时长和/或间隔时长中的至少一项，
得到所述工作人员的工作效率信息；
[0035]基于所述工作人员的工作效率信息、以及基于所述动作模板确定的预设工作效率信息，得到所述生产效率的规范性信息。
[0036]这样，通过获取到的工作人员执行生产动作的总时长和间隔时长中的至少一项，能够得到工作人员的工作效率信息，之后，通过动作模板确定的预设工作效率信息进行生产效率的匹配，能够在生产效率方面保证动作规范性信息的精度。
[0037]一种可选的实施方式中，所述动作识别结果包括：至少一个生产动作分别对应的识别动作序列；所述识别动作序列包括：执行一个所述生产动作时所做的多个识别子动作；所述动作规范性信息包括：所述至少一个生产动作分别对应的动作规范性信息；
[0038]所述基于所述动作规范性信息、以及所述生产动作视频，生成所述目标工位的生产过程管理数据，包括：
[0039]基于所述动作识别结果、以及所述生产动作视频中各个图像对应的时间戳，将所述生产动作视频切分为与每个生产动作对应的子视频；
[0040]针对所述每个生产动作对应的子视频，基于所述子视频、以及所述生产动作对应的动作规范性信息，生成所述生产动作对应的生产过程数据；
[0041]基于得到的所述至少一个生产动作分别对应的生产过程数据，生成所述目标工位的生产过程管理数据。
[0042]这样，针对每个生产动作对应的子视频，基于子视频，以及生产动作对应的动作规范性信息，能够生成方便对生产动作进行管理的生产过程数据。本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种生产过程管理方法，其特征在于，包括：获取目标工位的工作人员在生产时的生产动作视频；对所述生产动作视频进行动作识别，得到所述工作人员针对生产动作的动作识别结果；基于所述动作识别结果、以及与所述目标工位对应的动作模板进行匹配处理，得到所述目标工位的工作人员在生产时的动作规范性信息；基于所述动作规范性信息、以及所述生产动作视频，生成所述目标工位的生产过程管理数据。2.根据权利要求1所述的生产过程管理方法，其特征在于，所述获取目标工位的工作人员在生产时的生产动作视频之前，还包括：建立所述目标工位与对所述目标工位进行拍摄的拍摄设备之间的关联关系；所述获取目标工位的工作人员在生产时的生产动作视频，包括：获取与所述目标工位存在所述关联关系的拍摄设备采集的生产动作视频，并将采集得到的生产动作视频作为所述目标工位的工作人员在生产时的生产动作视频。3.根据权利要求2所述的生产过程管理方法，其特征在于，所述建立所述目标工位与对所述目标工位进行拍摄的拍摄设备之间的关联关系，包括：获取所述目标工位的工位属性信息；所述工位属性信息包括下述至少一种：所述目标工位所属生产线的生产线标识、生产线名称、生产线类型、生产线管理员信息、所述目标工位的工位标识、用于表征所述目标工位在生产线中位置的工位位置参数、用于表征所述目标工位对应生产内容的工位职能名称；基于所述目标工位的工位属性信息，创建与所述目标工位对应的工位实例；响应于对所述工位实例的设备添加操作，将所述设备添加操作对应的拍摄设备的设备属性信息添加至所述工位属性信息中，以建立所述目标工位和所述拍摄设备之间的关联关系；所述设备属性信息包括下述至少一种：所述拍摄设备的名称、所述拍摄设备的标识、所述拍摄设备的互联网协议IP地址。4.根据权利要求1至3任一项所述的生产过程管理方法，其特征在于，所述匹配处理，包括下述至少一种：工作时长匹配、生产规范性匹配、生产效率匹配。5.根据权利要求4所述的生产过程管理方法，其特征在于，基于所述动作识别结果、以及与所述目标工位对应的动作模板进行工作时长匹配处理，得到所述动作规范性信息，包括：确定所述动作识别结果对应的识别动作时长；将所述识别动作时长、和所述动作模板对应的参考动作时长进行匹配，得到所述工作时长的规范性信息。6.根据权利要求4或5所述的生产过程管理方法，其特征在于，所述动作识别结果包括：识别动作序列；所述识别动作序列包括：执行一个生产动作时所做的多个识别子动作；所述动作模板包括：与所述目标工位对应的参考动作序列；所述参考动作序列包括：执行一个生产动作时需要做的多个参考子动作；基于所述动作识别结果、以及与所述目标工位对应的动作模板进行生产规范性匹配处
理，包括：将所述识别动作序列中的识别子动作和所述参考动作序列中的参考子动作进行动作类型匹配，得到与所述动作类型相关的、用于反映生产动作规范性的规范性信息；和/或将所述识别动作序列中的识别子动作和所述参考动...

【专利技术属性】
技术研发人员：王飞，王磊，王自强，李栋，石均，曲翔，张祥，
申请(专利权)人：青岛海尔洗涤电器有限公司，
类型：发明
国别省市：