质量检验的审核方法、装置、系统及存储介质制造方法及图纸

本发明专利技术实施例公开了一种质量检验的审核方法、装置、系统及存储介质。包括：获取第一用户质检目标产品时生成的待考核图像集，所述待考核图像包括标注有第一眼动信息的目标产品；将所述待考核图像集与标准质检模型进行比对，获得比对结果；所述标准质检模型包含所述目标产品的标准图像信息，且目标产品的标准图像信息中包含第二眼动信息；根据所述比对结果确定所述第一用户的质检是否合格。本发明专利技术实施例提供的质量检验的审核方法，将用户质检目标产品时生成的待考核图像集与标准质检模型比对，确定用户的质检过程是否合格，不仅可以降低对质量检验审核的误差，且可以提高审核的效率。

Audit method, device, system and storage medium of quality inspection

The embodiment of the invention discloses an audit method, device, system and storage medium for quality inspection. Including: obtaining the image set to be evaluated generated when the first user inspects the target product, the image to be evaluated includes the target product marked with the first eye movement information; comparing the image set to be evaluated with the standard quality inspection model to obtain the comparison result; the standard quality inspection model includes the standard image information of the target product, and the standard image information of the target product includes Including second eye movement information; determining whether the quality inspection of the first user is qualified according to the comparison result. The audit method of quality inspection provided by the embodiment of the invention compares the image set to be evaluated generated when the user inspects the target product with the standard quality inspection model to determine whether the user's quality inspection process is qualified, which can not only reduce the error of quality inspection audit, but also improve the audit efficiency.

【技术实现步骤摘要】
质量检验的审核方法、装置、系统及存储介质
本专利技术实施例涉及质量检验
，尤其涉及一种质量检验的审核方法、装置、系统及存储介质。
技术介绍
传统的质量检验的审核过程中，需要质检员边对产品进行质检边口头讲出质检的流程及质检的位置点等，然后抽检完成质检的产品，最后根据抽检结果来评价质检员的质检过程。这种方式，由于无法对质检员质检后的所有产品进行抽检，使得审核结果存在较大的误差，且无法确定质检员质检过程中存在的问题，而且需要人工来进行抽检，效率低下。
技术实现思路
本专利技术实施例提供一种质量检验的审核方法、装置、系统及存储介质，以实现对质检员的质检过程的审核，不仅可以降低对质量检验审核的误差，且可以提高审核的效率。第一方面，本专利技术实施例提供了一种质量检验的审核方法，该方法包括：获取第一用户质检目标产品时生成的待考核图像集，所述待考核图像包括标注有第一眼动信息的目标产品；将所述待考核图像集与标准质检模型进行比对，获得比对结果；所述标准质检模型包含所述目标产品的标准图像信息，且所述目标产品的标准图像信息中包括第二眼动信息；根据所述比对结果确定所述第一用户的质检是否合格。进一步地，所述第一眼动信息包括注视点位置及注视时长；第二眼动信息包括至少一个注视点位置、各注视点位置的注视时长、平均注视时长及注视次数；所述第二眼动信息由至少一个第一眼动信息统计获得。进一步地，将所述待考核图像集与标准质检模型进行比对，获得比对结果，包括：将各待考核图像进行图像识别及数据处理，获得各待考核图像的第一眼动信息；分别判断各待考核图像中的注视点位置是否与标准质检模型的其中一个注视点位置匹配，若匹配，则确定为有效图像；对所述有效图像的第一眼动信息进行统计，获得待考核图像集的第二眼动信息；将所述待考核图像集的第二眼动信息与标准质检模型的第二眼动信息进行比对，获得比对结果。进一步地，若第二眼动信息中的注视点位置包括至少两个，则根据所述比对结果确定所述第一用户的质检是否合格，包括：若所述待考核图像集的第二眼动信息中各注视点位置、注视点位置的平均注视时长及注视次数与标准质检模型的第二眼动信息中各注视点位置、注视点位置的平均注视时长及注视次数均匹配，则所述第一用户的质检合格，否则，不合格。进一步地，在获取第一用户质检目标产品时生成的待考核图像集之前，还包括：获取第二用户质检所述目标产品时生成的标准图像集；所述标准图像包括标注有第一眼动信息的目标产品；对所述标准图像集进行图像识别及数据处理，获得标准质检模型。进一步地，获取第二用户质检所述目标产品时生成的标准图像集，包括：获取至少两个第二用户质检所述目标产品时生成的标准样本集，其中一个样本集对应一个标准图像集；将所述标准样本集输入深度学习网络进行图像识别及数据处理，获得标准质检模型。进一步地，当所述标准质检模型为3D标准模型时，获得标准质检模型，包括：创建目标产品的3D图像；获取第二眼动信息中各注视点位置在2D图像与3D图像间的映射关系；根据所述映射关系将第二眼动信息中的至少一个注视点位置、各注视点位置的平均注视时长及注视次数标注于所述3D图像中，获得3D标准模型。第二方面，本专利技术实施例还提供了一种质量检验的审核装置，该装置包括：待考核图像集获取模块，用于获取第一用户质检目标产品时生成的待考核图像集，所述待考核图像包括标注有第一眼动信息的目标产品；比对结果获取模块，用于将所述待考核图像集与标准质检模型进行比对，获得比对结果；所述标准质检模型包含所述目标产品的标准图像信息，且目标产品的标准图像信息中包括第二眼动信息；质检合格确定模块，用于根据所述比对结果确定所述第一用户的质检是否合格。第三方面，本专利技术实施例还提供了一种质量检验的审核系统，包括：眼球追踪单元和质检审核单元；所述眼球追踪单元用于采集第一用户质检产品时的待考核图像集，并将所述待考核图像集发送至质检审核单元；所述质检审核单元用于将待考核图像集与标准质检模型进行比对，获得审核结果。第四方面，本专利技术实施例提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本专利技术实施例所述的质量检验的审核方法。本专利技术实施例，首先获取第一用户质检目标产品时生成的待考核图像集，待考核图像包括标注有第一眼动信息的目标产品，然后将待考核图像集与标准质检模型进行比对，获得比对结果；标准质检模型包含目标产品的标准图像信息，且目标产品的标准图像信息中包含第二眼动信息；最后根据比对结果确定第一用户的质检是否合格。本专利技术实施例提供的质量检验的审核方法，将用户质检目标产品时生成的待考核图像集与标准质检模型比对，确定用户的质检过程是否合格，不仅可以降低对质量检验审核的误差，且可以提高审核的效率。附图说明图1是本专利技术实施例一中的一种质量检验的审核方法的流程图；图2a是本专利技术实施例一中的待考核图像的示例图；图2b是本专利技术实施例一中的一种标准质检模型的示例图；图3是本专利技术实施例一中的一种待考核图像集的第二眼动信息与标准质检模型的第二眼动信息比对的流程图；图4是本专利技术实施例二中的一种质量检验的审核装置的结构示意图；图5是本专利技术实施例三中的一种质量检验的审核系统的结构示意图；图6是本专利技术实施例四中的一种计算机设备的结构示意图。具体实施方式下面结合附图和实施例对本专利技术作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本专利技术，而非对本专利技术的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本专利技术相关的部分而非全部结构。本专利技术实施例的方案基于眼球追踪技术。眼球追踪也可以称为视线追踪，是通过测量眼睛运动情况来估计眼睛的视线和/或注视点的技术。其中，视线可以理解为一个三维矢量，注视点可以理解为三维矢量投影在某个平面上的二维坐标。眼球追踪传感器包括红外相机和近红外光源。对眼球进行追踪可以采用光学记录法实现。光学记录法的原理是，利用红外相机记录被测试者的眼睛运动情况，即获取能够反映眼睛运动的眼部图像，从获取到的眼部图像中提取眼部特征用于建立视线/注视点的估计模型。其中，眼部特征可以包括：瞳孔位置、瞳孔形状、虹膜位置、虹膜形状、眼皮位置、眼角位置、光斑位置(或者普尔钦斑)等。光学记录法包括瞳孔-角膜反射法。瞳孔-角膜反射法的原理是，近红外光源照向眼睛，由红外相机对眼部进行拍摄，同时拍摄到光源在角膜上的反射点即光斑，由此获取到带有光斑的眼部图像。随着眼球的转动，瞳孔中心与光斑的相对位置关系发生变化。采集到多张带有光斑的眼部图像都可以反映位置变化关系，根据位置变化关系进行视线/注视点的估计。实施例一图1为本专利技术实施例一提供的一种质量检验的审核方法的流程图，本实施例可适用于对质检员的质检过程进行审核的情况本文档来自技高网...

【技术保护点】
1.一种质量检验的审核方法，其特征在于，包括：/n获取第一用户质检目标产品时生成的待考核图像集，所述待考核图像包括标注有第一眼动信息的目标产品；/n将所述待考核图像集与标准质检模型进行比对，获得比对结果；所述标准质检模型包含所述目标产品的标准图像信息，且所述目标产品的标准图像信息中包括第二眼动信息；/n根据所述比对结果确定所述第一用户的质检是否合格。/n

【技术特征摘要】
1.一种质量检验的审核方法，其特征在于，包括：
获取第一用户质检目标产品时生成的待考核图像集，所述待考核图像包括标注有第一眼动信息的目标产品；
将所述待考核图像集与标准质检模型进行比对，获得比对结果；所述标准质检模型包含所述目标产品的标准图像信息，且所述目标产品的标准图像信息中包括第二眼动信息；
根据所述比对结果确定所述第一用户的质检是否合格。


2.根据权利要求1所述的方法，其特征在于，所述第一眼动信息包括注视点位置及注视时长；第二眼动信息包括至少一个注视点位置、各注视点位置的注视时长、平均注视时长及注视次数；所述第二眼动信息由至少一个第一眼动信息统计获得。


3.根据权利要求2所述的方法，其特征在于，将所述待考核图像集与标准质检模型进行比对，获得比对结果，包括：
将各待考核图像进行图像识别及数据处理，获得各待考核图像的第一眼动信息；
分别判断各待考核图像中的注视点位置是否与标准质检模型的其中一个注视点位置匹配，若匹配，则确定为有效图像；
对所述有效图像的第一眼动信息进行统计，获得待考核图像集的第二眼动信息；
将所述待考核图像集的第二眼动信息与标准质检模型的第二眼动信息进行比对，获得比对结果。


4.根据权利要求3所述的方法，其特征在于，若第二眼动信息中的注视点位置包括至少两个，则根据所述比对结果确定所述第一用户的质检是否合格，包括：
若所述待考核图像集的第二眼动信息中各注视点位置、注视点位置的平均注视时长及注视次数与标准质检模型的第二眼动信息中各注视点位置、注视点位置的平均注视时长及注视次数均匹配，则所述第一用户的质检合格，否则，不合格。


5.根据权利要求2所述的方法，其特征在于，在获取第一用户质检目标产品时生成的待考核图像集之前，还包括：
获取第二用户质检所述目标产品时生成的标准图像集；所述标准图像包括标...

【专利技术属性】
技术研发人员：张朕，秦林婵，
申请(专利权)人：北京七鑫易维信息技术有限公司，
类型：发明
国别省市：北京;11