一种评测方法和装置、计算机设备、存储介质制造方法及图纸

本实施例涉及图像识别技术领域，尤其涉及一种评测方法和装置、计算机设备、存储介质。其中，评测方法包括:在测试环境中，读取标注数据文件的原始标注信息；根据标注数据文件创建测试文件；其中，测试文件包括测试标注信息，测试标注信息为对原始标注信息进行字段数据值清除得到；根据测试文件中的读取地址获取测试结果数据值；将测试结果数据值添加至测试文件，得到测试结果文件；对标注数据文件和测试结果文件进行合并处理，得到目标文件；在计算环境中，根据位置信息将获取到的测试结果数据值与字段数据值进行比对，得到比对结果；根据比对结果计算得到召回率和精确率。本申请实施例的技术方法，能够提高识别测试算法的评测效率。能够提高识别测试算法的评测效率。能够提高识别测试算法的评测效率。

【技术实现步骤摘要】
一种评测方法和装置、计算机设备、存储介质


[0001]本专利技术涉及图像识别
，尤其涉及一种评测方法和装置、计算机设备、存储介质。

技术介绍

[0002]目前，通过OCR、NLP等方法对图像中的内容进行识别，并将识别得到的数据值与标注数据值进行比对，从而得到对应图像的比对结果，进而根据该比对结果实现对图像识别算法性能的评测。
[0003]在上述方法中，图像识别算法性能的评测方法包括识别测试流程和比对流程。因此，当对标注数据值进行调整或修改时，需从识别测试流程开始重复执行整个评测方法，从而影响了图像识别算法性能的评测效率。

技术实现思路

[0004]本申请实施例的主要目的在于提出一种评测方法和装置、计算机设备、存储介质，能够提高识别测试算法的评测效率。
[0005]为实现上述目的，本申请实施例的第一方面提出了一种评测方法，包括：
[0006]在测试环境中，读取标注数据文件的原始标注信息；其中，所述标注数据文件标注有至少两个目标保单的原始标注信息，所述原始标注信息包括每一所述目标保单的读取地址、分类字段本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种评测方法，其特征在于，包括：在测试环境中，读取标注数据文件的原始标注信息；其中，所述标注数据文件标注有至少两个目标保单的原始标注信息，所述原始标注信息包括每一所述目标保单的读取地址、分类字段、至少两个标注字段，每一个所述标注字段包括位置信息和字段数据值；根据所述标注数据文件创建测试文件；其中，所述测试文件包括测试标注信息，所述测试标注信息为对所述原始标注信息进行所述字段数据值清除得到；根据所述测试文件中的读取地址获取测试结果数据值；其中，所述测试结果数据值由对所述测试文件进行保单识别测试得到，所述测试结果数据值用于表征所述目标保单的识别结果；将所述测试结果数据值添加至所述测试文件，得到测试结果文件；对所述标注数据文件和所述测试结果文件进行合并处理，得到目标文件；在计算环境中，获取所述目标文件中的所述测试结果数据值和所述字段数据值，并根据所述位置信息将获取到的所述测试结果数据值与所述字段数据值进行比对，得到比对结果；根据所述比对结果计算得到召回率和精确率；其中，所述召回率和所述精确率用于对所述保单识别测试进行评测。2.根据权利要求1所述的评测方法，其特征在于，所述分类字段包括一级字段和二级字段，每一所述一级字段对应至少一个所述二级字段，每一所述二级字段对应其中一个所述字段数据值；所述一级字段携带有读取标识；所述根据所述测试文件中的读取地址获取测试结果数据值，包括：读取所述测试文件中所述一级字段的所述读取标识；根据所述读取标识和所述读取地址对所述测试文件进行保单识别测试，得到与所述一级字段对应的所述测试结果数据值。3.根据权利要求2所述的评测方法，其特征在于，所述二级字段携带有比对标识；所述根据所述位置信息将获取到的所述测试结果数据值与所述字段数据值进行比对，得到比对结果，包括：读取所述目标文件中所述二级字段的所述比对标识，并读取所述目标文件中所述一级字段的所述读取标识；根据所述比对标识、所述读取标识和所述位置信息，将所述测试结果数据值与所述字段数据值进行比对，得到所述比对结果；其中，所述比对结果包括识别准确、识别错误、漏识别、多识别的任一种。4.根据权利要求3所述的评测方法，其特征在于，所述读取标识包括多属性标识，所述比对标识包括相似度比对标识；将与同一个所述一级字段对应的多个所述字段数据值作为一组标注组，将与同一个所述一级字段对应的多个所述测试结果数据值作为一组测试组；所述根据所述比对标识、所述读取标识和所述位置信息，将所述测试结果数据值与所述字段数据值进行比对，得到所述比对结果，包括：若所述读取标识为所述多属性标识、所述比对标识为所述相似度比对标识，则根据所述位置信息，将多个待测数据值与对应的字段数据值进行比对，得到多个比对相似度值；其中，将与同一类所述二级字段对应的多个所述测试结果数据值作为所述待测数据值；
对多个所述比对相似度值进行比较，得到最大相似度值；若所述最大相似度值大于预设的第一阈值，则所述比对结果为所述识别准确；其中，将与所述最大相似度值对应的所述字段数据值作为第一目标标注数据值，将与所述最大相似度值对应的所述待测数据值作为第一目标测试数据值；获取所述第一目标标注数据值对应的第一子标注组，根据所述第一子标注组和所述第一目标标注数据值获取第二目标标注数据值；其中，所述第二目标标注数据值与所述第一目标标注数据值对应同一个所述第一子标注组；获取所述第一目标测试数据值对应的第一子测试组，根据所述第一子测试组和所述第一目标测试数据值获取第二目标测试数据值；其中，所述第二目标测试数据值与所述第一目标测试数据值对应同一个所述第一子测试组；根据所述位置信息，将所述第二目标测试数据值与所述第二目标标注数据值进行比对，得到所述比对结果。5.根据权利要求4所述的评测方法，其特征在于，所述根据所述比对标识、所述读取标识和所述位置信息，将所述测试结果数据值与所述字段数据值进行比对，得到所述比对结果，还包括：若所述最大相似度值大于预设的第二阈值，则所述比对结果为...

【专利技术属性】
技术研发人员：黄庭峰，肖敏，彭晶，
申请(专利权)人：中国平安人寿保险股份有限公司，
类型：发明
国别省市：