【技术实现步骤摘要】
数据标注的考核方法、装置和电子设备
本专利技术涉及数据处理
，尤其是涉及一种数据标注的考核方法、装置和电子设备。
技术介绍
从互联网上观看视频和图像，正在成为用户获取信息的主要方式，但受限于拍摄条件和网络环境，图像和视频的质量并不稳定；因此，在图像和视频上传至互联网之前，需要标注员对图像和视频进行质量评价，以根据质量评价结果对图像和视频进行预处理。目前质量评价的标注是由标注员根据自己的直观感受进行标注的，使得质量评价的标注具有主观性和不确定性，因此，为了确保质量评价标注的准确性，需要判断标注员是否可以正确标注。相关技术中，通常利用少量题库对标注员进行质量评价标注考核，并通过固定正确答案来评判标注员是否可以正确标注，该考核方式灵活性较差，难以满足用户对标注员考核的个性化需求。
技术实现思路
本专利技术的目的在于提供一种数据标注的考核方法、装置和电子设备，以提高考核方式的灵活性，并满足用户对标注员考核的个性化需求。第一方面，本专利技术实施例提供了一种数据标注的考核方法，该方法包括：获取多个待标注数据；每...
【技术保护点】
1.一种数据标注的考核方法，其特征在于，所述方法包括：/n获取多个待标注数据；每个所述待标注数据携带有多个标准标注结果；/n针对每个所述待标注数据，基于当前待标注数据的多个标准标注结果确定所述当前待标注数据的标准标注区间；所述标准标注区间用于：确定考核对象针对所述当前待标注数据的标注结果的得分；/n针对每个考核对象，根据当前考核对象的总得分和预设的考核通过分数，确定所述当前考核对象的考核结果。/n
【技术特征摘要】
1.一种数据标注的考核方法，其特征在于，所述方法包括：
获取多个待标注数据；每个所述待标注数据携带有多个标准标注结果；
针对每个所述待标注数据，基于当前待标注数据的多个标准标注结果确定所述当前待标注数据的标准标注区间；所述标准标注区间用于：确定考核对象针对所述当前待标注数据的标注结果的得分；
针对每个考核对象，根据当前考核对象的总得分和预设的考核通过分数，确定所述当前考核对象的考核结果。
2.根据权利要求1所述的方法，其特征在于，所述基于当前待标注数据的多个标准标注结果确定所述当前待标注数据的标准标注区间的步骤，包括：
计算所述当前待标注数据中所述多个标准标注结果的标注均值；
根据所述标注均值和预设的标注偏差，确定所述当前待标注数据的标准标注区间。
3.根据权利要求2所述的方法，其特征在于，所述标注偏差通过下述方式确定：
获取多个已经训练好的标注对象对所述当前待标注数据的试标注结果；
针对每个标注对象，根据当前标注对象的试标注结果、预设的标注偏差和所述当前待标注数据的标注均值，确定所述当前标注对象对所述当前待标注数据的试标注结果的得分；
采用枚举的方式，调整所述标注偏差的大小，更新每个所述标注对象对所述当前待标注数据的试标注结果的得分；
计算每个调整的标注偏差下多个所述标注对象对当前待标注数据的得分率，将得分率达到预设概率值时的标注偏差确定为最终的标注偏差。
4.根据权利要求2所述的方法，其特征在于，所述根据所述标注均值和预设的标注偏差，确定所述当前待标注数据的标准标注区间的步骤，包括：
将所述标注均值与所述标注偏差的差值，确定为所述当前待标注数据的标准标注区间的最小值；
将所述标注均值与所述标注偏差的和，确定为所述当前待标注数据的标准标注区间的最大值。
5.根据权利要求1所述的方法，其特征在于，所述考核通过分数通过下述方式确定：
获取多个已经训练好的标注对象对所述多个待标注数据的试标注结果；
针对每个所述待标注数据，根据当前待标注数据的标准标注区间和所述当前待标注数据的试标注结果，确定所述标注对象的得分；
基于每个所述标注对象的总得分，确定所述考核通过分数。
6.根据权利要求5所述的方法，其特征在于，所述基于每个所述标注对象的总得分，确定所述考核通过分数的步骤，包括：
从多个所述标注对象的总得分中，...
【专利技术属性】
技术研发人员：李果，张明慧，樊鸿飞，
申请(专利权)人：北京金山云网络技术有限公司，
类型：发明
国别省市：北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。