号码识别方法、系统、设备及计算机可读存储介质技术方案

本公开涉及号码识别方法、系统、设备及计算机可读存储介质，该方法包括：根据视频图像确定第一号码图和所述第一号码图的形变情况；根据所述形变情况对所述第一号码图进行调整以得到第二号码图；根据所述第二号码图确定号码。

Number Recognition Method, System, Equipment and Computer Readable Storage Media

The present disclosure relates to a number recognition method, system, device and computer readable storage medium. The method includes: determining the deformation of the first number diagram and the first number diagram according to the video image; adjusting the first number diagram according to the deformation to obtain the second number diagram; and according to the second number diagram, adjusting the first number diagram to obtain the second number diagram. Confirm the number.

【技术实现步骤摘要】
号码识别方法、系统、设备及计算机可读存储介质
本公开涉及视频或图像处理
，特别是涉及一种号码识别方法、系统、设备及计算机可读存储介质。
技术介绍
在体育赛事视频中，衣服上的号码是认证运动员身份的关键线索。例如，在球赛直播中，通过自动识别球场上球员的球衣号码，能够快速有效的定位到球员信息，从而能够进行更好的解说与数据分析。此外，在诸如马拉松比赛等运动员数目众多的比赛中，如何快速有效地对每个运动员进行身份认证，同样也可以依赖号码识别技术。现有的号码识别方法存在识别精度不高、识别数字范围有限等问题。特别是运动员常常处于严重的身体倾斜和姿势变形，号码也存在严重的畸变，对于此类号码，现有方法的识别精度较差。
技术实现思路
本公开的目的在于提供一种新的号码识别方法、系统、设备及计算机可读存储介质。本公开的目的是采用以下的技术方案来实现的。依据本公开提出的号码识别方法，包括以下步骤：根据视频图像确定第一号码图和所述第一号码图的形变情况；根据所述形变情况对所述第一号码图进行调整以得到第二号码图；根据所述第二号码图确定号码。本公开的目的还可以采用以下的技术措施来进一步实现。前述的号码识别方法，其中，所述的根据视频图像确定第一号码图和所述第一号码图的形变情况包括：根据视频图像确定所述视频图像中的人员图像；根据所述人员图像确定第一号码图和所述形变情况。前述的号码识别方法，其中，所述的根据视频图像确定所述视频图像中的人员图像包括：根据视频图像确定所述视频图像中的多个区域以及每个所述区域的置信度，所述置信度用于表示所述区域为人的程度；将所述置信度大于预设的设定值的区域作为人员图像。前述的号码识别方法，其中，所述的根据视频图像确定第一号码图和所述第一号码图的形变情况包括：根据所述视频图像确定四个顶点坐标；将所述四个顶点坐标所围成的四边形作为所述第一号码图。前述的号码识别方法，其中，所述的根据视频图像确定第一号码图和所述第一号码图的形变情况包括：根据所述视频图像确定空间变换矩阵，所述空间变换矩阵用于表示所述第一号码图的旋转和/或缩放和/或平移的情况；所述的根据所述形变情况对所述第一号码图进行调整以得到第二号码图包括：根据所述空间变换矩阵对所述第一号码图中的点的坐标进行调整以矫正所述第一号码图。前述的号码识别方法，其中，所述的根据所述形变情况对所述第一号码图进行调整以得到第二号码图还包括：对经过矫正的所述第一号码图进行插值处理，以得到第二号码图。前述的号码识别方法，其中，所述的根据所述第二号码图确定号码包括：根据所述第二号码图确定号码的位数以及每一位号码的取值。前述的号码识别方法，其中，所述的根据视频图像确定第一号码图和所述第一号码图的形变情况和/或所述的根据所述第二号码图确定号码为利用卷积神经网络进行的。前述的号码识别方法，其中，所述的根据视频图像确定第一号码图和所述第一号码图的形变情况包括：利用预先对确定号码图像及号码图像的形变情况进行过训练的空间变换网络，对视频图像进行提取特征，以确定所述第一号码图和所述第一号码图的形变情况。前述的号码识别方法，其中，在训练所述空间变换网络的过程中，加入坐标值的回归损失函数，采用半监督方式确定所述第一号码图和所述第一号码图的形变情况。本公开的目的还采用以下技术方案来实现。依据本公开提出的号码识别系统，包括：号码图像确定模块，用于根据视频图像确定第一号码图和所述第一号码图的形变情况；号码图像矫正模块，用于根据所述形变情况对所述第一号码图进行调整以得到第二号码图；号码确定模块，用于根据所述第二号码图确定号码。本公开的目的还可以采用以下的技术措施来进一步实现。前述的号码识别系统，其中，所述的号码图像确定模块包括：人员图像确定子模块，用于根据视频图像确定所述视频图像中的人员图像；号码图像确定子模块，用于根据所述人员图像确定第一号码图和所述形变情况。前述的号码识别系统，其中，所述的人员图像确定子模块具体用于：根据视频图像确定所述视频图像中的多个区域以及每个所述区域的置信度，所述置信度用于表示所述区域为人的程度；将所述置信度大于预设的设定值的区域作为人员图像。前述的号码识别系统，其中，所述的号码图像确定模块包括第一号码图确定子模块，用于根据所述视频图像确定四个顶点坐标；将所述四个顶点坐标所围成的四边形作为所述第一号码图。前述的号码识别系统，其中，所述的号码图像确定模块包括：空间变换矩阵确定子模块，用于根据所述视频图像确定空间变换矩阵，所述空间变换矩阵用于表示所述第一号码图的旋转和/或缩放和/或平移的情况；所述的号码图像矫正模块具体用于：根据所述空间变换矩阵对所述第一号码图中的点的坐标进行调整以矫正所述第一号码图。前述的号码识别系统，其中，所述的号码图像矫正模块还用于：对经过矫正的所述第一号码图进行插值处理，以得到第二号码图。前述的号码识别系统，其中，所述的号码确定模块具体用于：根据所述第二号码图确定号码的位数以及每一位号码的取值。前述的号码识别系统，其中，所述的号码图像确定模块具体用于利用卷积神经网络进行所述的根据视频图像确定第一号码图和所述第一号码图的形变情况，和/或所述的号码确定模块具体用于利用卷积神经网络进行所述的根据所述第二号码图确定号码。前述的号码识别系统，其中，所述的号码图像确定模块具体用于：利用预先对确定号码图像及号码图像的形变情况进行过训练的空间变换网络，对视频图像进行提取特征，以确定所述第一号码图和所述第一号码图的形变情况。前述的号码识别系统，还包括一个或多个训练模块，用于在训练所述空间变换网络的过程中，加入坐标值的回归损失函数，采用半监督方式确定所述第一号码图和所述第一号码图的形变情况。本公开的目的还采用以下技术方案来实现。依据本公开提出的一种设备，包括：存储器，用于存储非暂时性计算机可读指令；以及处理器，用于运行所述计算机可读指令，使得所述处理器执行时实现前述任意一种号码识别方法。本公开的目的还采用以下技术方案来实现。依据本公开提出的一种计算机可读存储介质，用于存储非暂时性计算机可读指令，当所述非暂时性计算机可读指令由计算机执行时，使得所述计算机执行前述任意一种号码识别方法。本公开的目的还采用以下技术方案来实现。依据本公开提出的一种终端设备，包括前述任意一种号码识别系统。上述说明仅是本公开技术方案的概述，为了能更清楚了解本公开的技术手段，而可依照说明书的内容予以实施，并且为让本公开的上述和其他目的、特征和优点能够更明显易懂，以下特举较佳实施例，并配合附图，详细说明如下。附图说明图1是本公开一个实施例的号码识别方法的流程框图。图2是本公开一个实施例提供的从视频图像中确定人员图像的示意图。图3是本公开一个实施例的未采用坐标监督的号码识别方法以及本公开一个实施例的基于坐标位置监督的号码识别方法的流程示意图。图4是本公开一个实施例的号码识别系统的结构框图。图5是本公开一个实施例的设备的硬件框图。图6是本公开一个实施例的计算机可读存储介质的示意图。图7是本公开一个实施例的终端设备的结构框图。具体实施方式为更进一步阐述本公开为达成预定专利技术目的所采取的技术手段及功效，以下结合附图及较佳实施例，对依据本公开提出的号码识别方法、系统、设备及计算机可读存储介质的具体实施方式、结构、特征及本文档来自技高网...

【技术保护点】
1.一种号码识别方法，所述方法包括：根据视频图像确定第一号码图和所述第一号码图的形变情况；根据所述形变情况对所述第一号码图进行调整以得到第二号码图；根据所述第二号码图确定号码。

【技术特征摘要】
1.一种号码识别方法，所述方法包括：根据视频图像确定第一号码图和所述第一号码图的形变情况；根据所述形变情况对所述第一号码图进行调整以得到第二号码图；根据所述第二号码图确定号码。2.根据权利要求1所述的号码识别方法，其中，所述的根据视频图像确定第一号码图和所述第一号码图的形变情况包括：根据视频图像确定所述视频图像中的人员图像；根据所述人员图像确定第一号码图和所述形变情况。3.根据权利要求2所述的号码识别方法，其中，所述的根据视频图像确定所述视频图像中的人员图像包括：根据视频图像确定所述视频图像中的多个区域以及每个所述区域的置信度，所述置信度用于表示所述区域为人的程度；将所述置信度大于预设的设定值的区域作为人员图像。4.根据权利要求1所述的号码识别方法，其中，所述的根据视频图像确定第一号码图和所述第一号码图的形变情况包括：根据所述视频图像确定四个顶点坐标；将所述四个顶点坐标所围成的四边形作为所述第一号码图。5.根据权利要求1所述的号码识别方法，其中，所述的根据视频图像确定第一号码图和所述第一号码图的形变情况包括：根据所述视频图像确定空间变换矩阵，所述空间变换矩阵用于表示所述第一号码图的旋转和/或缩放和/或平移的情况；所述的根据所述形变情况对所述第一号码图进行调整以得到第二号码图包括：根据所述空间变换矩阵对所述第一号码图中的点的坐标进行调整以矫正所述第一号码图。6.根据权利要求5所述的号码识别方法，其中，所述的根据所述形变情况对所述第一号码图进行调整以得到第二号码图还包括：对经过矫正的所述第一号码图进行插值处理，以得到第二号码图。7.根据权利要求1所述的号码识别方法，其中，所...

【专利技术属性】
技术研发人员：李根，许世坤，朱延东，李磊，王长虎，
申请(专利权)人：北京字节跳动网络技术有限公司，
类型：发明
国别省市：北京,11