信息处理设备、信息处理方法和存储介质技术

本发明专利技术提供信息处理设备、信息处理方法和存储介质。信息处理设备通过使用通过多个摄像设备拍摄第一对象所获得的多个图像，来生成表示所述第一对象的三维形状的三维形状数据。信息处理设备通过使用所述三维形状数据来估计所述第一对象的大小。信息处理设备基于所估计的所述第一对象的大小与预定基准值之间的比较的结果，来指定所述多个摄像设备所拍摄的第二对象的位置。二对象的位置。二对象的位置。

【技术实现步骤摘要】
信息处理设备、信息处理方法和存储介质


[0001]本公开涉及信息处理设备、信息处理方法和存储介质。

技术介绍

[0002]近年来，为了在体育比赛中检查裁判的判断是否正确，引入了裁判辅助系统，裁判辅助系统在显示装置上显示通过体育场周围所安装的多个摄像设备的摄像所获得的图像中的包括目标比赛的图像。日本特开2013
‑
232181描述了如下的技术：在足球比赛中，基于根据通过多个摄像设备的摄像所获得的二维图像计算各个被摄体的移动速度和加速度的计算结果，来判断诸如选手和球等的被摄体是否彼此接触。

技术实现思路

[0003]例如，在篮球中，存在所谓的24秒规则的规则。这要求队伍之一需要在队伍得到球之后的24秒内投篮。该判断基于在经过了24秒的时间点处球是否从选手分离，因此，需要拍摄球从选手的手分离的瞬间的图像。例如，在由于选手之间的位置关系而发生遮挡的情况下，即使通过采用日本特开2013
‑
232181的技术，也难以指定球从选手的手分离的瞬间。
[0004]本公开是考虑到上述问题而进行的，并且提供用以获得能够例如在体育比赛中辅助裁判进行判断的信息的技术。
[0005]根据本公开的一个实施例的信息处理设备包括一个或多于一个处理器，该一个或多于一个处理器通过执行一个或多于一个存储器中所存储的指令来用作如下单元：生成单元，其被配置为通过使用通过多个摄像设备拍摄第一对象所获得的多个图像来生成表示第一对象的三维形状的三维形状数据；估计单元，其被配置为通过使用三维形状数据来估计第一对象的大小；以及指定单元，其被配置为基于估计单元所估计的第一对象的大小与预定基准值之间的比较的结果来指定多个摄像设备所拍摄的第二对象的位置。
[0006]一种信息处理设备，包括：一个或多于一个存储器，其存储有指令；以及一个或多于一个处理器，其执行所述指令以进行以下操作：通过使用通过多个摄像设备拍摄第一对象所获得的多个图像，来生成表示所述第一对象的三维形状的三维形状数据；通过使用所述三维形状数据来估计所述第一对象的大小；以及基于在所述估计中所估计的所述第一对象的大小与预定基准值之间的比较的结果，来指定所述多个摄像设备所拍摄的第二对象的位置。
[0007]一种信息处理方法，包括：通过使用通过多个摄像设备拍摄第一对象所获得的多个图像，来生成表示所述第一对象的三维形状的三维形状数据；通过使用所述三维形状数据来估计所述第一对象的大小；以及基于在所述估计中所估计的所述第一对象的大小与预定基准值之间的比较的结果，来指定所述多个摄像设备所拍摄的第二对象的位置。
[0008]一种非暂时性计算机可读存储介质，其存储用于使计算机进行信息处理方法的程序，所述信息处理方法包括：通过使用通过多个摄像设备拍摄第一对象所获得的多个图像，来生成表示所述第一对象的三维形状的三维形状数据；通过使用所述三维形状数据来估计
所述第一对象的大小；以及基于在所述估计中所估计的所述第一对象的大小与预定基准值之间的比较的结果，来指定所述多个摄像设备所拍摄的第二对象的位置。
[0009]从如下参考附图的示例性实施例的描述，本公开的其他特征将变得明显。
附图说明
[0010]图1是示出虚拟视点图像生成系统的结构示例的框图；
[0011]图2是示出摄像单元的布置示例的示意图；
[0012]图3是示出服务器的功能结构示例的框图；
[0013]图4A和图4B各自是示出被摄体示例的示意图；
[0014]图5A和图5B各自是说明篮球场的3D模型的生成的图；
[0015]图6A至图6C各自是说明篮球的3D模型的生成的图；
[0016]图7A至图7F各自是说明篮球选手投篮时的3D模型的生成的图；
[0017]图8是说明3D模型的生成的图；
[0018]图9A和图9B各自是说明对被摄体进行建模时的体素的有无的图；
[0019]图10是示出估计对象的大小的处理的流程的流程图；
[0020]图11是示出判断篮球中违规的处理的流程的流程图；
[0021]图12是示出各个比赛的犯规/违规的示例的表；以及
[0022]图13是示出服务器的硬件结构示例的图。
具体实施方式
[0023]如下，参考附图来说明本公开的实施例。如下实施例不旨在根据权利要求限制本公开，并且本实施例中说明的特征的所有组合对于本公开的解决方案不一定是必不可少的。相同的附图标记附至相同的组件，并且省略其说明。
[0024][第一实施例][0025]使用图来说明根据本实施例的虚拟视点图像生成系统。图1是示出根据本实施例的虚拟视点图像生成系统的硬件结构示例的图。本实施例的虚拟视点图像生成系统具有照相机系统110a
‑
110j、交换集线器(switching hub)120、服务器130、数据库140、控制装置150、操作装置160、显示装置170和计时器装置180。
[0026]在各个照相机系统110a
‑
110j内，分别提供包括镜头和摄像传感器等的各个摄像单元111a
‑
111j、以及根据控制装置150的指令来进行摄像单元的控制和预定图像处理的各个照相机适配器112a
‑
112j。各个摄像单元111a
‑
111j是例如诸如照相机等的摄像设备。各个照相机适配器112a
‑
112j包括控制和图像处理所需的中央处理单元(CPU或ASIC)和存储器(RAM或ROM)。此外，照相机系统110a
‑
110j的相邻照相机系统以菊花链(daisy chain)方法通过各个网络线缆113a
‑
113i来连接。由各个照相机系统110a
‑
110j拍摄的图像数据经由各个网络线缆113a
‑
113i来传送。交换集线器(以下称为“HUB”)120进行网络上的数据传送的路由。HUB 120和照相机系统110a通过网络线缆114a连接，并且HUB 120和照相机系统110j通过网络线缆114b连接。
[0027]服务器130处理从照相机系统110a
‑
110j传输的具有多个视点的图像数据(具有多个视点的帧)，并且通过来自具有多个视点的图像数据的形状估计来生成三维模型(以下称
为“3D模型”)，等等。此外，服务器130生成时间同步信号并进行整个系统的同步控制。即，因为服务器130处理信息，所以可以认为服务器130是信息处理设备。HUB 120和服务器130通过网络线缆114c连接。
[0028]数据库(以下称为“DB”)140累积从服务器130发送的图像数据和模型信息，并且根据需要将累积的图像数据和模型信息提供至服务器130。服务器130和DB 140通过网络线缆114d连接。
[0029]控制装置150全面控制各个照相机系统110a
‑
110j以及本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种信息处理设备，包括：一个或多于一个存储器，其存储有指令；以及一个或多于一个处理器，其执行所述指令以进行以下操作：通过使用通过多个摄像设备拍摄第一对象所获得的多个图像，来生成表示所述第一对象的三维形状的三维形状数据；通过使用所述三维形状数据来估计所述第一对象的大小；以及基于在所述估计中所估计的所述第一对象的大小与预定基准值之间的比较的结果，来指定所述多个摄像设备所拍摄的第二对象的位置。2.根据权利要求1所述的信息处理设备，其中，所述一个或多于一个处理器执行所述指令，以通过指定所述第二对象的位置来指定所述第一对象与所述第二对象之间的接触。3.根据权利要求2所述的信息处理设备，其中，所述一个或多于一个处理器执行所述指令，以在所估计的所述第一对象的大小小于所述预定基准值的情况下，指定出所述第一对象与所述第二对象彼此接触。4.根据权利要求2所述的信息处理设备，其中，所述一个或多于一个处理器执行所述指令，以输出用于通知所述第一对象与所述第二对象之间的所指定的接触的信息。5.根据权利要求1所述的信息处理设备，其中，所述第一对象和所述第二对象是所述多个摄像设备所拍摄的比赛中的对象。6.根据权利要求1所述的信息处理设备，其中，所述一个或多于一个处理器执行所述指令，以还进行以下操作：获得与时间相关的时间信息；以及基于表示所述第二对象的位置的位置信息和所获得的时间信息来输出预定信息。7.根据权利要求6所述的信息处理设备，其中，所述位置信息、所获得的时间信息所表示的时间、以及所述摄像设备所拍摄的摄像目标的时间彼此关联。8.根据权利要求6所述的信息处理设备，其中，所述第二对象是篮球，以及所述一个或多于一个处理器执行所述指令，以进行以下操作：检测所述篮球，以及输出与篮球比赛相关的信息。9.根据权利要求8所述的信息处理设备，其中，所述一个或多于一个处理器执行所述指令，以通过进一步使用篮球比赛规则来输出指示出违反了所述篮球比赛规则的信息。10.根据权利要求6所述的信息处理设备，其中，所述第二对象是足球，以及所述一个或多于一个处理器执行所述指令，以进行以下操作：检测所述足球，以及输出与足球比赛相关的信息。
11.根据权...

【专利技术属性】
技术研发人员：梅村直树，
申请(专利权)人：佳能株式会社，
类型：发明
国别省市：