根据用户所选择的视点从按不同帧频传输前景图像和背景图像的照相机阵列生成虚拟图像的方法和设备技术

技术编号:20761605 阅读:46 留言:0更新日期:2019-04-03 13:37
用于系统的信息处理设备基于通过使用多个照相机从多个方向进行摄像所获得的图像数据来生成虚拟视点图像。所述信息处理设备包括:获得单元,其被配置为获得前景图像和背景图像,所述前景图像是基于用于生成虚拟视点图像的拍摄图像中的包括预定对象的对象区域,以及所述背景图像是基于所述拍摄图像中的与所述对象区域不同的区域,其中所获得的前景图像和所获得的背景图像具有不同的帧频;以及输出单元,其被配置为输出所述获得单元所获得的并且彼此相关联的前景图像和背景图像。

【技术实现步骤摘要】
【国外来华专利技术】根据用户所选择的视点从按不同帧频传输前景图像和背景图像的照相机阵列生成虚拟图像的方法和设备
本专利技术涉及用于生成虚拟视点图像的系统。
技术介绍
近年来,使用通过利用安装于不同位置的不同照相机从多个视点进行同步摄像所获得的多个视点图像来生成虚拟视点内容的技术已引起关注。根据上述的使用多个视点图像来生成虚拟视点内容的技术,用户可以以与正常图像相比更高的现实感以各种角度观看足球或篮球的精彩场景。基于多视点图像的虚拟视点内容的生成和浏览可以通过在图像处理器中收集多个照相机所拍摄到的图像、使用图像处理器进行包括3D模型生成和绘制的处理、并且将处理后的图像发送至用户终端来实现。此外,专利文献1公开了如下的技术:基于多个照相机所进行的摄像来获得前景图像和背景图像,并且使用该前景图像和背景图像来估计被摄体的3D形状。然而,在专利文献1中没有说明用于基于时间信息来使前景图像和背景图像彼此相关联的处理。因此,如果前景图像和背景图像是在不同的时间点分别获得的,则可能无法使用基于相同时间点的摄像的前景图像和背景图像进行用于估计3D形状的处理。引文列表专利文献专利文献1:日本特开2013-25458专利技术本文档来自技高网...

【技术保护点】
1.一种用于系统的信息处理设备,所述系统用于基于通过使用多个照相机从多个方向进行摄像所获得的图像数据来生成虚拟视点图像,所述信息处理设备包括:获得单元,其被配置为获得前景图像和背景图像,其中所述前景图像是基于用于生成虚拟视点图像的拍摄图像中的包括预定对象的对象区域,以及所述背景图像是基于所述拍摄图像中的与所述对象区域不同的区域,其中所获得的前景图像和所获得的背景图像具有不同的帧频;以及输出单元,其被配置为输出所述获得单元所获得的并且彼此相关联的前景图像和背景图像。

【技术特征摘要】
【国外来华专利技术】2016.05.25 JP 2016-1044341.一种用于系统的信息处理设备,所述系统用于基于通过使用多个照相机从多个方向进行摄像所获得的图像数据来生成虚拟视点图像,所述信息处理设备包括:获得单元,其被配置为获得前景图像和背景图像,其中所述前景图像是基于用于生成虚拟视点图像的拍摄图像中的包括预定对象的对象区域,以及所述背景图像是基于所述拍摄图像中的与所述对象区域不同的区域,其中所获得的前景图像和所获得的背景图像具有不同的帧频;以及输出单元,其被配置为输出所述获得单元所获得的并且彼此相关联的前景图像和背景图像。2.根据权利要求1所述的信息处理设备,其中,所述获得单元所获得的前景图像的帧频高于所述获得单元所获得的背景图像的帧频。3.根据权利要求1或2所述的信息处理设备,其中,所述输出单元输出所述获得单元所获得的前景图像和所述获得单元所获得的背景图像,使得所述前景图像关联于具有与所获得的前景图像的时间信息基于预定规则而相关的时间信息的背景图像。4.根据权利要求3所述的信息处理设备,其中,所述输出单元输出所述获得单元所获得的前景图像和所述获得单元所获得的背景图像,使得所述前景图像关联于具有与所获得的前景图像的时间信息最接近的时间信息的背景图像。5.根据权利要求3所述的信息处理设备,其中,所述输出单元输出所述获得单元所获得的前景图像和所述获得单元所获得的背景图像,使得所述前景图像关联于具有与所获得的前景图像的时间信息之前的时间点相对应的时间信息、并且具有与所述前景图像的时间信息最接近的时间信息的背景图像。6.根据权利要求3所述的信息处理设备,其中,所述输出单元输出所述获得单元所获得的前景图像和所述获得单元所获得的背景图像,使得所述前景图像关联于具有与所获得的前景图像的时间信息之后的时间点相对应的时间信息、并且具有与所述前景图像的时间信息最接近的时间信息的背景图像。7.根据权利要求1至6中任一项所述的信息处理设备,其中,所述获得单元还获得所述多个照相机所拍摄到的被摄体的3D模型数据,以及所述输出单元输出所述获得单元所获得的并且彼此相关联的前景图像、背景图像和3D模型数据。8.根据权利要求1至7中任一项所述的信息处理设备,其中,所述输出单元将彼此相关联的前景图像和背景图像在同一数据单位中输出。9.根据权利要求1...

【专利技术属性】
技术研发人员:矢埜智裕半田雅大相泽道雄水野祥吾田中克昌松下明弘森泽圭辅小宫山麻衣藤井贤一伊达厚
申请(专利权)人:佳能株式会社
类型:发明
国别省市:日本,JP

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1