当前位置: 首页 > 专利查询>梶田大树专利>正文

多视点影像观看系统及照相机系统技术方案

技术编号:24021161 阅读:130 留言:0更新日期:2020-05-02 05:25
本发明专利技术的课题在于提供一种在观看多视点影像的内容时,预先从选项中去除了看不见手部的影像的多视点影像观看系统。根据本申请的第一发明专利技术,对于由多个摄像机拍摄的图像数据及作为配置于时域的帧序列的动态图像(影像)数据,通过在信息处理装置中进行以手为对象的图像识别,来选择影像中显示了手的影像,或不选择影像中未显示手的影像,由此预先筛选显示于影像显示部的影像并呈现给观看者。

Multi view image viewing system and camera system

【技术实现步骤摘要】
【国外来华专利技术】多视点影像观看系统及照相机系统
本专利技术涉及一种利用多视点照相机拍摄外科手术等手艺的影像,并选择显示于监控显示器上的影像的系统。
技术介绍
以往,作为能够对多视点影像的内容从自由的方向简单地选择视点的观看界面,已提出了一种观看对象中心的盯视观看界面(例如,非专利文献1)。然而,其设想的是从所有角度观看进行体育、演艺等的人的全身,而没有设想注视施术者的手部操作而从所有角度进行观看。若照相机与拍摄对象之间没有障碍物,则无论选择哪个影像,均包括拍摄对象,因而视点的选项中无论包括哪个影像都不会有问题。但是,当拍摄外科手术等的手部操作时,存在施术者的头、身体会进入照相机与手部之间,从而导致看不见手部的问题。这样的影像没有信息价值,作为多视点影像的观看界面,选项中不应该包括这样的视点影像。当选择视点时选择了没有信息价值的影像的情况下,必须重新选择视点。此外,在本说明书中,所谓施术者,是指以外科医生为首的“物品制造:家具工、刀具工、雕刻家、烧炭工、织布技术人员、玻璃产品制造工、窑业技术人员、搪瓷工、砖/瓦类制造工、铸件工、蜡烛制造工、模具制本文档来自技高网...

【技术保护点】
1.一种多视点影像观看系统,其获得表示由施术者的手处理对象物时的状态的多视点的多个影像数据,处理该影像数据并在显示装置中进行显示,所述多视点影像观看系统的特征在于,具备:/n多个摄像机,其在不同的视点同时并行地拍摄处理对象物的施术者的手,并输出由连续的多个图像数据构成的影像数据;以及/n信息处理装置,其接受并处理由所述多个摄像机同时拍摄到的多个影像数据,/n所述信息处理装置具备:/n图像识别部,其对多重接收的多个影像数据探测每个图像数据,并识别每个图像数据中的与手有关的手图像数据;/n图像选择部,其从所述多个图像数据中按时间顺序选择由所述图像识别部识别到手图像数据的图像数据;以及/n影像显示部...

【技术特征摘要】
【国外来华专利技术】20170904 JP 2017-169185;20171226 JP 2017-2489451.一种多视点影像观看系统,其获得表示由施术者的手处理对象物时的状态的多视点的多个影像数据,处理该影像数据并在显示装置中进行显示,所述多视点影像观看系统的特征在于,具备:
多个摄像机,其在不同的视点同时并行地拍摄处理对象物的施术者的手,并输出由连续的多个图像数据构成的影像数据;以及
信息处理装置,其接受并处理由所述多个摄像机同时拍摄到的多个影像数据,
所述信息处理装置具备:
图像识别部,其对多重接收的多个影像数据探测每个图像数据,并识别每个图像数据中的与手有关的手图像数据;
图像选择部,其从所述多个图像数据中按时间顺序选择由所述图像识别部识别到手图像数据的图像数据;以及
影像显示部,其将由所述图像选择部按时间顺序所选择的图像数据发送至所述显示装置。


2.根据权利要求1所述的多视点影像观看系统,
所述影像显示部进行将由所述图像选择部按时间顺序所选择的图像数据连接起来的编辑,制成待输出至所述显示装置的一个编辑影像数据,并将该编辑影像数据发送至所述显示装置。


3.根据权利要求1至2中任一项所述的多视点影像观看系统,
所述信息处理装置具备计数部,针对每个图像数据进行识别区域数量的计数,并发送至所述图像选择部,所述识别区域为由所述图像识别部识别到手的手图像数据的区域,
所述图像选择部选择所述识别区域的数量较多的图像数据并发送至所述影像显示部。


4.根据权利要求1至3中任一项所述的多视点影像观看系统,
所述多个摄像机由一台主照相机和一台以上的副照相机构成,
所述信息处理装置具备计数部,针对每个图像数据进行识别区域的数量的计数,并发送至所述图像选择部,所述识别区域为由所述图像识别部识别到手的手图像数据的区域,
当所述识别区域的数量在任一影像中均为0时,所述图像选择部选择主照相机的图像数据并发送至所述影像显示部。


5.根据权利要求4所述的多视点影像观看系统,所述多视点影像观看系统能够将任意的所述摄像机定义为所述主照相机。


6.根据权利要求1至5中任一项所述的多视点影像观看系统,
所述图像识别部输出识别到手的所述识别区域被显示的位置和图像中的区域,
所述信息处理装置具备平均点计算部,由所述图像识别部所输出的一个以上的所述识别区域的中心点计算该中心点的平均点,并发送至所述图像选择部,
所述图像选择部选择所述平均点靠近图像中心点的图像数据并发送至所述影像显示部。


7.根据权利要求1至6中任一项所述的多视点影像观看系统,所述图像识别部仅识别戴手套的手的图像数据,而不识别未戴手套的手的图像数据。


8.一种处理表示由施术者的手处理对象物时的状态的多视点的多个影像数据并选择在显示装置中显示的影像的方法,其特征在于,具备:
图像识别步骤,对多重接收的多个影像数据探测每个图像数据,并识别每个图像数据中的与手有关的手图像数据;以及
图像选择步骤,从所述多个图像数据中按时间顺序选择通过所述图像识别步骤识别到手图像数据的图像数据。


9.根据权利要求8所述的方法,其具备:计数步骤,针对所述每个图像数据进行识别区域的数量的计数,所述识别区域为通过所述图像识别步骤识别到手的手图像数据的区域,
所述图像选择步骤选择所述每个图像数据中所述识别区域的数量较多的图像数据。


10.根据权利要求9所述的方法,
所述多个影像数据由一个主影像数据和一个以上的副影像数据构成,
当所述识别区域的数量在任一影像数据的相同时刻的每个图像数据中均为0时,所述图像选择步骤选择主影像数据的图像数据。


11.根据权利要求8至10中任一项所述的方法,
输出在所述图像识别步骤中识别到手的所述识别区域被显示的位置和图像中的区域,
所述方法具备平均点计算步骤:由所述图像识别步骤所输出的一个以上的所述识别区域的中心点计算该中心点的平均点,并发送至所述图像选择步骤,
所述图像选择步骤选择所述平均点靠近图像中心点的图像数据。


12.根据权利要求8至11中任一项所述的方法,所述图像识别步骤仅识别戴手套的手的图像数据,而不识别未戴手套的手的图像数据。


13.一种计算机程序,使所述信息处理装置或所述图像识别部执行权利要求8至12中任一项所述的步骤。


14.一种记录了权利要求13所述的计算机程序的计算机可读记录介质。


15.一种照相机系统,其在手术等施疗行为时使用,具备能够以固定图像及动态图像拍摄治疗对象患部和/或施术者的手部的带无影灯的照相机机构、以及显示由该照相机机构拍摄的影像的监控机构,所述照相机系统的特征在于,
所述照相机机构具备:能够移动和倾斜的整体基体、配设于该整体基体的大致中央的中央照相机单元、以及设于所述整体基体且配设于所述中央照相机单元的周围的至少一个周围照相机单元,所述中央照相机单元具备:中央单元基体、立设于该中央单元基体的中央部且形成为能够通过施术者的操作而使所述照相机机构整体移动和偏斜的操作手柄、以及内置于该操作手柄或与该操作手柄相邻地配设的中央照相机,所述周围照相机单元分别具备周围单元基体、配设于该周围单元基体的周围照相机以及在所述周围单元基体中与所述周围照相机相邻地配置的多个光源,所述中央照相机和周围照相机形成为能够分别在不同的视点以固定图像及动态图像同时拍摄治疗对象患部和/或施术者的手部,所述监控机构具备:通常显示所述中央照相机的影像的至少一台显示装置、以及通过观看者的操作也能够从周围照相机所拍摄的影像中选择显示于该显示装置的影像的操作装置。


16.根据权利要求15所述的照相机系统,所述中央照相机单元具备配置于所述中央照相机的附近的多个光源,这些多个光源构成了无影灯。


17.根据权利要求15或16所述的照相机系统,所述操作装置具有如下功能:能够将所述中央照相机单元及所述周围照相机单元所拍摄的影像中的两个以上的影像组合并显示于所述显示装置。


18.根据权利要求15至17中任一项所述的照相机系统,进一步具备:录像单元,其对由所述中央照相机单元及所述周围照相机单元拍摄到的各个影像并行...

【专利技术属性】
技术研发人员:梶田大树
申请(专利权)人:梶田大树
类型:发明
国别省市:日本;JP

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1