图像生成装置、图像生成系统、图像生成方法及图像生成程序制造方法及图纸

本发明专利技术提供一种即使长焦图像组的各图像之间的重复区域少也能够良好地合成长焦图像组的图像生成装置、图像生成系统、图像生成方法及图像生成程序。图像生成装置具备：图像获取部(2a)，获取通过摄像装置拍摄的广角图像组和与广角图像组同时拍摄的长焦图像组，所述广角图像组及所述长焦图像组是一边改变摄像装置的位置一边拍摄了被摄体的广角图像组及长焦图像组，所述摄像装置具备由具有共同的光轴的广角光学系统及长焦光学系统构成的摄像光学系统；合成信息获取部(2b)，分析所获取的广角图像组，并获取长焦图像组的合成中使用的合成信息；及合成图像生成部(2c)，根据合成信息、与广角光学系统及长焦光学系统的焦距相关的信息以及长焦图像组生成合成了长焦图像组的图像。

Image generation device, image generation system, image generation method and image generation program

【技术实现步骤摘要】
【国外来华专利技术】图像生成装置、图像生成系统、图像生成方法及图像生成程序
本专利技术涉及一种图像生成装置、图像生成系统、图像生成方法及图像生成程序，尤其涉及一种从一边移动摄像位置一边拍摄了被摄体的多个图像(图像组)生成合成图像的技术。
技术介绍
有贴合多个图像而获得更大的图像的技术，被称为全景合成、拼接等。专利文献1中所记载的马赛克图像合成装置由一边移动一边拍摄的视场较窄的图像组合成视场较宽的一个图像(马赛克图像)，并作为合成中使用的信息获取拍摄各图像时的相机的位置及姿势信息。并且，通过分析图像组能够估计相机的位置及姿势信息。专利文献1中记载有如下顺序，即，当已知相对于N张图像中的第j图像(其中，j＜N-1)的相机的位置及姿势信息时，估计关于第j+1图像的相机的位置及姿势信息。首先，进行第j图像与第j+1图像重复的区域中存在的特征点的对应关联，并求出适当的数量的对应的特征点对。接着，求出使建立对应关联的第j图像中的特征点与第j+1图像中的特征点的最小平方误差最小的、相对于拍摄第j图像时的相机的位置及姿势信息的拍摄第j+1图像时的相机的位置本文档来自技高网...

【技术保护点】
1.一种图像生成装置，其具备：/n图像获取部，获取通过摄像装置拍摄的广角图像组和与所述广角图像组同时拍摄的长焦图像组，所述广角图像组及所述长焦图像组是一边改变所述摄像装置的位置一边拍摄了被摄体的所述广角图像组及所述长焦图像组，所述摄像装置具备由具有共同的光轴的广角光学系统及长焦光学系统构成的摄像光学系统；/n合成信息获取部，分析所述获取的所述广角图像组，并获取所述长焦图像组的合成中使用的合成信息；及/n合成图像生成部，根据所述合成信息、与所述广角光学系统及所述长焦光学系统的焦距相关的信息以及所述长焦图像组生成合成了所述长焦图像组的图像。/n

【技术特征摘要】
【国外来华专利技术】20170516 JP 2017-0975941.一种图像生成装置，其具备：
图像获取部，获取通过摄像装置拍摄的广角图像组和与所述广角图像组同时拍摄的长焦图像组，所述广角图像组及所述长焦图像组是一边改变所述摄像装置的位置一边拍摄了被摄体的所述广角图像组及所述长焦图像组，所述摄像装置具备由具有共同的光轴的广角光学系统及长焦光学系统构成的摄像光学系统；
合成信息获取部，分析所述获取的所述广角图像组，并获取所述长焦图像组的合成中使用的合成信息；及
合成图像生成部，根据所述合成信息、与所述广角光学系统及所述长焦光学系统的焦距相关的信息以及所述长焦图像组生成合成了所述长焦图像组的图像。


2.根据权利要求1所述的图像生成装置，其中，
所述合成信息获取部分析所述获取的所述广角图像组，并分别估计拍摄了所述广角图像组的各广角图像时的所述摄像装置的位置及姿势来作为所述合成信息，
所述合成图像生成部根据所述摄像装置的位置及姿势以及所述广角光学系统与所述长焦光学系统的视角比来合成所述长焦图像组。


3.根据权利要求2所述的图像生成装置，其中，
所述合成图像生成部通过以所述摄像装置的位置为起点朝向所述摄像装置的摄像方向反映所述视角比并进行投影来合成所述长焦图像组的各长焦图像。


4.根据权利要求1所述的图像生成装置，其中，
所述合成信息获取部分析所述获取的所述广角图像组，并分别估计拍摄了所述广角图像组的各广角图像时的所述摄像装置的位置及姿势和所述被摄体的立体形状来作为所述合成信息，
所述合成图像生成部根据所述摄像装置的位置及姿势、所述被摄体的立体形状以及与所述广角光学系统及所述长焦光学系统的焦距相关的信息来合成所述长焦图像组。


5.根据权利要求4所述的图像生成装置，其中，
所述合成信息获取部提取所述广角图像组的各广角图像的重复的区域中的多个特征点，并将所述提取的多个特征点的三维位置作为所述被摄体的立体形状来估计，
所述合成图像生成部在包含所述多个特征点的三维位置的所述被摄体的三维模型表面映射所述长焦图像组的对应的纹理而生成合成了所述长焦图像组的图像。


6.根据权利要求1至5中任一项所述的图像生成装置，其中，
所述合成信息获取部通过运动恢复结构法或同时定位与地图构建法分别估计拍摄了所述广角图像组的各广角图像时的所述摄像装置的位置及姿势和所述被摄体的立体形状。


7.一种图像生成系统，其具备：
摄像装置，具备摄像光学系统、定向传感器、和图像读出部，其中，所述摄像光学系统由具有共同的光轴的广角光学系统及长焦光学系统构成，所述定向传感器具有由二维状排列的光电转换元件构成的多个像素且包含对经由所述广角光学系统及所述长焦光学系统入射的光束分别进行光瞳分割而选择性地受光的多个像素，所述图像读出部分别从所述定向传感器同时获取经由所述广角光学系统受光的广角图像及经由所述长焦光学系统受光的长焦图像；及
权利要求1至6中任一项所述的图像生成装置，
所述图像获取部一边改变所述摄像装置的位置一边进行拍摄，通过获取由所述图像读出部读出的所述广角图像及所述长焦图像而获取所述广角图像组及所述长焦图像组。


8.根据权利要求7所述的图像生成系统，其中，
所述摄像光学系统的广角光学系统及长焦光学系统中的一个光学系统...

【专利技术属性】
技术研发人员：小野修司，
申请(专利权)人：富士胶片株式会社，
类型：发明
国别省市：日本;JP