图像处理装置、摄影系统、图像处理方法制造方法及图纸

本发明专利技术涉及图像处理装置、摄影系统以及图像处理方法，其目的在于，提高用户在显示重叠了平面图像的天球图像中寻找重叠图像的寻找效率。本发明专利技术的图像处理装置构成为，具备受理部(52)，用于接受表示开始将相对于第一图像的重叠位置已经确定了的第二图像重叠到该第一图像上并在显示器上显示的开始指示；以及，显示控制部(56)，用于在所述显示装置上显示重叠了所述第二图像状态下的所述第一图像中的规定区域的图像，即规定区域图像时，使得规定区域与显示器的显示区域保持一致，显示控制部(56)在所述受理部接受所述开始指示之际在所述显示装置的显示区域上显示所述规定区域图像时，使得所述第二图像被包含在该规定区域图像之中。

Image processing apparatus, photographing system, and image processing method

The present invention relates to an image processing device, a photographic system and an image processing method, which aims to improve the search efficiency of the user to find overlapping images in a celestial image that displays a plane image. The image processing device of the present invention is composed of an acceptance unit (52) for accepting a starting indication that a second image has been overlapped on the first image and displayed on the display, and the display control unit (56) is used to display the overlap on the display device, which is indicated to begin to be relative to the overlap position of the first image. An image in the specified area of the first image in the state of the second image, that is, when the area image is specified, the specified area is consistent with the display area of the display, and the display control unit (56) displays the specified area on the display area of the display device at the time of acceptance of the starting indication. When the image is made, the second image is included in the specified area image.

【技术实现步骤摘要】
图像处理装置、摄影系统、图像处理方法
本专利技术涉及图像处理装置、摄影系统以及图像处理方法。
技术介绍
专利文献1(JP特开2016-96487号公报)公开了一种在广角平面图像的部分区域中嵌入另外拍摄得到的不同于广角平面图像的放大平面图像，用于在放大该一部分区域时也能够清晰显示图像的技术方案。另一方面，近年来如专利文献2(JP特开2012-178135号公报)公开的特殊数码相机，能够以一次拍摄获得形成360°天球图像的原始图像的两个半球图像数据。该数码相机根据两个半球图像数据，生成等距柱形投影图像数据，并将该等距柱形投投影图像数据送往智能电话等通信终端。通信终端根据收到的等距柱形投影图像数据，生成天球图像。由于这样获得的天球图像中存在弯曲，难以提供给用户，因此，通信终端上显示表示天球图像中一部分的规定区域的规定区域图像，这样，用户在阅览时便能够获得与普通的数码相机拍摄的平面图像相同的感觉。但是，上述现有技术中存在以下问题。首先，在把另外拍摄得到的不同于天球图像的平面图像(重叠图像)叠加到天球图像中一部分的区域上显示时，需要用户纵向、横向和斜向旋转上述规定区域图像内尚未包含重叠图像时的天球图像，用以寻找重叠图像，因而十分花费功夫。其次，现有技术方案中没有考虑到叠加多个高画质图像的问题。在具有多个高画质的图像，且这些图像是与天球图像在同一位置拍摄的情况下，多个高画质图像被叠加在同一场所。然而，多个高画质图像的视角相同的情况较少，而不同视角的图像因上下重叠，用户看不到相对于视线被叠加在后面的高画质图像。再次，如果只在低画质图像上叠加高质量图像，会产生用户将难以判断低画质图像的哪个部位上叠加了高画质图像的问题。类似天球图像这种视角宽、用户无法一次全部看到整体的图像中该问题尤其显著。对此，可以考虑让显示装置在叠加了高画质图像的位置上显示某种标记，但是这又会使得用户观看高质量图像时受到标记影响，从而造成新的问题。
技术实现思路
鉴于上述问题，本专利技术首先以提高用户寻找重叠图像的效率为目的，提出一种图像处理装置，其特征在于具备受理部，用于接受开始指示，该开始指示表示开始将相对于第一图像的重叠位置已经确定了的第二图像重叠到该第一图像上，并显示在显示装置上；以及，显示控制部，用于在所述显示装置上显示，重叠了所述第二图像状态下的所述第一图像中的规定区域的图像，即规定区域图像时，使得所述规定区域与所述显示装置的显示区域保持一致，所述显示控制部在所述受理部接受所述开始指示之际在所述显示装置的显示区域上显示所述规定区域图像时，使得所述第二图像被包含在该规定区域图像之中。其次，本专利技术还以良好地重叠多幅高画质图像为目的，进一步具备，重叠顺序决定部，用于在重叠多个所述第二图像时，按照多个所述第二图像的大小顺序来决定重叠顺序；以及，重叠部，用于以所述重叠顺序决定部决定的重叠顺序，将多个所述第二图像中较大的第二图像重叠到靠近所述第一图像一方。再者，本专利技术以便于阅览具有不同画质的多幅图像为目的，所述图像处理装置是显示重叠了与所述第一图像画质不同的所述第二图像的该第一图像的显示装置，其中进一步具备，判断部，用于判断所述第二图像是否受到阅读；以及，图像提示部，用于根据所述判断部的判断结果，在显示和非显示所述第二图像存在的表述之间切换。上述本专利技术的效果在于，提高用户寻找重叠图像的效率，良好地重叠多幅高画质图像，便于阅览具有不同画质的多幅图像。附图说明图1是特殊摄影装置的外观图，其中，(a)是特殊摄影装置的左视图，(b)是特殊拍摄装置的后视图，图1(c)是特殊摄影装置的俯视图，(d)是特殊摄影装置的仰视图。图2是使用特殊摄影装置的示意图。图3是特殊摄影装置1拍摄的图像的示意图，其中，(a)中为特殊拍摄装置1拍摄的半球图像(前方)，(b)表示特殊摄影装置拍摄的半球图像(后方)，(c)是利用等距柱形投影法表示的图像。图4是天球图像的示意图，其中，(a)显示用等矩柱形投影图像覆盖球的状态，(b)是天球图像。图5是将天球图像作为三维立体球体显示时假想照像机以及规定区域的位置的示意图。图6是用来说明用假想照相机拍摄得到的图像中显示在显示器上的规定区域的示意图，(a)是图5的立体图，(b)显示器上规定区域。图7是规定区域信息与规定区域T的图像之间的关系的示意图。图8是本实施方式的摄像系统的构成的示意图。图9是表示适配器的立体图。图10是摄影系统的使用示意图。图11是特殊拍摄装置1的硬件结构模块图。图12是普通摄像装置3的硬件结构模块图。图13是智能电话的硬件结构模块图。图14是构成本实施方式的摄影系统的一部分的特殊拍摄装置1、普通摄影装置3以及智能电话5的各功能模块图。图15是关于联动摄影的示意图，其中(a)是联动摄影管理表的示意图，(b)是联动摄影装置设定画面的示意图。图16是示出图像及声音处理部的具体功能模块图。图17是重叠显示元数据的数据结构示意图。图18是网格区域的示意图，其中(a)显示第二对应区域中网格区域，(b)显示第三对应区域中网格区域。图19是本实施方式涉及的摄影方法的时序图。图20是重叠显示参数制作处理过程的图像示意图。图21是指定周边区域图像时的示意图。图22是第二对应区域被分割为多个网格区域的示意图。图23是等距柱形投影图像EC中的第三对应区域的示意图。图24是补偿显示参数制作处理过程的图像示意图。图25是重叠处理过程的图像的示意图。图26是天球图像上叠加了平面图像时的二维示意图。图27是天球图像上叠加了平面图像时的三维示意图。图28是在不使用本实施方式的位置参数的情况下将平面图像叠加到天球图像上的二维示意图。图29是用本实施方式的位置参数将平面图像叠加到天球图像上的二维示意图。图30是对比没有重叠显示和重叠显示的图像显示的示意图，其中，(a)是没有重叠显示时的广域图像的显示例，(b)是没有重叠显示时的电视图像的显示例，(c)是重叠显示时的广域图像的显示例，(d)是重叠显示时的电视图像的显示例。图31是本实施方式涉及的摄影系统的构成的示意图。图32是图像处理服务器的硬件结构框图。图33是第二实施方式涉及的摄影系统的功能框图。图34是图像及声音处理部的具体功能框图。图35是第二实施方式涉及的摄影方法的时序图。图36是在确定关注点以及生成缩放参数的处理过程中的图像的示意图。图37是关于缩放参数计算的示意图。其中，(a)是用来说明缩放参数的计算处理，(b)是表示关注点和四个顶点与规定区域T之间的关系。图38是规定区域图像的示意图。其中，(a)是完全不包含重叠图像的规定区域图像，(b)是虽然重叠图像的关注点为规定区域图像的中心点，但重叠图像只有一部分被包含在规定区域内时的规定区域图像，(c)是重叠图像的关注点为规定区域图像的中心点，且重叠图像全部包含在规定区域内，但是重叠图像的尺寸变小时的规定区域图像，(d)是重叠图像全部包含在规定区域内，但重叠图像的关注点不是规定区域图像的中心点时的规定区域图像。图39是叠加多个平面图像时等距柱形投影图像的示意图。图40是改进例2的重叠显示元数据的数据构成的示意图。图41是规定区域图像中包含多个重叠图像的画面示意图。图42是假想照相机IC的位置与以视角α确定的规定区域T之间关系的示意图。其中，(a)是假想本文档来自技高网...

【技术保护点】
1.一种图像处理装置，其特征在于，具备，受理部，用于接受开始指示，该开始指示表示开始将相对于第一图像的重叠位置已经确定了的第二图像重叠到该第一图像上，并显示在显示装置上；以及，显示控制部，用于在所述显示装置上显示重叠了所述第二图像状态下的所述第一图像中的规定区域的图像，即规定区域图像时，使得所述规定区域与所述显示装置的显示区域保持一致，所述显示控制部在所述受理部接受所述开始指示之际在所述显示装置的显示区域上显示所述规定区域图像时，使得所述第二图像被包含在该规定区域图像之中。

【技术特征摘要】
2016.12.28 JP 2016-256575;2016.12.28 JP 2016-256381.一种图像处理装置，其特征在于，具备，受理部，用于接受开始指示，该开始指示表示开始将相对于第一图像的重叠位置已经确定了的第二图像重叠到该第一图像上，并显示在显示装置上；以及，显示控制部，用于在所述显示装置上显示重叠了所述第二图像状态下的所述第一图像中的规定区域的图像，即规定区域图像时，使得所述规定区域与所述显示装置的显示区域保持一致，所述显示控制部在所述受理部接受所述开始指示之际在所述显示装置的显示区域上显示所述规定区域图像时，使得所述第二图像被包含在该规定区域图像之中。2.根据权利要求1所述的图像处理装置，其特征在于，所述显示控制部在显示所述规定区域图像时，使得所述第二图像的中心点成为所述显示装置的显示区域的中心点。3.根据权利要求1或2所述的图像处理装置，其特征在于，所述显示控制部在显示所述规定区域图像时，使得整个所述第二图像被包含在所述显示装置的显示区域之中。4.根据权利要求3所述的图像处理装置，其特征在于，所述显示控制部在显示所述规定区域图像时，使得所述显示装置的显示区域中所述第二图像的尺寸为最大。5.根据权利要求1至4中任意一项所述的图像处理装置，其特征在于，在所述第一图像上叠加了多幅所述第二图像的情况下，所述显示控制部在显示所述规定区域图像时，使得预先确定的特定的所述第二图像被包含在所述规定区域图像之中。6.根据权利要求5所述的图像处理装置，其特征在于，进一步具备，重叠顺序决定部，用于在重叠多个所述第二图像时，按照多个所述第二图像的大小顺序来决定重叠顺序；以及，重叠部，用于以所述重叠顺序决定部决定的重叠顺序，将多个所述第二图像中较大的第二图像重叠到靠近所述第一图像一方。7.根据权利要求6所述的图像处理装置，其中，所述重叠顺序决定部对比多个所述第二图像的视角，按照视角大小以从大到小为重叠顺序，所述重叠部按照所述重叠顺序重叠多个所述第二图像。8.根据权利要求7所述的图像处理装置，其中，具有位置决定部，用于决定与所述第一图像匹配并重叠到该第一图像上的多个所述第二图像的位置，所述重叠顺序决定部对比从规定的视点观察与所述第一图像匹配的多个所述第二图像时的视角，按照视角大小以从大到小为重叠顺序。9.根据权利要求8所述的图像处理装置，其中，所述位置决定部通过所述第一图像与所述第二图像的匹配，求出所述第一图像中与所述第二图像一致的重合区域，所述重叠部对所述第二图像进行投影方式转换，将该第二图像转换为所述重合区域，用以将所述第二图像重叠到所述第一图像上。10.根据权利要求9所述的图像处理装置，其中，所述位置决定部从多个所述第二图像中检测重叠并成对的第二图像对，对所述第二图像对中视角较大一方的所述第二图像和另一方所述第二图像进行匹配，确定另一方所述第二图像相对于一方所述第二图像的相对位置所对应的所述重合区域，所述重叠部对视角为最大的所述第二图像实行投影方式转换，将该视角最大的所述第二图像转换为所述重合区域，同时，对视角为第二大以下的所述第二图像实行投影方式转换，将视角第二大以下的所述第二图像转换为用所述相对位置确定的所述重合区域，用以进行重叠。11.根据权利要求6至10中任意一项所述的图像处理装置，其中，所述重叠部将关于所述第二图像的视角的信息与所述第二图像一起显示。12.根据权利要求11所述的显示装置，其中，关于所述第二图像的视角的信息为所述第二图像的焦距信息。13.根据权利要求6所述的图像处理装置，其中，所述重叠顺序决定部在多个所述第二图像的视角相同且重叠的情况下，根据所述第一图像在所述显示装置中受到阅览的阅览区域的中心与所述第二图像的中心之间的距离，决定多个所述第二图像的重叠顺序。14.根据权利要求1所述的图像处理装置，所述图像处理装置是显示重叠了与所述第一图像画质不同的所述第二图像的该第一图像的显示装置，进一步具备，判断部，用于判断所述第二图像是否受到阅读；以及，图像提示部，用于根据所述判断部的判断结果，在显示和非显示所述第二图像存在的表述之间切换。15.根据权利要求14所述的图像处理装置，其中，所述图像提示部根据所述判断部的判断结果，在显示和非显示表示所述第二图像的位置或大小的图像元件之间切换。16.根据权利要求15所述的图像处理装置，...

【专利技术属性】
技术研发人员：吉田和弘，河口启一，水藤浩，浅井贵浩，
申请(专利权)人：株式会社理光，
类型：发明
国别省市：日本,JP