图像处理设备、图像处理方法和程序技术

为了对于全景图像，生成被显示时，表现出令人满意的可见性的缩略图图像。本发明专利技术生成第一缩略图图像数据和第二缩略图图像数据，作为全景图像数据的缩略图图像，所述第一缩略图图像数据是通过对通过合成多个拍摄图像而生成的全景图像数据应用分辨率变换生成的，而所述第二缩略图图像数据是通过对全景图像数据进行宽高比调整处理生成的。

【技术实现步骤摘要】
【国外来华专利技术】
本技术涉及图像处理设备，图像处理方法，和实现所述图像处理设备和图像处理方法的程序。特别地，本技术涉及适合于显示全景图像数据的缩略图的图像处理。引文列表专利文献专利文献1:JP 2012-99906A
技术介绍
例如，在水平扫描(swe印)照相机时，用户能够获得大量的拍摄图像(帧图像数据)，通过合成获得的拍摄图像，可获得所谓的全景图像。另外，用语“扫描”指的是为了获得用于生成全景图像的多条帧图像数据，在拍摄图像时，图像拍摄设备沿摄像方向转动地运动的操作。例如，如果沿水平方向移动摄像方向，那么扫描方向指的是水平方向。诸如数字静态照相机之类的图像拍摄设备被配置成即使对于全景图像，也和普通的静止图像一样地生成缩略图图像，并且列出和显示例如生成的缩略图图像。就显示缩略图来说，如在专利文献I中所述，提出了一种显示3维(3D)图像的缩略图的技术。
技术实现思路
与普通的静止图像相比，全景图像在水平方向很长(或者在垂直方向很长)。从而在一些情况下，尤其是当列出并显示多个缩略图时，在保持图像宽高比(或高宽比，下同)的同时，简单地缩小(经过分辨率变换)的缩略图图像会显著降低用户的可见性。不过，经过分辨率变换的缩略图图像确实表现整个全景图像。同时，即使当列出并显示各个缩略图图像时，在专利文献I中记载的关于3D缩略图图像的技术也能够使缩略图图像更易于查看。不过，3D缩略图图像不直接表现整个全景图像，而是必须进行显示控制，比如转动3D缩略图图像，结果产生较重的处理负担。用户易于认识的缩略图图像取决于缩略图图像的显示屏幕或显示区域的宽高比和大小，缩略图图像的数目等。鉴于这样的情况，本技术的目的是更适当地向用户呈现全景图像数据的缩略图图像。首先，按照本技术的图像处理设备包括:第一缩略图生成部件，所述第一缩略图生成部件被配置成通过对通过合成多个拍摄图像而生成的全景图像数据应用分辨率变换，生成第一缩略图图像数据；和第二缩略图生成部件，所述第二缩略图生成部件被配置成通过对全景图像数据进行宽高比调整处理，生成第二缩略图图像数据。如果对于单条全景图像数据，预先生成了经过分辨率变换的第一缩略图图像数据，和经过宽高比调整处理的第二缩略图图像数据，那么可按照显示全景图像数据的缩略图图像的各种情形，显示更适当的缩略图图像。第二，在按照本技术的图像处理设备中，可取的是第二缩略图生成部件根据处理选择条件，在各种宽高比调整处理之中，决定宽高比调整处理的种类，并生成经过决定的宽高比调整处理的第二缩略图图像数据。作为宽高比调整处理，各种处理方法都是可能的，以致通过利用生成全景图像数据的方法，全景图像数据的视角等作为处理选择条件，能够选定适当的宽高比调整处理。第三，在按照本技术的图像处理设备中，可取的是第二缩略图生成部件利用不同种类的宽高比调整处理，生成多条第二缩略图图像数据。S卩，按照本技术的图像处理设备生成第一缩略图图像数据，和充当多条第二缩略图图像数据的3条或者更多的缩略图图像数据。第四，在按照本技术的图像处理设备中，可取的是第二缩略图生成部件利用相同种类的宽高比调整处理，生成对于全景图像数据的视点位置不同的多条第二缩略图图像数据。如果生成了具有不同视点位置的多条缩略图图像数据，那么能够切换和显示从不同视点位置，表示原始全景图像数据的缩略图。第五，在按照本技术的图像处理设备中，可取的是第二缩略图生成部件通过判定全景图像数据中的对象，设定视点位置，并通过按照视点位置，进行宽高比调整处理，生成第二缩略图图像数据。第二缩略图生成部件通过判定对象，判定全景图像数据中的重要对象，随后可按照判定结果，设定缩略图图像的视点位置。第六，在按照本技术的图像处理设备中，可取的是当为其生成缩略图的图像数据是通过拍摄普通图像获得的图像数据时，第一缩略图生成部件生成第一缩略图图像数据，而当为其生成缩略图的图像数据是全景图像数据时，第一缩略图生成部件生成第一缩略图图像数据，第二缩略图生成部件生成第二缩略图图像数据。这允许适当地生成各条缩略图图像数据，所述各条缩略图图像数据中的每一个都支持普通拍摄图像和全景拍摄图像。第七，在按照本技术的图像处理设备中，可取的是第二缩略图生成部件执行的宽高比调整处理是渲染通过把全景图像纹理映射到全景图像数据的投影面的三维模型而获得的图像的处理，对全景图像应用极坐标变换的处理，和通过利用全景图像中的像素的重要性的判定结果，缩小全景图像的处理任意之一。在处理中，能够生成具有比经过诸如简单地切掉一部分的全景图像之类宽高比调整处理更高的有利视觉效果的缩略图图像数据。第八，在按照本技术的图像处理设备中，可取的是进行把第一缩略图图像数据和第二缩略图图像数据作为对应于全景图像数据的缩略图图像数据，记录在记录介质中的处理。这允许在稍后显示缩略图图像时，使用生成的第一缩略图图像数据和生成的第二缩略图图像数据。按照本技术的图像处理方法包括:通过对通过合成多个拍摄图像而生成的全景图像数据应用分辨率变换，生成第一缩略图图像数据的第一缩略图生成过程；和通过对全景图像数据进行宽高比调整处理，生成第二缩略图图像数据的第二缩略图生成过程。按照本技术的程序使运算处理设备执行各个过程中的处理。这使得能够实现一种对于单条全景图像数据，生成经过分辨率变换的第一缩略图图像数据，和经过宽高比调整处理的第二缩略图图像数据的设备。按照本技术，如果对于单条全景图像数据，生成经过分辨率变换的第一缩略图图像数据，和经过宽高比调整处理的第二缩略图图像数据，那么按照显示缩略图的情况，显示更适当的缩略图图像的显示方法是可行的，从而改善用户的缩略图可识别性。【附图说明】图1是说明按照本技术的实施例拍摄的全景图像的说明图。图2是按照实施例的全景图像合成的说明图。图3是按照实施例的全景图像的说明图。图4是说明按照实施例，对于全景图像显示缩略图图像的说明图。图5是按照实施例的图像处理设备的方框图。图6是按照实施例的图像处理设备进行的处理的流程图。图7是按照实施例的图像拍摄设备的方框图。图8是按照实施例的图像拍摄设备进行的全景图像生成处理的说明图。图9是按照实施例的图像拍摄设备进行的缩略图图像生成处理的说明图。图10是按照实施例的通过圆柱投影和球面投影，生成缩略图图像的视点位置的说明图。图11是按照实施例的宽高比调整缩略图图像的说明图。图12是按照实施例的宽高比调整缩略图图像的说明图。图13是按照实施例的缩略图生成处理例子的流程图。图14是按照实施例的缩略图生成处理例子的流程图。图15是按照实施例的缩略图生成处理例子的流程图。图16是按照实施例判断的图像拍摄设备的姿势的说明图。图17是按照实施例的其中列出和显示缩略图图像的例子的说明图。图18是按照实施例的其中显示单个缩略图图像的例子的说明图。图19是按照实施例判断的显示区域的说明图。图20是按照实施例的显示处理例子的流程图。图21是按照实施例的显示处理例子的流程图。图22是按照实施例的显示处理例子的流程图。图23是按照实施例的显示处理例子的流程图。图24是按照实施例的计算机设备的方框图。【具体实施方式】将按照以下顺序，说明实施例。作为实施例，将说明图像处理设备，内置有所述图像处理设备的图像拍摄设备，起图像处理设备作用的计算机设备，以及程序的例子。本文档来自技高网...

【技术保护点】
一种图像处理设备，包括：第一缩略图生成部件，所述第一缩略图生成部件被配置成通过对通过合成多个拍摄图像而生成的全景图像数据应用分辨率变换，生成第一缩略图图像数据；和第二缩略图生成部件，所述第二缩略图生成部件被配置成通过对全景图像数据进行宽高比调整处理，生成第二缩略图图像数据。

【技术特征摘要】
【国外来华专利技术】...

【专利技术属性】
技术研发人员：木村笃史，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本;JP