图像处理装置和方法制造方法及图纸

一种图像处理设备，包括电路，被配置为基于与背景图像相关联的深度数据、基线长度信息以及对象的建模数据，根据与对象被设置的位置相关联的建模条件，启动用于在背景图像中显示的所述对象的设置。

【技术实现步骤摘要】
【国外来华专利技术】
本公开涉及，尤其涉及被设计为提高使用多视图图像的服务的用户友好性的。〈相关申请的交叉参考〉本申请要求2013年9月11日提交的日本在先专利申请JP2013-188409和2014年8月28日提交的日本在先专利申请JP 2014-174173的优先权，通过参考将其全部内容合并于此。
技术介绍
有一种利用具有不同视点的图像来测量到测量对象(主题)的距离的已知技术。例如，提出了一种使用被称为“立体匹配”的技术的距离计算方法(例如，参见专利文献1)。通过立体匹配技术，根据具有相互不同视点的图像形成的多视图图像来计算指示到多视图图像中主题的距离的深度数据。通过深度数据，将多视图图像相互叠加，以生成提供给用户的图像。引用列表专利文献PTL 1 JP 2011-171858 A
技术实现思路
技术问题但是，需要提高这种多视图图像使用服务的用户友好性。本公开考虑到这些情况而提出，且用于提高使用多视图图像的服务的用户友好性。问题的解决方案根据本技术实施例的图像处理设备，包括:电路，被配置为基于与背景图像相关联的深度数据和基线长度信息以及对象的建模数据，根据与所述对象被设置的位置相关联的建模条件，启动用于在所述背景图像内显示的所述对象的设置。根据实施例的图像处理方法，包括:基于与背景图像相关联的深度数据和基线长度信息以及对象的建模数据，根据与所述对象被设置的位置相关联的建模条件，设置用于在所述背景图像内显示的对象；以及将待显示的设置对象放置在所述背景图像内的所述位置。根据本技术实施例的图像处理装置包括对象放置单元，用于在背景图像中要放置对象的位置设置所述对象的方位和尺寸，并将具有设置方位和设置尺寸的对象放置在背景图像中的指定位置，所述方位和所述尺寸基于深度数据、基线长度信息以及对象的三维建模数据来设置，深度数据指示到背景图像中主题的距离，基线长度信息是指示背景图像中的参考长度的信息。在将对象放置在背景图像中之后指定另一个位置时，对象放置单元可以在另一个位置设置对象的方位和尺寸，并且将具有设置方位和设置尺寸的对象放置在背景图像中的该另一个位置。当背景图像的视点的位置或方位有改变时，对象放置单元可以在视点的位置或方位尚未改变的背景图像中、在视点的位置或方位改变之前所述对象被放置的位置中设置对象的方位和尺寸，以及在视点的位置或方位已经改变的背景图像中、在视点的位置或方位改变之前所述对象被放置的位置中，放置具有设置方位和尺寸的对象。对象放置单元可以移动对象，以将具有设置方位和设置尺寸的对象与地板接触。对象放置单元可以测量背景图像中指定区域的长度。对象放置单元可以基于光源参数和深度数据模拟背景图像中的照明，并使得背景图像反映模拟的照明，光源参数是与光源有关的参数。对象放置单元可以识别其中放置有对象的背景图像中满足流线条件的部分，并在其中放置有对象的背景图像中突出被识别部分。对象放置单元可以在其中放置有对象的背景中要放置人员的图像的位置设置人员的方位和尺寸，并将具有设置方位和设置尺寸的人员的图像放置在其中放置有对象的背景图像中的指定位置，人员的方位和尺寸基于深度数据、基线长度信息以及人员的图像的三维建模数据来设置。对象放置单元可以在背景图像中要放置从对象的候选中选择的对象的位置设置从对象的候选中选择的对象的方位和尺寸，并将从对象的候选中选择的、具有设置方位和设置尺寸的对象放置在背景图像中的指定位置，被选择对象的方位和尺寸基于深度数据、基线长度信息以及从对象的候选中选择的对象的三维建模数据来设置。对象放置单元可以识别能够放置在背景图像中的对象，并从被识别对象中选择要放置在背景图像中的对象，对象基于深度数据、基线长度信息以及三维建模数据来识别。图像处理装置还可包括:成像单元，用于捕获主题的图像，并获得捕获图像作为背景图像;以及深度数据生成单元，用于生成通过成像单元获得的捕获图像的深度数据。捕获图像是通过具有相互不同视点的图像形成的多视图图像，深度数据生成单元可以生成多视图图像的深度数据，以及图像处理装置还可以包括:虚拟捕获图像生成单元，用于基于多视图图像和深度数据，生成虚拟捕获图像作为背景图像，虚拟捕获图像通过将多视图图像的主题成像而获得。对象可以是家具的图像。图像处理装置还可以包括购买处理单元，用于进行购买处理，以购买通过对象放置单元放置在背景图像中的家具。图像处理装置还可以包括传输单元，用于传输作为多视图图像的数据的多视图图像数据和多视图图像的深度数据，多视图图像通过具有相互不同视点的图像形成且用于生成背景图像。图像处理装置还可以包括组合图像数据生成单元，用于生成其中具有通过对象放置单元放置的对象的背景图像的图像数据。传输单元还可以传输通过组合图像数据生成单元生成的组合图像数据。图像处理装置还可以包括应用参数生成单元，用于生成应用参数，应用参数是有关于背景图像与对象的组合的参数。传输单元还可以传输通过应用参数生成单元生成的应用参数。图像处理装置还可以包括元数据生成单元，用于生成关于多视图图像的元数据。元数据可以包括基线长度信息。根据本技术实施例的图像处理方法包括:在背景图像中要放置对象的位置设置对象的方位和尺寸，方位和尺寸基于深度数据、基线长度信息以及对象的三维建模数据来设置，深度数据指示到背景图像中主题的距离，基线长度信息是指示背景图像中的参考长度的信息；以及将具有设置方位和设置尺寸的对象放置在背景图像中的指定位置。在本技术的实施例中，基于指示到背景图像中主题的距离的深度数据、指示背景图像中的参考长度的基线长度信息以及对象的三维建模数据，在背景图像中要放置对象的位置设置对象的方位和尺寸。然后将具有设置方位和设置尺寸的对象放置在背景图像的指定位置。本专利技术的有益效果根据本技术的实施例，可以处理图像。根据本技术的实施例，还可以提高使用多视图图像的服务的用户友好性。【附图说明】图1是用于说明多视图图像使用服务平台的示例的示意图。图2是用于说明使用多视图图像的应用的不例的不意图。图3是示出多视图图像使用服务提供系统的典型示例性结构的示意图。图4是示出终端装置的典型示例性结构的方框图。图5是用于说明成像单元的外观的示意图。图6是示出服务器的典型示例性结构的示意图。图7是用于说明终端装置和服务器的功能的功能方框图。图8是示出通过服务器管理的信息的示例的示意图。图9是示出多视图图像使用服务提供处理的示例性流程的流程图。图10是示出多视图图像和深度数据的示例的示意图。图11是示出多视图图像文件的典型示例性结构的示意图。图12是用于说明相机阵列的示例的示意图。图13是用于说明元数据的示例的示意图。图14是用于说明深度检测处理的示例性流程的流程图。图15是示出使用多视图图像服务提供系统的另一个典型示例性结构的示意图。图16是示出应用提供服务器的典型示例性结构的示意图。图17是用于说明终端装置、服务器以及应用提供服务器的功能的功能方框图。图18是示出多视图图像使用服务提供处理的另一个示例性流程的流程图。图19是示出被显示信息的示例的示意图。图20是示出多视图图像使用服务提供系统的另一个典型示例性结构的示意图。图21是用于说明虚拟镜头处理的示例性流程的示意图。图22是用于说明终端装置和服务器的功能的功能方框图。图23是示出多视图图像本文档来自技高网...

【技术保护点】
一种图像处理设备，包括：电路，被配置为基于与背景图像相关联的深度数据和基线长度信息以及对象的建模数据，根据与所述对象被设置的位置相关联的建模条件，启动用于在所述背景图像内显示的所述对象的设置。

【技术特征摘要】
【国外来华专利技术】...

【专利技术属性】
技术研发人员：早坂健吾，森浩典，井藤功久，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本;JP