用于处理图像的方法和设备技术

提供了一种图像处理方法，包括：获取在至少两个方向上捕捉的图像；通过将所述图像投影到多面体上来生成投影图像；移动所述投影图像中的像素中的至少一个像素的位置，以将所述投影图像重新形成为矩形图像；并且处理所述矩形图像。

【技术实现步骤摘要】
【国外来华专利技术】用于处理图像的方法和设备
本公开涉及一种用于处理虚拟图像的方法和设备。
技术介绍
随着虚拟现实(VR)相关技术和装置的最近发展，使用该技术和装置的VR装置已经成为人们关注的焦点。这些VR装置被广泛应用于诸如娱乐、教育、办公和医疗的各种领域。VR装置上显示的VR图像根据佩戴VR显示装置的用户的注视而移动，因此，VR图像应该包括用户周围的所有周边图像。也就是说，从VR装置提供的VR图像是与用户周围的所有方向相应的图像，即，360度图像。因此，对这种360度图像处理的兴趣连同对VR装置的兴趣已增加。根据相关的技术处理360度图像的方法对大尺寸图像进行处理，因此，处理效率低，功耗高，并且一部分图像可能丢失，从而降低质量。因此，需要一种能够提供高质量图像的相对高效的图像处理方法和设备。
技术实现思路
技术方案提供了一种用于处理图像的方法和设备。更具体地，提供了一种能够提供高质量图像的相对高效的图像处理方法和设备。有益效果根据实施例，可以高效地提供高质量的360度图像。附图说明图1示出了360度图像。图2是根据实施例的图像处理方法的流程图。图3示出了根据实施例的将获取的图像投影在多面体上的操作。图4示出了根据实施例的投影图像。图5是根据实施例的矩形图像重新形成方法的流程图。图6示出了根据实施例的矩形图像重新形成方法。图7示出了根据实施例的像素的水平移动。图8示出了根据实施例的像素的水平移动的结果。图9示出了根据实施例的像素的垂直移动。图10示出了根据实施例的像素的垂直移动的结果。图11示出了根据实施例的重新形成的实际矩形图像。图12是根据另一实施例的矩形图像重新形成方法的流程图。图13示出了根据另一实施例的矩形图像重新形成方法。图14是根据另一实施例的像素的移动的次序图。图15示出了根据另一实施例的像素的垂直移动。图16示出了根据另一实施例的矩形图像重新形成方法。图17示出了根据另一实施例的参考线设置操作。图18是根据实施例的图像处理设备的流程图。图19是根据另一实施例的图像处理方法的流程图。图20是根据实施例的选择投影图像恢复方法的处理的流程图。图21是根据实施例的投影图像恢复方法的流程图。图22是根据另一实施例的投影图像恢复方法的流程图。图23是根据另一实施例的图像处理设备的流程图。图24示出了根据实施例的投影图像。图25和图26示出了根据实施例的投影图像的生成。图27示出了根据实施例的矩形图像重新形成方法。图28是根据另一实施例的矩形图像重新形成方法的流程图。图29示出了根据另一实施例的矩形图像重新形成方法。图30和图31示出了根据另一实施例的像素的移动。图32示出了根据另一实施例的矩形图像重新形成方法。图33和图34示出了根据另一实施例的像素的移动。图35示出了根据另一实施例的矩形图像重新形成方法。图36示出了根据另一实施例的像素的移动。图37示出了根据另一实施例的矩形图像重新形成方法。图38示出了根据另一实施例的像素的移动。最优实施方式根据本公开的一方面，一种图像处理方法包括：获取在至少两个方向上捕捉的图像；通过将所述图像投影到多面体上来生成投影图像；移动所述投影图像中的像素中的至少一个像素的位置以将所述投影图像重新形成为矩形图像；并处理所述矩形图像。根据本公开的另一方面，一种图像处理方法包括：获取矩形图像；移动所述矩形图像中的像素中的至少一个像素的位置来恢复投影图像；并且将所述投影图像组装成多面体并对所述多面体进行反向投影以生成反向投影图像。根据本公开的另一方面，一种图像处理设备包括：控制器，被配置为控制获取在至少两个方向上捕捉的图像，通过将所述图像投影到多面体上来生成投影图像，通过移动所述投影图像中的像素中的至少一个像素的位置来重新形成矩形图像，并且处理所述矩形图像；以及存储器，存储用于控制器的操作的数据。具体实施方式参照附图，将清楚本公开的优点和特征以及用于实现它们的方法，其中，附图中示出了实施例。然而，本公开可以以很多不同的形式被实施，并且不应该被解释为限于本文阐述的实施例；相反，提供这些实施例使得本公开将是彻底和完整的，并且将本公开的构思完全传达给本领域普通技术人员，并且本公开仅由权利要求的范围限定。在整个说明书中，相同的标号表示相同的元件。在整个说明书中，当描述特定部件被“连接”到另一部件时，将理解该特定部件可以经由中间的另一元件被“直接地”或“电气地”连接到另一元件。此外，在整个说明书中，还将理解，当组件“包括”元件时，除非存在另一相反的描述，否则应理解该组件不排除另一元件，而是还可包括另一元件。说明书中使用的术语“...单元”表示包括软件或硬件(诸如现场可编程门阵列(FPGA)或专用集成电路(ASIC))的组件，并且“...单元”执行特定角色。然而，“...单元”不限于软件或硬件。“...单元”可以被配置为包括在可寻址存储介质中或者用于再现一个或更多个处理器。因此，例如，“...单元”包括组件(诸如软件组件、面向对象的软件组件、类组件和任务组件)、处理、功能、属性、程序、子例程、程序代码段、驱动器、固件、微代码、电路、数据、数据库、数据结构、表、数组和变量。组件和“...单元”内部提供的功能可以被组合到更少数量的组件和“...单元”或者进一步被拆分为附加组件和“...单元”。在下文中，将参照附图详细描述本公开的实施例，使得本领域普通技术人员可以容易地实现本公开。然而，本公开可以以很多不同的形式被实施，并且不应该被解释为限于本文阐述的实施例。在附图中，省略与描述无关的部分以清楚地描述本公开。本公开中使用的术语是当前在本领域中被广泛使用的那些通用术语，但是这些术语可以根据本领域普通技术人员的意图、先例或本领域的新技术而变化。此外，申请人可以选择指定的术语，并且在这种情况下，将在详细描述中描述其具体含义。因此，本公开中使用的术语不应按照简单的名称来理解，而是应基于术语的含义和整体描述来理解。图1示出了360度图像。如图1所示，360度图像是指示在特定位置110周围360°围绕所述特定位置的外围环境的图像120。当用户佩戴虚拟现实(VR)装置时，指示在VR中的360°围绕用户的外围环境的图像可以是360度图像。VR装置可以向用户提供360度图像，使得即使当佩戴VR装置的用户在VR中移动或转动自己的眼睛时，VR装置也可以根据用户的动作来提供合适的图像。图2是根据实施例的图像处理方法的流程图。参照图2，首先，在操作210中，图像处理设备获取在至少两个方向上捕捉的图像。根据实施例，图像处理设备可以通过经由相机拍摄围绕图像处理设备的外围环境来获取在至少两个方向上捕捉的图像。在这种情况下，图像处理设备可以通过至少一个相机来拍摄围绕图像处理设备的外围环境。根据实施例，相机可以是包括在图像处理设备中的组件，或者被配置为与图像处理设备分离的装置。此外，图像处理设备可以以全景方式或在诸如前、后、左、右、上和下方向的方向上拍摄外围环境。此外，根据实施例，图像处理设备可以通过从外部装置接收图像来获取在至少两个方向上捕捉的图像。也就是说，外部装置可以拍摄外围环境或生成虚拟图像并将图像发送到图像处理设备，并且图像处理设备可以通过接收图像来获取在至少两个方向上捕捉的图像。此后，在操作220中，图像处理设备通过将图本文档来自技高网...

【技术保护点】
1.一种图像处理方法，包括：获取在至少两个方向上捕捉的图像；通过将所述图像投影到多面体上来生成投影图像；移动所述投影图像中的像素中的至少一个像素的位置，以将所述投影图像重新形成为矩形图像；并且处理所述矩形图像。

【技术特征摘要】
【国外来华专利技术】2016.04.05 KR PCT/KR2016/0035371.一种图像处理方法，包括：获取在至少两个方向上捕捉的图像；通过将所述图像投影到多面体上来生成投影图像；移动所述投影图像中的像素中的至少一个像素的位置，以将所述投影图像重新形成为矩形图像；并且处理所述矩形图像。2.如权利要求1所述的图像处理方法，其中，通过将所述图像投影到所述多面体上来生成所述投影图像的步骤包括：当所述图像被投影到所述多面体上时，将所述图像投影到与所述多面体的区域相应的显影视图的区域上。3.如权利要求1所述的图像处理方法，其中，通过将所述图像投影到所述多面体上来生成所述投影图像的步骤包括：将已被投影到所述多面体上的图像投影到所述多面体外部的至少一个平面上。4.如权利要求1所述的图像处理方法，其中，移动所述投影图像中的像素中的所述至少一个像素的位置以将所述投影图像重新形成为所述矩形图像的步骤包括：通过移动所述投影图像中的像素然后添加至少一个边缘空间来生成所述矩形图像。5.如权利要求1所述的图像处理方法，其中，移动所述投影图像中的像素中的所述至少一个像素的位置以将所述投影图像重新形成为所述矩形图像的步骤包括：针对每行来确定每行中包括的像素的平行移动方向；并且根据确定的平行移动方向，针对每行向左或向右水平移动每行中包括的像素，以便从每行的左边缘或右边缘顺序地填充每行中包括的像素。6.如权利要求1所述的图像处理方法，其中，移动所述投影图像中的像素中的所述至少一个像素的位置以将所述投影图像重新形成为所述矩形图像的步骤包括：针对每列来确定每列中包括的像素的垂直移动方向；并且根据确定的垂直移动方向，针对每列向上或向下垂直移动每列中包括的像素，以便从每列的上边缘或下边缘顺序地填充每列中包括的像素。7.如权利要求1所述的图像处理方法，其中，移动所述投影图像中的像素中的所述至少一个像素的位置以将所述投影图像重新形成为所...

【专利技术属性】
技术研发人员：扎哈尔琴科·符拉迪斯拉夫，崔光杓，朴正辉，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：韩国,KR