渲染图像的方法、装置、电子设备和计算机可读存储介质制造方法及图纸

本公开公开了一种渲染图像的方法，其特征在于，包括：从视频中获取图像；确定所述图像中的第一类别的像素；根据即时定位与地图构建(SLAM)算法确定所述第一类别的像素对应的平面方程；根据所述平面方程确定所述第一类别的像素的深度信息；根据所述第一类别的像素的深度信息渲染所述第一类别的像素。根据本公开实施例提供的渲染图像的方法、装置、电子设备和计算机可读存储介质，能够识别出图像中的第一类别的像素，并且根据SLAM算法确定所述第一类别的像素的深度信息，从而在对第一类别的像素进行渲染时考虑其深度信息，能够获得更好的渲染效果。

Methods, devices, electronic devices and computer readable storage media for rendering images

【技术实现步骤摘要】
渲染图像的方法、装置、电子设备和计算机可读存储介质
本公开涉及信息处理领域，尤其涉及一种渲染图像的方法、装置、电子设备及计算机可读存储介质。
技术介绍
随着计算机技术的进步，与图像相关的应用愈发丰富，例如能够识别出图像中的目标对象，并通过图像处理技术对识别出的目标对象进行渲染，以获得丰富的渲染效果。现实生活中通过拍摄装置对目标对象进行拍摄时，由于目标对象存在于三维空间，其不同的区域或者位置往往与拍摄装置具有不同的距离，这些区域或者位置在光线的作用下可能呈现不同的颜色，这将反应在所拍摄的图像中，从而使得所拍摄的图像中的目标对象具有立体感和真实感。在通过图像技术对图像中的目标对象进行渲染时，由于常用的拍摄装置无法记录图像中各像素的深度信息，从而仅能根据像素的二维坐标渲染目标对象，渲染效果较差。部分图像处理技术在渲染过程中会参考目标对象的像素的颜色信息，例如根据颜色的不同估算出深度信息，但是像素的颜色信息并不能准确地反应出该像素的深度信息，从而也难以取得理想的渲染效果。
技术实现思路
本公开实施例提供渲染图像的方法，装置，电子设备，和计算机可读存储介质，能够识别出图像中的第一类别的像素，并且根据SLAM算法确定所述第一类别的像素的深度信息，从而在对第一类别的像素进行渲染时考虑其深度信息，能够获得更好的渲染效果。第一方面，本公开实施例提供一种渲染图像的方法，其特征在于，包括：从视频中获取图像；确定所述图像中的第一类别的像素；根据即时定位与地图构建(SLAM)算法确定所述第一类别的像素对应的平面方程；根据所述平面方程确定所述第一类别的像素的深度信息；根据所述第一类别的像素的深度信息渲染所述第一类别的像素。第二方面，本公开实施例提供一种渲染图像的装置，其特征在于，包括：图像获取模块，用于从视频中获取图像；像素类别确定模块，用于确定所述图像中的第一类别的像素；平面方程确定模块，用于根据即时定位与地图构建(SLAM)算法确定所述第一类别的像素对应的平面方程；像素深度信息确定模块，用于根据所述平面方程确定所述第一类别的像素的深度信息；渲染模块，用于根据所述第一类别的像素的深度信息渲染所述第一类别的像素。第三方面，本公开实施例提供一种电子设备，包括：存储器，用于存储计算机可读指令；以及与所述存储器耦合的一个或多个处理器，用于运行所述计算机可读指令，使得所述处理器运行时实现前述第一方面中的所述渲染图像的方法。第四方面，本公开实施例提供一种非暂态计算机可读存储介质，其特征在于，所述非暂态计算机可读存储介质存储计算机指令，当所述计算机指令被计算机执行时，使得所述计算机执行前述第一方面中的所述渲染图像的方法。本公开公开了一种渲染图像的方法、装置、电子设备和计算机可读存储介质。其中所述渲染图像的方法，其特征在于，包括：从视频中获取图像；确定所述图像中的第一类别的像素；根据即时定位与地图构建(SLAM)算法确定所述第一类别的像素对应的平面方程；根据所述平面方程确定所述第一类别的像素的深度信息；根据所述第一类别的像素的深度信息渲染所述第一类别的像素。根据本公开实施例提供的渲染图像的方法、装置、电子设备和计算机可读存储介质，能够识别出图像中的第一类别的像素，并且根据SLAM算法确定所述第一类别的像素的深度信息，从而在对第一类别的像素进行渲染时考虑其深度信息，能够获得更好的渲染效果。上述说明仅是本公开技术方案的概述，为了能更清楚了解本公开的技术手段，而可依照说明书的内容予以实施，并且为让本公开的上述和其他目的、特征和优点能够更明显易懂，以下特举较佳实施例，并配合附图，详细说明如下。附图说明结合附图并参考以下具体实施方式，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中，相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的，原件和元素不一定按照比例绘制。图1为本公开实施例提供的渲染图像的方法实施例的流程图；图2为本公开提供的一种神经网络模型示意图；图3为本公开实施例提供的渲染图像的装置实施例的结构示意图；图4为根据本公开实施例提供的电子设备的结构示意图。具体实施方式下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。本实施例提供的该渲染图像的方法可以由一个渲染图像的装置来执行，该装置可以实现为软件，可以实现为硬件，还可以实现为软件和硬件的组合，例如所述渲染图像的装置包括计算机设备，从而通过该计算机设备来执行本实施例提供的该渲染图像的方法，如本领域技术人员所理解的，计算机设备可以是台式或便携计算机设备，还可以是移动终端设备等。图1为本公开实施例提供的渲染图像的方法实施例的流程图，如图1所示，本公开实施例的渲染图像的方法包括如下步骤：步骤S101，从视频中获取图像；在步骤S101中从视频中获取图像，以便对获取的图像进行渲染，从而实现本公开实施例提供的渲染图像的方法。可以通过拍摄装置获取所述视频，从而获取所述图像，例如本公开实施例中的所述渲染图像的装置可以包括该拍摄装置，从而通过该拍摄装置拍摄视频，也就获得了所述视频中的所述图像；所述渲染图像的装置可以不包括该拍摄装置，但是与该拍摄装置通信连接，通过所述通信连接获取该拍摄装置拍摄的视频，也就获得了所述视频中的所述图像；当然，所述渲染图像的装置还可以从存储源获得所述视频以及视频中的图像，本公开实施例对获取视频以及视频中的图像的方式不做限定。并且，本领域技术人员可以理解，视频包括一系列图像帧，每个图像帧也可以称为图像，为便于描述，在之后的行文中，视频中的图像帧均称为图像，在步骤S101中从视频中获取的图像包括一个或多个图像，以期对该一个或多个图像进行渲染。如本领域技术人员所了解的，视频中的图像可以通过像素表示，而像素可以通过位置参数和颜色参数来表征，在步骤S101中获得了所述视频中的图像，也就获得了视频中的图像的各像素的位置参数和颜色参数。一种典型的表征方式为通本文档来自技高网...

【技术保护点】
1.一种渲染图像的方法，其特征在于，包括：从视频中获取图像；确定所述图像中的第一类别的像素；根据即时定位与地图构建(SLAM)算法确定所述第一类别的像素对应的平面方程；根据所述平面方程确定所述第一类别的像素的深度信息；根据所述第一类别的像素的深度信息渲染所述第一类别的像素。

【技术特征摘要】
1.一种渲染图像的方法，其特征在于，包括：从视频中获取图像；确定所述图像中的第一类别的像素；根据即时定位与地图构建(SLAM)算法确定所述第一类别的像素对应的平面方程；根据所述平面方程确定所述第一类别的像素的深度信息；根据所述第一类别的像素的深度信息渲染所述第一类别的像素。2.根据权利要求1所述的渲染图像的方法，其特征在于，所述确定所述图像中的第一类别的像素，包括：训练卷积神经网络(CNN)分类器；根据所述CNN分类器确定所述图像中的所述第一类别的像素。3.根据权利要求2所述的渲染图像的方法，其特征在于，所述训练CNN分类器，包括：获取训练集合，所述训练集合中的图像中的像素对应标签信息，所述标签信息指示与所述标签信息对应的像素的类别，所述类别包括所述第一类别和非所述第一类别；确定所CNN分类器的输出项目，所述输出项目与所述标签信息对应；根据所述训练集合训练所述CNN分类器。4.根据权利要求2或3所述的渲染图像的方法，其特征在于，所述第一类别的像素包括地面类别的像素。5.根据权利要求1所述的渲染图像的方法，其特征在于，所述根据SLAM算法确定所述第一类别的像素对应的平面方程，包括：根据SLAM算法确定所述图像中属于同一平面的多个像素；在所述多个像素满足预设条件的情况下，将所述多个像素所属的所述同一平面的方程确定为所述第一类别的像素对应的所述平面方程。6.根据权利要求5所述的渲染图像的方法，其特征在于，所述预设条件包括：所述多个像素全部属于所述第一类别的像素；所述多个像素中属于所述第一类别的像素的数量达到预设数量；或者所述多个像素中属于所述第一类别...

【专利技术属性】
技术研发人员：郭亨凯，
申请(专利权)人：北京字节跳动网络技术有限公司，
类型：发明
国别省市：北京,11