鱼眼图像的生成方法、装置、终端设备及存储介质制造方法及图纸

本发明专利技术提供了一种鱼眼图像的生成方法、装置、终端设备及存储介质，包括：在鱼眼模拟视角下获取所述虚拟场景对应的多个场景图像；其中，所述鱼眼模拟视角是基于多个分视角拼接得到的；根据预先配置的坐标映射函数，确定每个所述场景图像中每个第一像素点对应的鱼眼像素坐标；基于每个所述场景图像中每个所述第一像素点对应的颜色值和所述鱼眼像素坐标，生成所述虚拟场景对应的目标鱼眼图像。本发明专利技术可以较好地模拟鱼眼相机的成像效果，以满足更大FOV范围、更大角度的应用需求。更大角度的应用需求。更大角度的应用需求。

【技术实现步骤摘要】
鱼眼图像的生成方法、装置、终端设备及存储介质


[0001]本专利技术涉及图像处理
，尤其是涉及一种鱼眼图像的生成方法、装置、终端设备及存储介质。

技术介绍

[0002]目前，三维引擎可用于AI(Artificial Intelligence，人工智能)、自动驾驶、无人机仿真避障等研发阶段。但是，现有三维引擎中仅配置有FOV(Field of view，视场)值为0
‑
180
°
的相机模型，无法满足更大FOV范围、更大角度的应用需求。

技术实现思路

[0003]有鉴于此，本专利技术的目的在于提供一种鱼眼图像的生成方法、装置、终端设备及存储介质，可以较好地模拟鱼眼相机的成像效果，以满足更大FOV范围、更大角度的应用需求。
[0004]第一方面，本专利技术实施例提供了一种鱼眼图像的生成方法，通过终端提供图形用户界面，所述图形用户界面所显示的内容至少包括虚拟场景，包括：在鱼眼模拟视角下获取所述虚拟场景对应的多个场景图像；其中，所述鱼眼模拟视角是基于多个分视角拼接得到的；根据预先配置的坐标映射函数，确定每个所述场景图像中每个第一像素点对应的鱼眼像素坐标；基于每个所述场景图像中每个所述第一像素点对应的颜色值和所述鱼眼像素坐标，生成所述虚拟场景对应的目标鱼眼图像。
[0005]在一种实施方式中，所述在鱼眼模拟视角下获取所述虚拟场景对应的多个场景图像的步骤，包括：对于所述鱼眼模拟视角中的每个分视角，在三维引擎中配置该分视角对应的分相机组件，并通过所述分相机组件采集该分视角下所述虚拟场景对应的场景图像。
[0006]在一种实施方式中，在所述根据预先配置的坐标映射函数，确定每个所述场景图像中每个第一像素点对应的鱼眼像素坐标的步骤之前，所述方法还包括：基于向量转换模型，以及每个所述分相机组件的预览画面对应的像素范围，确定每个所述分相机组件对应的坐标映射函数；其中，所述向量转换模型用于实现二维向量与三维向量之间的互相转换。
[0007]在一种实施方式中，所述根据预先配置的坐标映射函数，确定每个所述场景图像中每个第一像素点对应的鱼眼像素坐标的步骤，包括：获取每个所述场景图像中每个第一像素点的原始像素坐标；将每个所述第一像素点的所述原始像素坐标，输入至预先配置的坐标映射函数，得到每个所述第一像素点对应的鱼眼像素坐标。
[0008]在一种实施方式中，所述基于每个所述场景图像中每个所述第一像素点对应的颜色值和所述鱼眼像素坐标，生成所述虚拟场景对应的目标鱼眼图像的步骤，包括：对于每个第一像素点，基于该第一像素点对应的原始像素坐标，从该第一像素点所属的场景图像中读取该第一像素点对应的颜色值，并按照该第一像素点对应的所述鱼眼像素坐标，从预设空白鱼眼图像中确定该第一像素点对应的第二像素点；将每个所述第一像素点对应的所述颜色值，赋予每个所述第一像素点对应的所述第二像素点，以得到所述虚拟场景对应的目标鱼眼图像。
[0009]在一种实施方式中，所述方法还包括：基于所述虚拟场景对应的多个所述目标鱼眼图像构建训练数据集，以利用所述训练数据集对深度学习模型进行训练。
[0010]在一种实施方式中，所述分视角包括前视角、左视角、右视角、上视角、下视角中的一种或多种。
[0011]第二方面，本专利技术实施例还提供一种鱼眼图像的生成装置，通过终端提供图形用户界面，所述图形用户界面所显示的内容至少包括虚拟场景，包括：图像获取模块，用于在鱼眼模拟视角下获取所述虚拟场景对应的多个场景图像；其中，所述鱼眼模拟视角是基于多个分视角拼接得到的；坐标确定模块，用于根据预先配置的坐标映射函数，确定每个所述场景图像中每个第一像素点对应的鱼眼像素坐标；图像生成模块，用于基于每个所述场景图像中每个所述第一像素点对应的颜色值和所述鱼眼像素坐标，生成所述虚拟场景对应的目标鱼眼图像。
[0012]第三方面，本专利技术实施例还提供一种终端设备，包括处理器和存储器，所述存储器存储有能够被所述处理器执行的计算机可执行指令，所述处理器执行所述计算机可执行指令以实现第一方面提供的任一项所述的方法。
[0013]第四方面，本专利技术实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机可执行指令，所述计算机可执行指令在被处理器调用和执行时，计算机可执行指令促使处理器实现第一方面提供的任一项所述的方法。
[0014]本专利技术实施例提供的一种鱼眼图像的生成方法、装置、终端设备及存储介质，通过终端提供图形用户界面，图形用户界面所显示的内容至少包括虚拟场景，在鱼眼模拟视角下获取虚拟场景对应的多个场景图像，鱼眼模拟视角是基于多个分视角拼接得到的，再根据预先配置的坐标映射函数，确定每个场景图像中每个第一像素点对应的鱼眼像素坐标，最后基于每个场景图像中每个第一像素点对应的颜色值和鱼眼像素坐标，生成虚拟场景对应的目标鱼眼图像。上述方法可以通过拼接多个分视角模拟鱼眼相机的视角，通过坐标映射函数确定场景图像中每个第一像素点对应的鱼眼像素坐标，从而可以基于每个第一像素点对应的颜色值和语言像素坐标生成目标鱼眼图像，较好地模拟鱼眼相机的成像效果，以满足更大FOV范围、更大角度的应用需求。
[0015]本专利技术的其他特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本专利技术而了解。本专利技术的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
[0016]为使本专利技术的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
[0017]为了更清楚地说明本专利技术具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本专利技术的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0018]图1为本专利技术实施例提供的一种鱼眼图像的生成方法的流程示意图；
[0019]图2为本专利技术实施例提供的一种坐标映射函数的确定方法的流程示意图；
[0020]图3为本专利技术实施例提供的一种鱼眼相机组成结构示意图；
[0021]图4为本专利技术实施例提供的一种目标鱼眼图像的示意图；
[0022]图5为本专利技术实施例提供的另一种鱼眼图像的生成方法的流程示意图；
[0023]图6为本专利技术实施例提供的一种鱼眼图像的生成装置的结构示意图；
[0024]图7为本专利技术实施例提供的一种终端设备的结构示意图。
具体实施方式
[0025]为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合实施例对本专利技术的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0026]目前，现有三维引擎存在以下问题：(1)三维引本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种鱼眼图像的生成方法，其特征在于，通过终端提供图形用户界面，所述图形用户界面所显示的内容至少包括虚拟场景，包括：在鱼眼模拟视角下获取所述虚拟场景对应的多个场景图像；其中，所述鱼眼模拟视角是基于多个分视角拼接得到的；根据预先配置的坐标映射函数，确定每个所述场景图像中每个第一像素点对应的鱼眼像素坐标；基于每个所述场景图像中每个所述第一像素点对应的颜色值和所述鱼眼像素坐标，生成所述虚拟场景对应的目标鱼眼图像。2.根据权利要求1所述的方法，其特征在于，所述在鱼眼模拟视角下获取所述虚拟场景对应的多个场景图像的步骤，包括：对于所述鱼眼模拟视角中的每个分视角，在三维引擎中配置该分视角对应的分相机组件，并通过所述分相机组件采集该分视角下所述虚拟场景对应的场景图像。3.根据权利要求2所述的方法，其特征在于，在所述根据预先配置的坐标映射函数，确定每个所述场景图像中每个第一像素点对应的鱼眼像素坐标的步骤之前，所述方法还包括：基于向量转换模型，以及每个所述分相机组件的预览画面对应的像素范围，确定每个所述分相机组件对应的坐标映射函数；其中，所述向量转换模型用于实现二维向量与三维向量之间的互相转换。4.根据权利要求1所述的方法，其特征在于，所述根据预先配置的坐标映射函数，确定每个所述场景图像中每个第一像素点对应的鱼眼像素坐标的步骤，包括：获取每个所述场景图像中每个第一像素点的原始像素坐标；将每个所述第一像素点的所述原始像素坐标，输入至预先配置的坐标映射函数，得到每个所述第一像素点对应的鱼眼像素坐标。5.根据权利要求1所述的方法，其特征在于，所述基于每个所述场景图像中每个所述第一像素点对应的颜色值和所述鱼眼像素坐标，生成所述虚拟场景对应的目标鱼眼图像的步骤，包括：对...

【专利技术属性】
技术研发人员：陈方平，高明，吴志远，杨瑞鹏，
申请(专利权)人：天津云圣智能科技有限责任公司，
类型：发明
国别省市：