一种重复校正性监督空间识别与还原方法与装置制造方法及图纸

技术编号:38277989 阅读:11 留言:0更新日期:2023-07-27 10:28
本发明专利技术实施例提供一种重复校正性监督空间识别与还原方法与装置,该方法包括:获取输入源信息,所述输入源信息包括真实空间信息;对所述输入源信息进行第一处理得到推理模型和动态对比拟合模型,所述第一处理包括重采样、动态获取和更新参数、识别噪点及去除噪点;根据所述推理模型和所述动态对比拟合模型确定稳定深度图;根据所述稳定深度图和动态参数确定空间拟合模型;将所述空间拟合模型中的稳定深度图进行模拟及校正得到第二深度图;根据所述第二深度图中的地理空间信息生成二维图像,对所述二维图像进行实时渲染得到空间视频。该方法使得虚拟制作中的图像空间满足实时性、准确性、稳定性及离线性。稳定性及离线性。稳定性及离线性。

【技术实现步骤摘要】
一种重复校正性监督空间识别与还原方法与装置


[0001]本专利技术涉及虚拟制作领域,具体地涉及一种重复校正性监督空间识别与还原方法与装置。

技术介绍

[0002]随着计算机视觉图像处理技术的快速发展,基于人工智能识别图像空间的技术在近年来已经成为研究重点。现有主流技术中有双目RGB摄像头、深度摄像头、激光雷达深度(自动驾驶)、人工智能感知深度;其中双目RGB摄像头、深度摄像头、激光雷达深度(自动驾驶)这三种技术都比较成熟,但是这三种技术存在很多问题(例如:资源开销大、分辨率1080P(100万像素),实时性在30fps(每秒30帧)内接入渲染引擎的开销很大,画面的抖动现象也很严重)。而现有的人工智能深度的分辨率为1080P/4K,接入渲染引擎需要在离线状态下,无法满足实时性和准确性的要求。

技术实现思路

[0003]本专利技术实施例的目的是提供一种重复校正性监督空间识别与还原方法与装置,该方法使得虚拟制作中的图像空间满足实时性、准确性、稳定性及离线性。
[0004]为了实现上述目的,本专利技术实施例提供一种重复校正性监督空间识别与还原方法,该方法包括:获取输入源信息,所述输入源信息包括真实空间信息;对所述输入源信息进行第一处理得到推理模型和动态对比拟合模型,所述第一处理包括重采样、动态获取和更新参数、识别噪点及去除噪点;根据所述推理模型和所述动态对比拟合模型确定稳定深度图;根据所述稳定深度图和动态参数确定空间拟合模型;将所述空间拟合模型中的稳定深度图进行模拟及校正得到第二深度图;根据所述第二深度图中的地理空间信息生成二维图像,对所述二维图像进行实时渲染得到空间视频。
[0005]可选的,所述对所述输入源信息进行第一处理得到推理模型和动态对比拟合模型,包括:所述输入源为RGBA、RGB和alpha中的至少一种;获取所述输入源信息中每帧图像的时间编码,根据所述时间编码对图像进行下采样得到下采样图,根据所述下采样图和动态参数得到推理模型,所述推理模型用于确定动态灰度图;所述时间编码还用于同步图像;所述动态对比拟合模型用于动态地获取和更新所述输入源的参数。
[0006]可选的,所述根据所述推理模型和所述动态对比拟合模型确定稳定深度图,包括:根据所述推理模型得到动态灰度图;通过所述动态对比拟合模型对所述动态灰度图进行预处理和特征提取得到特征向量,对所述特征向量进行计算和校正直至满足精度阈值,则根据该特征向量得到稳定深度图,所述稳定深度图不存在闪烁现象;
所述预处理包括图像灰度化、滤波、校验及图像增强;所述校验包括时间码校验和alpha遮罩校验。
[0007]可选的,所述根据所述稳定深度图和动态参数确定空间拟合模型,包括:根据所述动态参数对所述稳定深度图进行分割、重建及拟合得到空间拟合模型。
[0008]可选的,所述空间视频中的物体的空间位置与真实空间中物体的位置一致。
[0009]可选的,所述动态参数包括透视与距离标定参数、尺寸、焦距及光学畸变参数。
[0010]另一方面,本专利技术提供一种重复校正性监督空间识别与还原装置,该装置包括:获取模块,用于获取输入源信息,所述输入源信息包括真实空间信息;第一处理模块,用于对所述输入源信息进行第一处理得到推理模型和动态对比拟合模型,所述第一处理包括重采样、动态获取和更新参数、识别噪点及去除噪点;第二处理模块,用于根据所述推理模型和所述动态对比拟合模型确定稳定深度图;第三处理模块,用于根据所述稳定深度图和动态参数确定空间拟合模型;第四处理模块,用于将所述空间拟合模型中的稳定深度图进行模拟及校正得到第二深度图;第五处理模块,用于根据所述第二深度图中的地理空间信息生成二维图像,对所述二维图像进行实时渲染得到空间视频。
[0011]可选的,所述对所述输入源信息进行第一处理得到推理模型和动态对比拟合模型,包括:所述输入源为RGBA、RGB和alpha中的至少一种;获取所述输入源信息中每帧图像的时间编码,根据所述时间编码对图像进行下采样得到下采样图,根据所述下采样图和动态参数得到推理模型,所述推理模型用于确定动态灰度图;所述时间编码还用于同步图像;所述动态对比拟合模型用于动态地获取和更新所述输入源的参数。
[0012]可选的,所述根据所述推理模型和所述动态对比拟合模型确定稳定深度图,包括:根据所述推理模型得到动态灰度图;通过所述动态对比拟合模型对所述动态灰度图进行预处理和特征提取得到特征向量,对所述特征向量进行计算和校正直至满足精度阈值,则根据该特征向量得到稳定深度图,所述稳定深度图不存在闪烁现象;所述预处理包括图像灰度化、滤波、校验及图像增强;所述校验包括时间码校验和alpha遮罩校验。可选的,所述根据所述稳定深度图和动态参数确定空间拟合模型,包括:根据所述动态参数对所述稳定深度图进行分割、重建及拟合得到空间拟合模型。
[0013]本专利技术的重复校正性监督空间识别与还原方法包括:获取输入源信息,所述输入源信息包括真实空间信息;对所述输入源信息进行第一处理得到推理模型和动态对比拟合模型,所述第一处理包括重采样、动态获取和更新参数、识别噪点及去除噪点;根据所述推理模型和所述动态对比拟合模型确定稳定深度图;根据所述稳定深度图和动态参数确定空间拟合模型;将所述空间拟合模型中的稳定深度图进行模拟及校正得到第二深度图;根据所述第二深度图中的地理空间信息生成二维图像,对所述二维图像进行实时渲染得到空间视频。本申请通过建立独有的AI渲染管道,实现单目实时4K深度图输出,稳定准确的深度空
间还原,连接虚拟现实的桥梁,使得虚拟制作中的图像空间满足实时性、准确性、稳定性和离线性,让用户在虚拟世界中自由穿梭和交互。
[0014]本专利技术实施例的其它特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
[0015]附图是用来提供对本专利技术实施例的进一步理解,并且构成说明书的一部分,与下面的具体实施方式一起用于解释本专利技术实施例,但并不构成对本专利技术实施例的限制。在附图中:图1是本专利技术的一种重复校正性监督空间识别与还原方法的流程示意图;图2是本专利技术的一种重复校正性监督空间识别与还原方法的主体框图;图3是本专利技术的透视与距离标定的示意图;图4是本专利技术的获取推理模型的示意图;图5是本专利技术的去噪处理示意图;图6是本专利技术的实时生成深度灰度图的示意图。
具体实施方式
[0016]以下结合附图对本专利技术实施例的具体实施方式进行详细说明。应当理解的是,此处所描述的具体实施方式仅用于说明和解释本专利技术实施例,并不用于限制本专利技术实施例。
[0017]图1是本专利技术的一种重复校正性监督空间识别与还原方法的流程示意图,图2是本专利技术的一种重复校正性监督空间识别与还原方法的主体框图,结合1和图2所示,所述重复校正性监督空间识别与还原方法包括,步骤S101为获取输入源信息,所述输入源信息包括真实空间信息。
[0018]传统深度图获取采用双目摄像机相机,而本专利技术中采用单目深度引擎来获取真实世界的灰度图像。输入源是指获取真实世界空间的信息到单目深本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种重复校正性监督空间识别与还原方法,其特征在于,该方法包括:获取输入源信息,所述输入源信息包括真实空间信息;对所述输入源信息进行第一处理得到推理模型和动态对比拟合模型,所述第一处理包括重采样、动态获取和更新参数、识别噪点及去除噪点;根据所述推理模型和所述动态对比拟合模型确定稳定深度图;根据所述稳定深度图和动态参数确定空间拟合模型;将所述空间拟合模型中的稳定深度图进行模拟及校正得到第二深度图;根据所述第二深度图中的地理空间信息生成二维图像,对所述二维图像进行实时渲染得到空间视频。2.根据权利要求1所述的方法,其特征在于,所述对所述输入源信息进行第一处理得到推理模型和动态对比拟合模型,包括:所述输入源为RGBA、RGB和alpha中的至少一种;获取所述输入源信息中每帧图像的时间编码,根据所述时间编码对图像进行下采样得到下采样图,根据所述下采样图和动态参数得到推理模型,所述推理模型用于确定动态灰度图;所述时间编码还用于同步图像;所述动态对比拟合模型用于动态地获取和更新所述输入源的参数。3.根据权利要求1所述的方法,其特征在于,所述根据所述推理模型和所述动态对比拟合模型确定稳定深度图,包括:根据所述推理模型得到动态灰度图;通过所述动态对比拟合模型对所述动态灰度图进行预处理和特征提取得到特征向量,对所述特征向量进行计算和校正直至满足精度阈值,则根据该特征向量得到稳定深度图,所述稳定深度图不存在闪烁现象;所述预处理包括图像灰度化、滤波、校验及图像增强;所述校验包括时间码校验和alpha遮罩校验。4.根据权利要求1所述的方法,其特征在于,所述根据所述稳定深度图和动态参数确定空间拟合模型,包括:根据所述动态参数对所述稳定深度图进行分割、重建及拟合得到空间拟合模型。5.根据权利要求1所述的方法,其特征在于,所述空间视频中的物体的空间位置与真实空间中物体的位置一致。6.根据权利要求1所述的方法,其特征在于,所述动态参数包括透视与距离...

【专利技术属性】
技术研发人员:任志忠
申请(专利权)人:北京天图万境科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1