超高清虚拟显示及控制方法、装置、设备及计算机介质制造方法及图纸

本申请公开了一种超高清虚拟显示及控制方法、装置、设备及计算机介质，涉及虚拟现实技术领域，本申请超高清虚拟显示及控制方法包括：获取需要进行超高清处理的初始图像数据，并将初始图像数据输入至预设的目标图像处理模型，由目标图像处理模型按照预设的目标分辨率对初始图像数据进行拉伸和切割得到多个子图像数据；分别确定多个子图像数据各自对应的模糊核，并基于各模糊核分别对多个子图像数据执行去模糊操作得到多个清晰子图像数据；分别确定多个清晰子图像数据各自对应的畸变参数，并基各畸变参数分别对多个清晰子图像数据执行去畸变操作得到多个待合成图像数据；将多个待合成图像数据进行合成以得到与目标分辨率对应的超高清图像数据。对应的超高清图像数据。对应的超高清图像数据。

【技术实现步骤摘要】
超高清虚拟显示及控制方法、装置、设备及计算机介质


[0001]本申请涉及虚拟现实
，尤其涉及一种超高清虚拟显示及控制方法、装置、设备及计算机介质。

技术介绍

[0002]随着VR（Virtual Reality
‑
虚拟现实）技术的不断发展，用户在使用VR设备时对VR设备播放的图像的质量要求也越来越高，而分辨率是决定图像质量的重要因素，因此，为了满足用户的使用需求，VR设备需要输出分辨率更高的图像。
[0003]当前的VR设备在设计时需要考虑便携性，因此其内部往往不会配置数量过多的图形处理器（GPU），也就导致了当前VR设备的图形处理能力较弱，进而使得VR设备在输出具有超高清分辨率（即高于常见的1920*1080分辨率）的超高清图像时，图形处理器容易出现卡顿或直接崩溃的情况。因此，VR设备如果想输出超高清图像，就需要在内部配置更多的图形处理器，但是这样又会导致VR设备失去便携性，降低用户的使用体验。

技术实现思路

[0004]本申请的主要目的在于提供一种超高清虚拟显示及控制方法、装置、设备及计算机介质，旨在令VR设备能够更稳定在虚拟现实空间内输出超高清图像数据，提升用户的使用体验。
[0005]为实现上述目的，本申请提供一种超高清虚拟显示及控制方法，所述超高清虚拟显示及控制方法包括以下步骤：获取需要进行超高清处理的初始图像数据，并将所述初始图像数据输入至预设的目标图像处理模型，由所述目标图像处理模型按照预设的目标分辨率对所述初始图像数据进行拉伸和切割得到多个子图像数据；通过所述目标图像处理模型分别确定多个所述子图像数据各自对应的模糊核，并基于各所述模糊核分别对多个所述子图像数据执行去模糊操作得到多个清晰子图像数据；通过所述目标图像处理模型分别确定多个所述清晰子图像数据各自对应的畸变参数，并基各所述畸变参数分别对多个所述清晰子图像数据执行去畸变操作得到多个待合成图像数据；将多个所述待合成图像数据进行合成以得到与所述目标分辨率对应的超高清图像数据。
[0006]进一步地，所述由所述目标图像处理模型按照预设的目标分辨率对所述初始图像数据进行拉伸和切割得到多个子图像数据的步骤包括：获取预设的目标分辨率和标准切割尺寸，并由所述目标图像处理模型按照所述目标分辨率对所述初始图像数据进行拉伸得到中间图像数据；由所述目标图像处理模型按照所述标准切割尺寸在所述中间图像数据内确定多个目标切割点，并基于多个所述目标切割点对所述中间图像数据进行切割以得到多个子图
像数据。
[0007]进一步地，在所述获取需要进行超高清处理的初始图像数据的步骤之前，所述方法还包括：获取预设的多个标准图像数据，基于多个所述标准图像数据生成训练集和验证集；根据所述训练集对预设的初始图像处理模型进行训练生成具有去模糊功能和去畸变功能的待验证图像处理模型；通过所述验证集对所述待验证图像处理模型进行验证得到目标图像处理模型。
[0008]进一步地，所述基于多个所述标准图像数据生成训练集和验证集的步骤，包括：按照预设的标准模糊核分别对多个所述标准图像数据进行模糊化操作以生成多个标准模糊图像数据；按照预设的标准畸变参数分别对多个所述标准图像数据进行畸变化操作以生成多个标准畸变图像数据；将多个所述标准图像数据和各自对应的所述标准模糊图像数据、所述标准畸变图像数据、所述标准模糊核及所述标准畸变参数进行整合生成训练集。
[0009]进一步地，所述基于多个所述标准图像数据生成训练集和验证集的步骤，还包括：按照预设的验证模糊核分别对多个所述标准图像数据进行所述模糊化操作以生成多个验证模糊图像数据；按照预设的验证畸变参数分别对多个所述标准图像数据进行所述畸变化操作以生成多个验证畸变图像数据；将多个所述标准图像数据和各自对应的所述验证模糊图像数据、所述验证畸变图像数据进行整合生成验证集。
[0010]进一步地，所述根据所述训练集对预设的初始图像处理模型进行训练生成具有去模糊功能和去畸变功能的待验证图像处理模型的步骤，包括：将所述训练集内包含的多个所述标准图像数据和各自对应的所述标准模糊图像数据、所述标准模糊核输入所述初始图像处理模型；基于多个所述标准图像数据和各自对应的所述标准模糊图像数据、所述标准模糊核之间的非线性映射关系对所述初始图像处理模型进行训练得到具有去模糊功能的第一图像处理模型；将所述训练集内包含的多个所述标准图像数据和各自对应的所述标准畸变图像数据、所述标准畸变参数输入所述第一图像处理模型；基于多个所述标准图像数据和各自对应的所述标准畸变图像数据、所述标准畸变参数之间的非线性映射关系对所述第一图像处理模型进行训练得到具有所述去模糊功能和去畸变功能的待验证图像处理模型。
[0011]进一步地，所述通过所述验证集对所述待验证图像处理模型进行验证得到目标图像处理模型的步骤，包括：将所述验证集内包含的多个所述验证模糊图像数据输入至所述待验证图像处理模型，由所述待验证图像处理模型分别对多个所述验证模糊图像数据进行所述去模糊操作得到多个待验证清晰图像数据；
将所述验证集内包含的多个所述验证畸变图像数据输入至所述待验证图像处理模型，由所述待验证图像处理模型分别对多个所述验证模糊图像数据进行所述去畸变操作生成多个所述待验证清晰图像数据；将多个所述待验证清晰图像数据分别与各自对应的所述标准图像数据进行比对得到各比对结果，并判断各所述比对结果是否均为所述待验证清晰图像数据与所述标准图像数据一致；若判断到各所述比对结果均为所述待验证清晰图像数据与所述标准图像数据一致，则将所述待验证图像处理模型确定为目标图像处理模型。
[0012]此外，为实现上述目的，本申请还提供一种超高清虚拟显示及控制装置，所述装置包括：图像切割模块，用于获取需要进行超高清处理的初始图像数据，并将所述初始图像数据输入至预设的目标图像处理模型，由所述目标图像处理模型按照预设的目标分辨率对所述初始图像数据进行拉伸和切割得到多个子图像数据；第一处理模块，用于通过所述目标图像处理模型分别确定多个所述子图像数据各自对应的模糊核，并基于各所述模糊核分别对多个所述子图像数据执行去模糊操作得到多个清晰子图像数据；第二处理模块，用于通过所述目标图像处理模型分别确定多个所述清晰子图像数据各自对应的畸变参数，并基各所述畸变参数分别对多个所述清晰子图像数据执行去畸变操作得到多个待合成图像数据；图像生成模块，用于将多个所述待合成图像数据进行合成以得到与所述目标分辨率对应的超高清图像数据。
[0013]此外，为实现上述目的，本申请还提供一种终端设备，所述终端设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的超高清虚拟显示及控制程序，所述超高清虚拟显示及控制程序被所述处理器执行时实现如上述的超高清虚拟显示及控制方法的步骤。
[0014]此外，为实现上述目的，本申请还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有超高清虚拟显示及控制程序，所述超高清虚拟显示及控制程序被处理器执行时实现如上述的超高清虚拟显示及控制方法的步骤本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种超高清虚拟显示及控制方法，其特征在于，所述超高清虚拟显示及控制方法包括以下步骤：获取需要进行超高清处理的初始图像数据，并将所述初始图像数据输入至预设的目标图像处理模型，由所述目标图像处理模型按照预设的目标分辨率对所述初始图像数据进行拉伸和切割得到多个子图像数据；通过所述目标图像处理模型分别确定多个所述子图像数据各自对应的模糊核，并基于各所述模糊核分别对多个所述子图像数据执行去模糊操作得到多个清晰子图像数据；通过所述目标图像处理模型分别确定多个所述清晰子图像数据各自对应的畸变参数，并基各所述畸变参数分别对多个所述清晰子图像数据执行去畸变操作得到多个待合成图像数据；将多个所述待合成图像数据进行合成以得到与所述目标分辨率对应的超高清图像数据。2.如权利要求1所述的超高清虚拟显示及控制方法，其特征在于，所述由所述目标图像处理模型按照预设的目标分辨率对所述初始图像数据进行拉伸和切割得到多个子图像数据的步骤包括：获取预设的目标分辨率和标准切割尺寸，并由所述目标图像处理模型按照所述目标分辨率对所述初始图像数据进行拉伸得到中间图像数据；由所述目标图像处理模型按照所述标准切割尺寸在所述中间图像数据内确定多个目标切割点，并基于多个所述目标切割点对所述中间图像数据进行切割以得到多个子图像数据。3.如权利要求1所述的超高清虚拟显示及控制方法，其特征在于，在所述获取需要进行超高清处理的初始图像数据的步骤之前，所述方法还包括：获取预设的多个标准图像数据，基于多个所述标准图像数据生成训练集和验证集；根据所述训练集对预设的初始图像处理模型进行训练生成具有去模糊功能和去畸变功能的待验证图像处理模型；通过所述验证集对所述待验证图像处理模型进行验证得到目标图像处理模型。4.如权利要求3所述的超高清虚拟显示及控制方法，其特征在于，所述基于多个所述标准图像数据生成训练集和验证集的步骤，包括：按照预设的标准模糊核分别对多个所述标准图像数据进行模糊化操作以生成多个标准模糊图像数据；按照预设的标准畸变参数分别对多个所述标准图像数据进行畸变化操作以生成多个标准畸变图像数据；将多个所述标准图像数据和各自对应的所述标准模糊图像数据、所述标准畸变图像数据、所述标准模糊核及所述标准畸变参数进行整合生成训练集。5.如权利要求4所述的超高清虚拟显示及控制方法，其特征在于，所述基于多个所述标准图像数据生成训练集和验证集的步骤，还包括：按照预设的验证模糊核分别对多个所述标准图像数据进行所述模糊化操作以生成多个验证模糊图像数据；按照预设的验证畸变参数分别对多个所述标准图像数据进行所述畸变化操作以生成
多个验证畸变图像数据；将多个所述标准图像数据和各自对应的所述验证模糊图像数据、所述验证畸变图像数据进行整合生成验证集。6.如权利要求5所述的超高清虚拟显示及控制方法，其特征在于，所述根据所述训练集对预设的初始图像处理模型进行训练生成具有去模糊功能和去畸变功能的待验证图像处理模型的步骤，包括：将所述训练集内包含...

【专利技术属性】
技术研发人员：张兵，王萌，林晓甘，
申请(专利权)人：深圳市景创科技电子股份有限公司，
类型：发明
国别省市：