一种基于虚拟现实的图像处理方法、装置、设备和介质制造方法及图纸

本申请公开了一种基于虚拟现实的图像处理方法、装置、设备和介质。该方法包括：确定多分辨率渲染MRS图像坐标与MRS屏幕图像坐标之间的第一映射关系；对所述MRS图像按照所述第一映射关系进行反畸变处理，得到反畸变图像；将所述反畸变图像发送给显示器件，由所述显示器件对所述反畸变图像进行拉伸并显示。本发明专利技术实施例的技术方案能够有效减少PC端传输到显示器件的信号量。

Image processing method, device, device and medium based on virtual reality

The present invention discloses a virtual reality based image processing method, device, device and medium. The method includes: determining the first mapping relationship between the multi-resolution rendering MRS image coordinates and the MRS screen image coordinates; the MRS image is subjected to the reverse distortion processing according to the first mapping relation, and the anti distortion image is obtained; the anti distortion image is sent to the display piece, and the anti distortion graph is used by the display panel to the anti distortion graph. The image is stretched and displayed. The technical proposal of the embodiment of the invention can effectively reduce the signal amount transmitted by the PC terminal to the display device.

【技术实现步骤摘要】
一种基于虚拟现实的图像处理方法、装置、设备和介质
本公开涉及图像处理
，尤其涉及一种基于虚拟现实的图像处理方法、装置、设备和介质。
技术介绍
VR(VirtualReality，虚拟现实)技术的发展对显示器件提出了高分辨率高刷新率的需求，而显示器件显示的图像的分辨率越高，PC(PersonalComputer，个人计算机)端向显示器件传输图像时，每帧输出的信号量就越大，对传输带宽的要求就越高。由于传输带宽的资源有限，因此，如何减少PC端传输到显示器件的信号量，是目前亟需解决的问题。
技术实现思路
鉴于现有技术中的上述缺陷或不足，本申请实施例提供了一种基于虚拟现实的图像处理方案，有效减少PC端传输到显示器件的信号量。第一方面，本专利技术实施例提供了一种基于虚拟现实的图像处理方法，包括：确定多分辨率渲染MRS图像坐标与MRS屏幕图像坐标之间的第一映射关系；对所述MRS图像按照所述第一映射关系进行反畸变处理，得到反畸变图像；将所述反畸变图像发送给显示器件，由所述显示器件对所述反畸变图像进行拉伸并显示。可选的，确定MRS图像坐标与MRS屏幕图像坐标之间的第一映射关系，具体包括：基于预先确定出的原始图像坐标与屏幕图像坐标之间的第二映射关系，以及所述原始图像坐标与所述MRS图像坐标之间的第三映射关系，确定所述MRS图像坐标与所述屏幕图像坐标之间的第四映射关系；按照所述第三映射关系，对所述屏幕图像坐标进行MRS处理，得到所述MRS屏幕图像坐标；根据所述第四映射关系以及所述MRS屏幕图像坐标，确定所述第一映射关系。可选的，按照所述第三映射关系，对所述屏幕图像坐标进行MRS处理，得到所述MRS屏幕图像坐标，具体包括：确定注视点在所述屏幕图像中的位置信息；根据所述注视点在所述屏幕图像中的位置信息以及预设的区域划分原则，将所述屏幕图像划分为一个高清区域和多个非高清区域；其中，所述注视点为所述高清区域的中心点；按照所述第三映射关系，对所述屏幕图像中的不同区域的坐标进行MRS处理，得到所述MRS屏幕图像坐标。可选的，所述第三映射关系为：其中，x和y分别为所述原始图像中像素点的横纵坐标值；x'和y'分别为所述MRS图像中像素点的横纵坐标值；Width和Height为所述MRS图像中像素点所在区域的分辨率；Wmrs和Hmrs为所述MRS图像的分辨率；TopLeftX和TopLeftY为所述MRS图像中像素点所在区域的左上角顶点在所述MRS图像坐标系中的横纵坐标。可选的，确定注视点在所述屏幕图像中的位置信息，具体包括：根据公式确定注视点在所述屏幕图像中的位置信息；其中，所述o为所述MRS图像中的注视点，o1、o2、o3为所述o在所述MRS图像中所在的三角面片的三个顶点；所述o'为所述屏幕图像中的注视点，o1'、o2'、o3'为o'在所述屏幕图像中所在的三角面片的三个顶点；所述s和t为两个变量参数。第二方面，本专利技术实施例还提供了一种基于虚拟现实的图像处理装置，包括：第一映射关系确定单元，用于确定多分辨率渲染MRS图像坐标与MRS屏幕图像坐标之间的第一映射关系；反畸变处理单元，用于对所述MRS图像按照所述第一映射关系进行反畸变处理，得到反畸变图像；显示单元，用于将所述反畸变图像发送给显示器件，由所述显示器件对所述反畸变图像进行拉伸并显示。可选的，所述第一映射关系确定单元，包括：第四映射关系确定模块，用于基于预先确定出的原始图像坐标与屏幕图像坐标之间的第二映射关系，以及所述原始图像坐标与所述MRS图像坐标之间的第三映射关系，确定所述MRS图像坐标与所述屏幕图像坐标之间的第四映射关系；坐标处理模块，用于按照所述第三映射关系，对所述屏幕图像坐标进行MRS处理，得到所述MRS屏幕图像坐标；第一映射关系确定模块，用于根据所述第四映射关系以及所述MRS屏幕图像坐标，确定所述第一映射关系。可选的，所述坐标处理模块，具体用于：确定注视点在所述屏幕图像中的位置信息；根据所述注视点在所述屏幕图像中的位置信息以及预设的区域划分原则，将所述屏幕图像划分为一个高清区域和多个非高清区域；其中，所述注视点为所述高清区域的中心点；按照所述第三映射关系，对所述屏幕图像中的不同区域的坐标进行MRS处理，得到所述MRS屏幕图像坐标。可选的，所述第三映射关系为：其中，x和y分别为所述原始图像中像素点的横纵坐标值；x'和y'分别为所述MRS图像中像素点的横纵坐标值；Width和Height为所述MRS图像中像素点所在区域的分辨率；Wmrs和Hmrs为所述MRS图像的分辨率；TopLeftX和TopLeftY为所述MRS图像中像素点所在区域的左上角顶点在所述MRS图像坐标系中的横纵坐标。可选的，所述坐标处理模块执行确定注视点在所述屏幕图像中的位置信息，具体包括：根据公式确定注视点在所述屏幕图像中的位置信息；其中，所述o为所述MRS图像中的注视点，o1、o2、o3为所述o在所述MRS图像中所在的三角面片的三个顶点；所述o'为所述屏幕图像中的注视点，o1'、o2'、o3'为o'在所述屏幕图像中所在的三角面片的三个顶点；所述s和t为两个变量参数。第三方面，本专利技术实施例还提供了一种设备，包括：至少一个处理器、至少一个存储器以及存储在所述存储器中的计算机程序指令，当所述计算机程序指令被所述处理器执行时实现上述基于虚拟现实的图像处理方法。第四方面，本专利技术实施例还提供了计算机可读存储介质，其上存储有计算机程序指令，其特征在于，当所述计算机程序指令被处理器执行时实现上述基于虚拟现实的图像处理方法。本专利技术实施例提供的基于虚拟现实的图像处理方法，通过确定MRS图像坐标与MRS屏幕图像坐标之间的第一映射关系，对MRS图像按照第一映射关系进行反畸变处理，得到反畸变图像，再将反畸变图像发送给显示器件，由显示器件对反畸变图像进行拉伸并显示。本技术方案中，PC端对MRS图像仅进行反畸变处理，不进行拉伸处理，既可以减少一次PC端图像处理器的渲染操作，减少延时，又可以减少PC端传输到显示器件的信号量。附图说明通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：图1为相关技术的图像处理方法的流程示意图；图2为本专利技术实施例提供的一种基于虚拟现实的图像处理方法的流程示意图；图3为预先确定出的的原始图像坐标与屏幕图像坐标之间的第二映射关系示意图；图4为基于第二映射关系的反畸变处理示意图；图5为本申请实施例中对原始图像进行MRS处理得到的MRS图像；图6为MRS图像坐标系示意图；图7为MRS图像坐标与屏幕图像坐标之间的第四映射关系示意图；图8为基于第四映射关系的反畸变处理示意图；图9为双线性差值图；图10为MRS图像坐标与MRS屏幕图像坐标之间的第一映射关系示意图；图11为基于第一映射关系的反畸变处理示意图；图12为为显示器件对反畸变图像进行拉伸后显示的图像示意图；图13为本专利技术实施例提供的一种基于虚拟现实的图像处理装置的结构示意图；图14为本专利技术实施例提供的一种适于用来实现本申请实施例的计算机设备的结构示意图。具体实施方式下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释相关专利技术，而非对该专利技术的限定。另外还需要说明本文档来自技高网...

【技术保护点】
1.一种基于虚拟现实的图像处理方法，其特征在于，所述方法包括：确定多分辨率渲染MRS图像坐标与MRS屏幕图像坐标之间的第一映射关系；对所述MRS图像按照所述第一映射关系进行反畸变处理，得到反畸变图像；将所述反畸变图像发送给显示器件，由所述显示器件对所述反畸变图像进行拉伸并显示。

【技术特征摘要】
1.一种基于虚拟现实的图像处理方法，其特征在于，所述方法包括：确定多分辨率渲染MRS图像坐标与MRS屏幕图像坐标之间的第一映射关系；对所述MRS图像按照所述第一映射关系进行反畸变处理，得到反畸变图像；将所述反畸变图像发送给显示器件，由所述显示器件对所述反畸变图像进行拉伸并显示。2.根据权利要求1所述的方法，其特征在于，确定MRS图像坐标与MRS屏幕图像坐标之间的第一映射关系，具体包括：基于预先确定出的原始图像坐标与屏幕图像坐标之间的第二映射关系，以及所述原始图像坐标与所述MRS图像坐标之间的第三映射关系，确定所述MRS图像坐标与所述屏幕图像坐标之间的第四映射关系；按照所述第三映射关系，对所述屏幕图像坐标进行MRS处理，得到所述MRS屏幕图像坐标；根据所述第四映射关系以及所述MRS屏幕图像坐标，确定所述第一映射关系。3.根据权利要求2所述的方法，其特征在于，按照所述第三映射关系，对所述屏幕图像坐标进行MRS处理，得到所述MRS屏幕图像坐标，具体包括：确定注视点在所述屏幕图像中的位置信息；根据所述注视点在所述屏幕图像中的位置信息以及预设的区域划分原则，将所述屏幕图像划分为一个高清区域和多个非高清区域；其中，所述注视点为所述高清区域的中心点；按照所述第三映射关系，对所述屏幕图像中的不同区域的坐标进行MRS处理，得到所述MRS屏幕图像坐标。4.根据权利要求2或3所述的方法，其特征在于，所述第三映射关系为：其中，x和y分别为所述原始图像中像素点的横纵坐标值；x'和y'分别为所述MRS图像中像素点的横纵坐标值；Width和Height为所述MRS图像中像素点所在区域的分辨率；Wmrs和Hmrs为所述MRS图像的分辨率；TopLeftX和TopLeftY为所述MRS图像中像素点所在区域的左上角顶点在所述MRS图像坐标系中的横纵坐标。5.根据权利要求3所述的方法，其特征在于，确定注视点在所述屏幕图像中的位置信息，具体包括：根据公式确定注视点在所述屏幕图像中的位置信息；其中，所述o为所述MRS图像中的注视点，o1、o2、o3为所述o在所述MRS图像中所在的三角面片的三个顶点；所述o'为所述屏幕图像中的注视点，o1'、o2'、o3'为o'在所述屏幕图像中所在的三角面片的三个顶点；所述s和t为两个变量参数。6.一种基于虚拟现实的图像处理装置，其特征在于，包括：第一映射关系确定单元，用于确定多分辨率渲染MRS图像坐标与MRS屏幕图像坐标之间的第一映射关系；反畸变处理单元，用于对所述MRS...

【专利技术属性】
技术研发人员：孙玉坤，张浩，陈丽莉，苗京花，王雪丰，李文宇，赵斌，李茜，王立新，索健文，彭金豹，范清文，刘亚丽，雷雨，王亚坤，
申请(专利权)人：京东方科技集团股份有限公司，北京京东方光电科技有限公司，
类型：发明
国别省市：北京,11