一种图像处理方法及图像处理装置、显示装置制造方法及图纸

本发明专利技术公开一种图像处理方法及图像处理装置、显示装置，涉及图像处理技术领域，以在保证VR图像不出现丢失帧的前提下，降低图像畸变程度。该图像处理方法包括将原始网格化图像进行分区，使得所获得多个区域网格图像沿着远离原始网格化图像几何中心的方向分布；根据反畸变参数对多个区域网格图像的网格顶点进行调整，使得多个区域修正网格图像所含有的网格密度均小于等于对应区域网格图像所含有的网格密度，多个区域修正网格图像所含有的网格密度沿着远离原始网格化图像几何中心的方向逐渐增加。所述图像处理装置应用上述图像处理方法。本发明专利技术提供的图像处理方法及图像处理装置、显示装置用于图像反畸变中。

【技术实现步骤摘要】
一种图像处理方法及图像处理装置、显示装置
本专利技术涉及图像处理
，尤其涉及一种图像处理方法及图像处理装置、显示装置。
技术介绍
虚拟现实技术(VirtualReality，缩写为VR)是一种可以创建和体验虚拟世界的计算机仿真方法。在进行VR显示时，用户可以体沉浸到VR显示所提供的沉浸式环境中，给用户带来了比较真实的使用体验。为了满足VR显示的要求，VR显示设备需要具有较高的帧率，使得显示设备具有比较好的图像渲染质量。在上述沉浸式环境里，VR显示设备所显示的画面快速变化，使得用户所看到的图像产生畸变的可能性比较高，导致用户在沉浸式环境中容易产生眩晕。目前，网格反畸变处理方式是目前比较流行的图像畸变处理方法，具体是将图像网格化，对图像中网格密度比较稀疏的区域的网格顶点进行畸变处理，以减少图像数据处理量。当VR显示设备的图像渲染性能不高时，网格反畸变处理方式无法处理较多的图像数据，使得网格反畸变处理方式的反畸变效果不好，同时还使得VR图像容易产生丢失帧的问题。
技术实现思路
本专利技术的目的在于提供一种图像处理方法及装置、显示控制方法及装置、显示装置，以在保证VR图像不出现丢失帧的前提下，降低图像畸变程度，从而提高用户使用体验。为了实现上述目的，本专利技术提供一种图像处理方法，该图像处理方法包括：将原始网格化图像进行分区，获得多个区域网格图像，使得多个区域网格图像沿着远离原始网格化图像几何中心的方向分布；根据反畸变参数对多个所述区域网格图像的网格顶点进行调整，获得构成网格修正图像的多个区域修正网格图像，使得每个区域修正网格图像所含有的网格密度小于等于对应区域网格图像所含有的网格密度，多个所述区域修正网格图像所含有的网格密度沿着远离原始网格化图像几何中心的方向逐渐增加。与现有技术相比，本专利技术提供的图像处理方法中，根据反畸变参数对多个区域网格图像的网格顶点进行调整，获得多个区域修正网格图像构成的网格修正图像，使得每个区域修正网格图像所含有的网格密度小于等于对应区域网格图像所含有的网格密度数量，可见，本专利技术提供的图像处理方法中，网格修正图像所含有的网格顶点数量相对原始网格化图像所含有的网格顶点数量减少，这样可降低图像处理过程中的数据处理量，这不仅可有效减少图像处理时间，以降低后期贴图出现丢失帧的发生机率，还使得图像处理方法所要求的图像处理器的硬件配置比较低。同时，现有技术中用户所看到的图像沿着远离原始网格化图像几何中心的方向畸变程度逐渐增加，使得多个区域修正网格图像所含有的网格顶点数量随着畸变程度的增加，基于此，本专利技术提供的图像处理方法中，根据反畸变参数对多个所述区域网格图像的网格顶点进行调整，所获得的多个区域修正网格图像所含有的网格密度沿着远离原始图像几何中心的方向逐渐增加，使得多个区域修正网格图像所含有的网格顶点密度逐渐增大；而由于网格反畸变处理过程中所涉及的网格数量越多，网格反畸变处理的效果越好，因此，本专利技术提供的图像处理方法根据用户所看到的图像不同区域发生畸变的程度，分区域控制网格修正图像的网格顶点密度，以降低图像畸变程度，从而缓解用户在观看图像时因为图像畸变所产生的眩晕感。由上可知，本专利技术提供的图像处理方法可减少图像数据处理量的前提下，降低图像畸变程度，这使得图像畸变降低程度一致的情况下，本专利技术提供的图像处理方法所处理的数据量更少；而在原始网格化图像所含有的网格顶点量一定的情况下，本专利技术提供图像处理方法可使得最终获得的图像畸变程度更低，更加接近无畸变图像。本专利技术还提供了一种图像处理装置，该图像处理装置包括：分区模块，用于将所述原始网格化图像进行分区，获得多个区域网格图像，使得多个区域网格图像沿着远离原始网格化图像几何中心的方向分布；栅格重构模块，用于根据反畸变参数对多个所述区域网格图像的网格顶点进行调整，获得构成网格修正图像的多个区域修正网格图像，使得每个区域修正网格图像所含有的网格密度小于等于对应区域网格图像所含有的网格密度，多个所述区域修正网格图像所含有的网格密度沿着远离原始网格化图像几何中心的方向逐渐增加。与现有技术相比，本专利技术提供的图像处理装置的有益效果与上述图像处理方法的有益效果相同，在此不做赘述。本专利技术还提供了一种计算机存储介质，用于储存一个或多个计算机软件指令，其包含用于执行上述图像处理方法所设计的程序。与现有技术相比，本专利技术提供的计算机存储介质的有益效果与上述图像处理方法的有益效果相同，在此不做赘述。本专利技术还提供了一种显示装置，该显示装置包括上述图像处理装置。与现有技术相比，本专利技术提供的显示装置的有益效果与上述图像处理方法的有益效果相同，在此不做赘述。附图说明此处所说明的附图用来提供对本专利技术的进一步理解，构成本专利技术的一部分，本专利技术的示意性实施例及其说明用于解释本专利技术，并不构成对本专利技术的不当限定。在附图中：图1为枕形畸变图像与正常图像的对比示意图；图2为图像畸变分布示意图；图3为贴图时间与区域调节参数的对应关系图；图4为现有网格反畸变处理原始网格化图像后所获得的图像示意图一；图5为现有网格反畸变处理处理原始网格化图像后所获得的图像示意图二；图6为本专利技术实施例中多个区域网格图像的分布示意图；图7为本专利技术实施例中多个区域修正网格图像的分布示意图；图8为本专利技术实施例提供的图像处理方法流程图一；图9为本专利技术实施例提供的图像处理方法流程图二；图10为本专利技术实施例提供的图像处理方法流程图三；图11为本专利技术实施例提供的图像处理方法流程图四；图12为本专利技术实施例提供的图像处理方法流程图五；图13为本专利技术实施例提供的图像处理装置的结构框图；图14为本专利技术实施例提供的图像处理终端硬件结构图。附图标记：100-图像处理装置，110-接收模块；120-渲染模块，130-分区模块；140-贴图模块，200-图像处理终端；210-收发器，220-存储器；230-处理器，240-总线；A-第一区域网格图像，A’-第一区域修正网格图像；B-第二区域网格图像，B’-第二区域修正网格图像；C-第三区域网格图像，C’-第三区域修正网格图像；IMGO-正常图像，IMG1-枕形畸变图像。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。在沉浸式环境中，VR显示设备所包括的凸透镜靠近用户双眼，使得用户能够在较大的视场角下看到VR图像，而用户观看VR图像的视场角越大，用户所看到的VR图像的畸变也就越大。当用户所看到的VR图像时，理论上应当看到如图1中虚线所围成的正常图像IMG0，但是由于VR图像发生畸变，使得用户所看到的VR图像中，远离VR图像几何中心点的图像看上去被拉伸，因此，当用户所看到的VR图像发生畸变时，且用户所看到的VR图像从图1中虚线构成的图像变为图1中实线所示的枕形畸变图像IMG1。一般采用网格反畸变技术对图像信息进行处理，使得VR图像的畸变程度降低。网格反畸变技术主要是利用图形处理器对VR图像的网格顶点进行畸变处理，以避免对每一个像素信息进行反畸变处理，这样可减少图像处理器的计算量，进而降低反畸本文档来自技高网...

【技术保护点】
1.一种图像处理方法，其特征在于，包括：将原始网格化图像进行分区，获得多个区域网格图像，使得多个区域网格图像沿着远离原始网格化图像几何中心的方向分布；根据反畸变参数对多个所述区域网格图像的网格顶点进行调整，获得构成网格修正图像的多个区域修正网格图像，使得每个区域修正网格图像所含有的网格密度小于等于对应区域网格图像所含有的网格密度，多个所述区域修正网格图像所含有的网格密度沿着远离原始网格化图像几何中心的方向，逐渐增加。

【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：将原始网格化图像进行分区，获得多个区域网格图像，使得多个区域网格图像沿着远离原始网格化图像几何中心的方向分布；根据反畸变参数对多个所述区域网格图像的网格顶点进行调整，获得构成网格修正图像的多个区域修正网格图像，使得每个区域修正网格图像所含有的网格密度小于等于对应区域网格图像所含有的网格密度，多个所述区域修正网格图像所含有的网格密度沿着远离原始网格化图像几何中心的方向，逐渐增加。2.根据权利要求1所述的图像处理方法，其特征在于，所述将原始网格化图像进行分区，获得多个区域网格图像包括：根据VR显示装置所含有的透镜畸变系数分布特性和所述原始网格化图像，获得分区因子α，α为大于等于1的整数；根据所述分区因子α对所述原始网格化图像进行区域划分，获得多个区域网格图像，使得多个区域网格图像沿着远离原始网格化图像几何中心的方向分布，每个区域网格图像所含有的网格数量是分区因子α的整数倍。3.根据权利要求2所述的图像处理方法，其特征在于，所述原始网格化图像含有N×N的网格矩阵，N为大于1的整数；所述根据VR显示装置所含有的透镜畸变系数分布特性和所述原始网格化图像，获得分区因子α包括：根据VR显示装置所含有的透镜畸变系数分布特性，获得区域调节参数k，k为大于0的整数；根据所述原始网格化图像，获得单向网格参数N；判断所述单向网格参数N是否为k的整数倍；若所述单向网格参数N为k的整数倍，则根据所述单向网格参数N和所述区域调节参数k，获得分区因子α；否则，对所述单向网格参数N进行重置，获得网格修正参数N’；根据所述网格修正参数N’和所述区域调节参数k，获得分区因子α，4.根据权利要求2所述的图像处理方法，其特征在于，所述根据所述分区因子对所述原始网格化图像进行区域划分包括：从所述原始网格化图像获得原始网格化图像的中心网格顶点信息，使得所述原始网格化图像的中心网格顶点信息为原始网格化图像的几何中心；根据所述原始网格化图像的几何中心和所述分区因子α，确定多个区域网格图像，使得每个区域网格图像所含有的网格数量为分区因子α的整数倍；根据多个区域网格图像，获得多个区域网格图像包括的各个网格顶点信息，多个区域网格图像沿着远离原始网格化图像几何中心的方向分布。5.根据权利要求1所述的图像处理方法，其特征在于，所述根据反畸变参数对多个所述区域网格图像进行调整，获得多个区域修正网格图像构成的网格修正图像包括：从每个所述区域网格图像所含有的各个网格顶点位置坐标获取每个区域修正网格图像所含有的各个网格顶点位置坐标，使得各个所述区域修正网格图像所含有的网格密度沿着远离原始网格化图像几何中心的方向逐渐增加；根据所述反畸变参数和所述区域网格图像所含有的各个网格顶点纹理坐标，获得每个区域修正网格图像所含有的各个网格顶点纹理坐标，使得各个所述区域修正网格图像所含有的网格密度沿着远离原始网格化图像几何中心的方向逐渐增加；根据各个所述区域修正网格图像所含有的各个网格顶点位置坐标和各个网格顶点纹理坐标进行图像贴图，获得网格修正图像。6.根据权利要求1～5任一项所述的图像处理方法，其特征在于，所述将原始网格化图像进行分区前，所述图像处理方法还包括：接收原始图像数据、反畸变参数和垂直同步信号；若接收到垂直同步信号，对所述原始图像数据进行网格化渲染，获得两个原始网格化图像；获得多个区域修正网格图像构成的网格修正图像后，所述图像处理方法还包括：更新所述原始图像数据。7.根据权利要求5所述的图像处理方法，其特征在于，所述两个原始网格化图像包括左眼原始网格化图像和右眼原始网格化图像。8.一种图像处理装置，其特征在于，包括：分区模块，用于将所述原始网格化图...

【专利技术属性】
技术研发人员：范清文，孙玉坤，赵斌，苗京花，李茜，陈丽莉，张浩，彭金豹，王雪丰，索健文，李文宇，李治富，张硕，何惠东，
申请(专利权)人：京东方科技集团股份有限公司，北京京东方光电科技有限公司，
类型：发明
国别省市：北京,11