【技术实现步骤摘要】
本申请实施例涉及电子设备领域，尤其涉及一种着色方法、着色装置和电子设备。
技术介绍
1、随着科学技术的不断进步，电子设备屏幕的分辨率和刷新率的不断提高，用户对着色计算的需求也在日益增长。着色是渲染过程中，对电子设备的计算能力的带宽要求较高的一个步骤。为了满足着色的实际需求，提出了一种灵活的着色机制可变速率着色(variable rate shading，vrs)。该着色机制可以将图像区域区分为低速率着色区域和高速率着色区域，从而进行着色。可以在不降低用户可察觉的输出画质的情况下，提升渲染的性能。
2、然而，如何提高可变速率着色识别图像区域的准确度，从而进一步提升渲染性能是目前亟待解决的问题。
技术实现思路
1、本申请实施例提供一种着色方法、着色装置和电子设备，该方法可以提高可变速率着色识别区域的准确度，并进一步提升渲染性能。
2、第一方面，提供了一种着色方法，该方法包括：获取图像的渲染信息，该渲染信息包括主场景渲染纹理、摄像机信息、渲染物体的模型观察投影mvp矩阵信息和用户界面ui渲染纹理，该图像包括n个图像区域，该n个图像区域中的每个图像区域包括m个像素，其中n为大于或等于1的正整数，m为大于或等于1的正整数；根据该主场景渲染纹理、该摄像机信息和该渲染物体的mvp矩阵信息确定第一指导图；根据该ui渲染纹理确定第二指导图；根据该第一指导图和该第二指导图确定第三指导图，该第三指导图包括该第三指导图的低速率着色区域或该第三指导图的高速率着色区域；对该第三指导图进
3、应理解，一个图像可以被分片成多个区域，每个区域具有一定大小的像素。可选地，m为256(16×16)。电子设备可以对每个分片分配32个线程并行计算，以加快算法执行的速率。
4、本申请实施例中，电子设备根据主场景渲染纹理、摄像机信息和渲染物体的mvp矩阵信息确定第一指导图，根据ui渲染纹理确定第二指导图。并且将上述两个指导图结合，确定了第三指导图。第三指导图能够准确地识别并标记不同区域的着色速率，使得电子设备根据第三指导图完成的着色处理的效果更好，渲染性能也得到了进一步的提升。
5、结合第一方面，在第一方面的某些实现方式中，该对该第三指导图进行着色，包括：对该第三指导图的高速率着色区域进行着色；根据插值算法补齐该第三指导图的低速率着色区域。
6、结合第一方面，在第一方面的某些实现方式中，该根据插值算法补齐该第三指导图的低速率着色区域，包括：在该第三指导图的低速率区域生成深度棋盘格，该深度棋盘格包括第一区域或第二区域，该第一区域的深度与该第二区域的深度不同；着色该第一区域；根据插值算法补齐该第二区域。
7、应理解，深度棋盘格的第一区域的深度值为1，深度棋盘格的第二区域的深度值为0。电子设备可以根据early-z机制，将不会对第二区域进行着色处理，而是通过插值算法进行补齐。其中，补齐可以理解为计算该区域中每个像素的颜色值。
8、本申请实施例中，通过深度测试，对深度为0的区域进行剔除，随后又将这些区域进行补齐。使得节省电子设备渲染开销的同时，又能够对图像的所有区域进行着色处理，以获得更好的渲染性能。
9、结合第一方面，在第一方面的某些实现方式中，该根据该主场景渲染纹理、该摄像机信息和该渲染物体的mvp矩阵信息确定第一指导图，包括：根据第一图像区域的主场景渲染纹理确定第一参考值；该n个图像区域包括该第一图像区域；根据该第一图像区域的摄像机信息和该第一图像区域的渲染物体的mvp矩阵信息确定第二参考值；根据该第一参考值和该第二参考值确定第三参考值；根据该第三参考值和第一阈值确定第一指导图，该第一阈值是由该第一图像区域内的m个像素的亮度值确定的。
10、应理解，第一参考值为频域信息参考值，第二参考值为运动速率信息参考值，第一阈值为m个像素亮度值的平均值。根据频域信息参考值和运动速率信息参考值确定最终参考值(第三参考值)。图像中的某一区域(第一图像区域)中的不同像素点的频域信息可能不同，但该区域的频域信息参考值是一定的，该区域的运动速率参考值是一定的，该区域的第一阈值也是一定的。图像的每个区域(每一个图像区域)都可以确定该区域的频域信息参考值、运动速率信息参考值和第一阈值。不同图像区域的上述参考值或者阈值可能相同也可能不同。
11、本申请实施例中，将亮度值的平均值设置为第一阈值，使得电子设备能够自适应地识别并标记不同图像区域的着色速率。该方法可以降低某些图像区域没有必要的着色速率，降低着色开销，提升渲染性能，同时也能适应性渲染不同的场景。
12、结合第一方面，在第一方面的某些实现方式中，该根据该第三参考值和第一阈值确定第一指导图，包括：当该第三参考值大于或等于第一阈值时，确定该第一图像区域为该第一指导图的高速率着色区域；当该第三参考值小于第一阈值时，确定该第一图像区域为该第一指导图的低速率着色区域。
13、应理解，不同图像区域的各个参考值以及第一阈值可能不同，因此不同图像区域可以划分成高速率着色区域或者低速率着色区域。
14、本申请实施例中，根据频域信息参考值和运动速率参考值确定的第一指导图准确度更高，更便于电子设备执行后续的着色处理。
15、结合第一方面，在第一方面的某些实现方式中，该根据第一图像区域的主场景渲染纹理确定第一参考值，包括：根据第一图像区域的主场景渲染纹理确定水平方向的频域信息和垂直方向的频域信息；根据该水平方向的频域信息和该垂直方向的频域信息确定第一参考值。
16、应理解，对图像的每个图像区域进行高通滤波。通过水平方向的高通滤波，对该图像区域上所有像素水平方向频域信息的平方和的均值再求平方根，获得水平方向的频域信息。通过垂直方向的高通滤波，对该图像区域上所有像素垂直方向的频域信息的平方和的均值再求平方根，获得垂直方向的频域信息。将获得的水平方向的频域信息和垂直方向的频域信息中的最大值作为该图像区域的频域信息的参考值(第一参考值)。
17、结合第一方面，在第一方面的某些实现方式中，该根据该第一图像区域的摄像机信息和该第一图像区域的渲染物体的mvp矩阵信息确定第二参考值，包括：根据该第一图像区域的摄像机信息和该第一图像区域的渲染物体的mvp矩阵信息确定运动速率信息；根据该运动速率信息确定第二参考值。
18、应理解，计算图像中某个图像区域中每个像素的位移(运动速率信息)，将其中的位移最小值的倒数作为运动速率的参考值。
19、结合第一方面，在第一方面的某些实现方式中，该根据该ui渲染纹理确定第二指导图，包括：根据该第一图像区域的ui渲染纹理确定第四参考值；当该第四参考值大于第二阈值时，标记该第一图像区域为该第二指导图的ui遮挡区域。
20、应理解，当ui渲染纹理为独立纹理时，根据blend确定某一图像区域的ui渲染纹理的透明度，当alpha大于0.2且采样到的颜色是非初始颜色时，将该图像区域标记为ui遮挡区域。当ui本文档来自技高网...
【技术保护点】
1.一种着色方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，所述对所述第三指导图进行着色，包括：
3.根据权利要求2所述的方法，其特征在于，所述根据插值算法补齐所述第三指导图的低速率着色区域，包括：
4.根据权利要求1至3中任一项所述的方法，其特征在于，所述根据所述主场景渲染纹理、所述摄像机信息和所述渲染物体的MVP矩阵信息确定第一指导图，包括：
5.根据权利要求4所述的方法，其特征在于，所述根据所述第三参考值和第一阈值确定第一指导图，包括：
6.根据权利要求4或5所述的方法，其特征在于，所述根据第一图像区域的主场景渲染纹理确定第一参考值，包括：
7.根据权利要求4至6中任一项所述的方法，其特征在于，所述根据所述第一图像区域的摄像机信息和所述第一图像区域的渲染物体的MVP矩阵信息确定第二参考值，包括：
8.根据权利要求1至7中任一项所述的方法，其特征在于，所述根据所述UI渲染纹理确定第二指导图，包括：
9.一种着色装置，其特征在于，包括：
10.根据权利
11.根据权利要求10所述的装置，其特征在于，所述可变速率着色模块，具体用于在所述第三指导图的低速率区域生成深度棋盘格，所述深度棋盘格包括第一区域或第二区域，所述第一区域的深度与所述第二区域的深度不同；
12.根据权利要求9至11中任一项所述的装置，其特征在于，所述第一计算模块，具体用于根据第一图像区域的主场景渲染纹理确定第一参考值，所述N个图像区域包括所述第一图像区域；
13.根据权利要求12所述的装置，其特征在于，所述决策指导模块，具体用于当所述第三参考值大于或等于第一阈值时，确定所述第一图像区域为所述第一指导图的高速率着色区域；
14.根据权利要求12或13所述的装置，其特征在于，所述第一计算模块，具体用于根据第一图像区域的主场景渲染纹理确定水平方向的频域信息和垂直方向的频域信息；
15.根据权利要求12至14中任一项所述的装置，其特征在于，所述第一计算模块，具体用于根据所述第一图像区域的摄像机信息和所述第一图像区域的渲染物体的MVP矩阵信息确定运动速率信息；
16.根据权利要求9至15中任一项所述的装置，其特征在于，所述第二计算模块，具体用于根据所述第一图像区域的UI渲染纹理确定第四参考值；
17.一种电子设备，其特征在于，与存储器耦合的处理器，所述存储器用于存储计算机程序，所述处理器用于运行所述计算机程序，使得所述电子设备执行如权利要求1至8中任一项所述的方法。
18.根据权利要求17所述的电子设备，其特征在于，所述电子设备还包括所述存储器和收发器中的一项或多项，所述收发器用于接收信号和/或发送信号。
19.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质包括计算机程序或指令，当所述计算机程序或指令在计算机上运行时，使得如权利要求1至8中任一项所述的方法被执行。
20.一种计算机程序产品，其特征在于，所述计算机程序产品包括计算机程序或指令，当所述计算机程序或指令在计算机上运行时，使得如权利要求1至8中任一项所述的方法被执行。
...【技术特征摘要】
1.一种着色方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，所述对所述第三指导图进行着色，包括：
3.根据权利要求2所述的方法，其特征在于，所述根据插值算法补齐所述第三指导图的低速率着色区域，包括：
4.根据权利要求1至3中任一项所述的方法，其特征在于，所述根据所述主场景渲染纹理、所述摄像机信息和所述渲染物体的mvp矩阵信息确定第一指导图，包括：
5.根据权利要求4所述的方法，其特征在于，所述根据所述第三参考值和第一阈值确定第一指导图，包括：
6.根据权利要求4或5所述的方法，其特征在于，所述根据第一图像区域的主场景渲染纹理确定第一参考值，包括：
7.根据权利要求4至6中任一项所述的方法，其特征在于，所述根据所述第一图像区域的摄像机信息和所述第一图像区域的渲染物体的mvp矩阵信息确定第二参考值，包括：
8.根据权利要求1至7中任一项所述的方法，其特征在于，所述根据所述ui渲染纹理确定第二指导图，包括：
9.一种着色装置，其特征在于，包括：
10.根据权利要求9所述的装置，其特征在于，所述可变速率着色模块，具体用于对所述第三指导图的高速率着色区域进行着色；
11.根据权利要求10所述的装置，其特征在于，所述可变速率着色模块，具体用于在所述第三指导图的低速率区域生成深度棋盘格，所述深度棋盘格包括第一区域或第二区域，所述第一区域的深度与所述第二区域的深度不同；
12.根据权利要求9至11中任一项所述的装置，其特征在于，所述第一计算模块，具体用于根据第一图像区域的主场景渲染纹理确定...
【专利技术属性】
技术研发人员：王术，杨启航，杨程云，冯绍波，
申请(专利权)人：华为技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。