屏幕显示亮度调整方法及装置、存储介质及电子设备制造方法及图纸

本公开提供一种屏幕显示亮度调整方法及装置、电子设备、计算机可读存储介质，涉及设备控制技术领域。所述方法包括：确定显示在屏幕界面中的显示图像的显著性参数，所述显著性参数用于描述所述显示图像中各主体显著程度；确定当前人眼视线落在当前屏幕界面的注视点参数，该注视点参数用于表示当前人眼视线的注视区域；依据显著性参数与注视点参数确定显示图像中各主体对应区域的亮度调整参数；依据亮度调整参数在屏幕界面中调整各区域的显示亮度。本公开通过确定显示图像中各主体的显著程度及人眼视线在屏幕上的注视区域，并据此确定亮度调整参数，从而可以将被注视主体的亮度调整到人眼适宜的亮度并降低不被注意的主体的亮度。度。度。

【技术实现步骤摘要】
屏幕显示亮度调整方法及装置、存储介质及电子设备


[0001]本公开涉及设备控制
，具体而言，涉及一种屏幕显示亮度调整方法、屏幕显示亮度调整装置、电子设备以及计算机可读存储介质。

技术介绍

[0002]随着无线通信及电子技术的不断发展，智能手机、平板电脑等各种电子设备也越来越普及。在实际应用中，为了提高用户的使用体验，大多数电子设备都具备屏幕亮度自动调整的功能，以使屏幕亮度是适应于不同的光线关键，使用户可以清晰地阅读屏幕上的内容。
[0003]相关技术中，屏幕亮度调节方法通过光线传感器获取当前环境的光感数据，并计算屏幕显示图像的RGB信息，并依据光感数据集RGB信息调整屏幕的亮度。然而，上述方法只能对整个屏幕进行同等程度的调整，无法重点显示屏幕显示图像中被人眼视线注视的主体，且降低功耗的效果不理想。
[0004]故而，为了解决上述问题，本公开实施例提供了一种屏幕显示亮度调整方法、屏幕显示亮度调整装置、电子设备以及计算机可读存储介质。

技术实现思路

[0005]本公开实施例的目的在于提供一种屏幕显示亮度调整方法、屏幕显示亮度调整装置、电子设备以及计算机可读存储介质，从而在一定程度上解决了相关技术存在的只能对整个屏幕进行同等程度的调整，无法重点显示显示图像中被人眼视线注视的主体，且降低功耗的效果不理想。
[0006]根据本公开的第一方面，提供一种屏幕显示亮度调整方法，包括：确定显示在屏幕界面中的显示图像的显著性参数，该显著性参数用于描述显示图像中各主体显著程度；确定当前人眼视线落在当前屏幕界面的注视点参数，该注视点参数用于表示当前人眼视线的注视区域；依据上述显著性参数与注视点参数确定显示图像中各主体对应区域的亮度调整参数；依据亮度调整参数在屏幕界面中调整各区域的显示亮度。
[0007]在本公开的一种示例性实施例中，上述确定显示在屏幕界面中的显示图像的显著性参，包括：将显示图像分割为多个区域，针对每一个区域的中心点，确定多个检测框，该检测框用于预测显示图像中主体的位置；将显示图像输入预先训练好的显著性参数确定模型，输出中间矩阵，其中，上述中间矩阵的行对应于各检测框，列对应于各行对应的检测框的位置信息、框定一个主体的概率以及该主体的显著程度；依据中间矩阵对主体排序，并定义各区域的显著程度，得到与各区域对应的显著性矩阵，作为显著性参数。
[0008]在本公开的一种示例性实施例中，上述显著性参数确定模型的训练过程，包括：获取多张样本图像，并标注样本图像中各主体的显著程度；对样本图像进行预处理；将样本图像划分为多个区域，针对每个区域的中心点，确定多个检测框，该检测框用于预测样本图像中主体的位置；基于样本图像训练神经网络，得到显著性参数确定模型，上述显著性参数确
定模型用于输出所述中间矩阵。
[0009]在本公开的一种示例性实施例中，上述确定当前人眼视线落在当前屏幕界面的注视点参数，包括：通过目标检测算法检测前置摄像头下，当前屏幕界面中显示的前置图像中的人脸，并确定人脸中左右眼的坐标；将前置图像分割为多个区域，前置图像的区域数目与上述显示图像的区域数目相同；将人脸的面部数据以及左右眼坐标输入已经训练好的注视点参数确定模型，通过注视点参数确定模型确定注视点矩阵，作为注视点参数，该注视点矩阵与上述显著性矩阵的行列数相同。
[0010]在本公开的一种示例性实施例中，上述注视点参数确定模型的训练过程，包括：获取多张通过前置摄像头采集的前置图像，将前置图像划分为多个区域，前置图像的区域数目与上述显示图像的区域数目相同；在前置图像中标注人眼视线所注视的主体，人眼视线注视方向上除了所注视主体之外的主体，以及前置图像中的其他主体；基于前置图像及标注数据对神经网络进行训练，得到注视点参数确定模型，该注视点参数确定模型用于输出注视点矩阵。
[0011]在本公开的一种示例性实施例中，上述依据显著性参数与注视点参数确定显示图像中各主体对应区域的亮度调整参数，包括：将显著性矩阵与注视点矩阵相乘，得到显示矩阵，作为亮度调整参数，上述显示矩阵用于表示对应区域的主体的被注视概率。
[0012]在本公开的一种示例性实施例中，上述依据亮度调整参数在屏幕界面中调整各区域的显示亮度，包括：将显示矩阵与初始修正系数相乘得到最终修正系数，依据最终修正系数调整屏幕界面各区域的显示亮度；上述初始修正系数为基于屏幕界面当前所处环境的光感数值及显示图像的颜色信息确定。
[0013]根据本公开的第二方面，提供一种屏幕显示亮度调整装置，包括：显著性参数确定模块，用于确定显示在屏幕界面中的显示图像的显著性参数，该显著性参数用于描述显示图像中各主体显著程度；注视点参数确定模块，用于确定当前人眼视线落在当前屏幕界面的注视点参数，该注视点参数用于表示当前人眼视线的注视区域；亮度调整参数确定模块，用于依据显著性参数与注视点参数确定显示图像中各主体对应区域的亮度调整参数；亮度调整模块，用于依据亮度调整参数在屏幕界面中调整各区域的显示亮度。
[0014]在本公开的一种示例性实施例中，上述显著性参数确定模块，具体用于：将显示图像分割为多个区域，针对每一个区域的中心点，确定多个检测框，检测框用于预测显示图像中主体的位置；将显示图像输入预先训练好的显著性参数确定模型，输出中间矩阵，其中，上述中间矩阵的行对应于各检测框，列对应于各行对应的检测框的位置信息、框定一个主体的概率以及该主体的显著程度；依据中间矩阵对主体排序，并定义各区域的显著程度，得到与各区域对应的显著性矩阵，作为显著性参数。
[0015]在本公开的一种示例性实施例中，上述屏幕显示亮度调整装置还包括模型训练模块，该模型训练模块用于训练显著性参数确定模型，具体用于：获取多张样本图像，并标注样本图像中各主体的显著程度；对样本图像进行预处理；将样本图像划分为多个区域，针对每个区域的中心点，确定多个检测框，上述检测框用于预测样本图像中主体的位置；基于样本图像训练神经网络，得到显著性参数确定模型，显著性参数确定模型用于输出中间矩阵。
[0016]在本公开的一种示例性实施例中，上述注视点参数确定模块，具体用于：通过目标检测算法检测前置摄像头下，当前屏幕界面中显示的前置图像中的人脸，并确定人脸中左
右眼的坐标；将前置图像分割为多个区域，上述前置图像的区域数目与显示图像的区域数目相同；将人脸的面部数据以及左右眼坐标输入已经训练好的注视点参数确定模型，通过该注视点参数确定模型确定注视点矩阵，作为注视点参数，该注视点矩阵与上述显著性矩阵的行列数相同。
[0017]在本公开的一种示例性实施例中，上述模型训练模块还用于训练注视点参数确定模型，具体用于：获取多张通过前置摄像头采集的前置图像，将前置图像划分为多个区域，前置图像的区域数目与显示图像的区域数目相同；在前置图像中标注人眼视线所注视的主体，人眼视线注视方向上除了所注视主体之外的主体，以及前置图像中的其他主体；基于前置图像及标注数据对神经网络进行训练，得到注视点参数确定模型，注视点参数确定模型用于输出注视本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种屏幕显示亮度调整方法，其特征在于，包括：确定显示在屏幕界面中的显示图像的显著性参数，所述显著性参数用于描述所述显示图像中各主体显著程度；确定人眼视线落在所述当前屏幕界面的注视点参数，所述注视点参数用于表示所述人眼视线的注视区域；依据所述显著性参数与所述注视点参数确定所述显示图像中各所述主体对应区域的亮度调整参数；依据所述亮度调整参数在所述屏幕界面中调整各所述区域的显示亮度。2.根据权利要求1所述的屏幕显示亮度调整方法，其特征在于，所述确定显示在屏幕界面中的显示图像的显著性参数，包括：将所述显示图像分割为多个区域，针对每一个所述区域的中心点，确定多个检测框，所述检测框用于预测所述显示图像中所述主体的位置；将所述显示图像输入预先训练好的显著性参数确定模型，输出中间矩阵，其中，所述中间矩阵的行对应于各所述检测框，列对应于各行对应的所述检测框的位置信息、框定一个所述主体的概率以及该所述主体的所述显著程度；依据所述中间矩阵对所述主体排序，并定义各所述区域的显著程度，得到与各所述区域对应的显著性矩阵，作为所述显著性参数。3.根据权利要求2所述的屏幕显示亮度调整方法，其特征在于，所述显著性参数确定模型的训练过程，包括：获取多张样本图像，并标注所述样本图像中各主体的显著程度；对所述样本图像进行预处理；将所述样本图像划分为多个区域，针对每个所述区域的中心点，确定多个检测框，所述检测框用于预测所述样本图像中所述主体的位置；基于所述样本图像训练神经网络，得到所述显著性参数确定模型，所述显著性参数确定模型用于输出所述中间矩阵。4.根据权利要求2所述的屏幕显示亮度调整方法，其特征在于，所述确定当前人眼视线落在所述当前屏幕界面的注视点参数，包括：通过目标检测算法检测前置摄像头下，所述当前屏幕界面中显示的前置图像中的人脸，并确定所述人脸中左右眼的坐标；将所述前置图像分割为多个区域，所述前置图像的区域数目与所述显示图像的区域数目相同；将人脸的面部数据以及左右眼坐标输入已经训练好的注视点参数确定模型，通过所述注视点参数确定模型确定注视点矩阵，作为所述注视点参数，所述注视点矩阵与所述显著性矩阵的行列数相同。5.根据权利要求4所述的屏幕显示亮度调整方法，其特征在于，所述注视点参数确定模型的训练过程，包括：获取多张通过前置摄像头采集的前置图像，将所述前置图像划分为多个区域，所述前置图像的区域数目与所述显示图像的区域数目相同；在所述前置图像中标注人眼视线所注视的主体，所述人眼视线注视方向上除了所注视
主体之外的主体，以及所述前置图像中的其他主体；基于所述前置图像及标注数据对神经网络进行训练，得到所述注视点参数确定模型，所述注视点参数确定模型用于输出所述注视点矩阵。6.根据权利要求4所述的屏幕显示亮度调整方法，其特征在于，所述依据所述显著性参数与所述注视点参数确定所述显示图像中各所述主体对应区域的亮度调整参数，包括：将所述显著性矩阵与所述注视点矩阵相乘，得到显示矩阵，作为所述亮度调整参数，所述显示矩阵用于表示对应区域的所述主体的被注视概率。7.根据权利要求6所述的屏幕显示亮度调整方法，其特征在于，所述依据所述亮度调整参数在所述屏幕界面中调整各所述区域的显示亮度，包括：将所述显示矩阵与初始修正系数相乘得到最终修正系数，依据所述最终修正系数调整所述屏幕界面各所述区域的显示亮度；所述初始修正系数为基于所述屏幕界面当前所处环境的光感数值及所述显示图像的颜色信息确定。8.一种屏幕显示亮度调整装置，其特征在于，包括：显著性参数确定模块，用于确定显示在屏幕界面中的显示图像的显著性参数，所述显著性参数用于描述所述显示图像中各主体显著程度；注视点参数确定模块，用于确定当前人眼视...

【专利技术属性】
技术研发人员：张逸帆，
申请(专利权)人：北京小米移动软件有限公司，
类型：发明
国别省市：