一种自适应调整显示屏刷新率的方法技术

本发明专利技术提出了一种自适应调整显示屏刷新率的方法，该方法包括：表情识别部分与帧率切换部分，应用于高刷新率移动终端设备。在移动终端设备上，引入一种图像识别传感器，在表情识别阶段，对传入的面部图像信息展开识别；在帧率切换阶段，基于用户面部图像识别结果，采用算法分析当前用户的情绪，将情绪识别结果归纳为紧张兴奋与悠闲安静两类状态，从而根据用户当前的面部表情推算用户当前的使用场景，有针对性地自动调整显示屏刷新率，使得在移动终端设备的使用过程中，设备刷新的帧率与用户不同场景下需求的帧率自动匹配，不仅能够适应性地满足用户使用体验需要，相较传统的高帧模式，其功耗更低，能够提升移动终端设备的续航能力。能力。能力。

【技术实现步骤摘要】
一种自适应调整显示屏刷新率的方法


[0001]本专利技术适用于移动终端设备的软件
，尤其涉及一种高刷新率显示屏自动调整刷新帧率方法。

技术介绍

[0002]显示屏的刷新率分为垂直刷新率和水平刷新率，一般提到的刷新率通常指垂直刷新率，垂直刷新率表示显示屏显示画面每秒钟绘制多少次，也就是每秒钟显示屏刷新的次数，以Hz(赫兹)为单位。刷新率越高，所显示的图像(画面)稳定性就越好，在滑动屏幕时会获得更快的屏幕反应速度。
[0003]相对而言，高刷新率显示屏显示的图像清晰度要高于低刷新率的显示屏。大多数普通显示屏的刷新率约为60Hz，而高刷新率的显示屏一般为75Hz、90Hz、120Hz、144Hz等，刷新率越高，显示屏显示的图像越清晰，用户体验越好。虽然，高刷新率可以在一定程度上提升显示屏显示内容的清晰度，但是，显示屏的刷新频率越高，对应设备的功耗就越大，导致设备的续航时间就越短，影响用户的使用体验感受。
[0004]当前，各类游戏应用对显卡(GPU)及显示屏刷新速率的要求越来越高，提高设备刷新率已经成为了一种趋势。在不同应用场景下，移动终端设备如何合理、适时地切换显示屏的刷新帧率成为一大问题。
[0005]中国专利CN110297665B提出一种设备工作模式切换方法，该方法利用设备上的深度图像和RGB摄像头，仅实现了无应用程序运行时，设备自动切换至低功率休眠状态的功能，未解决多种应用场景下的功耗差异问题，不能实现运行过程中功耗的动态调整。
[0006]中国专利CN115185083A提出一种AR头戴显示器自适应刷新率和分辨率渲染方法，该方法通过监测环境光的特性调整设备刷新率，实现了帧率的自动切换以及设备的功耗降低。但是，该方法采取监测环境光的方式存在一定的局限性，并不能真实解决用户各种实际应用场景下的使用体验和功耗平衡的问题。
[0007]中国专利CN110134316B提出了一种情绪识别方法，通过用户的触控方式以及情绪状态，构建模型训练样本，训练得到情绪分类模型，再通过获取用户的触控方式，确定当前用户状态。该方法实现了通过用户的触控方式监测其当前情绪状态，但没有解决移动终端设备功耗高，续航时间短的问题。
[0008]PCT专利WO2022142732提出一种帧率切换控制方法，该方法获取移动终端设备上显示的图像，计算采样像素的灰阶，实现帧率切换。但是，该方法与用户实际使用的交互少，用户体验感稍弱，且帧率切换判断过程需不断进行截图采样，存在占用内存空间的弊端。
[0009]综上所述，现有显示屏的帧率刷新模式以及现有报道的专利技术专利不能很好地平衡高刷新率带来的高功耗问题以及用户对类似游戏等需要高帧率刷新的体验需求，本专利技术提出一种自适应调整显示屏刷新率的方法，以解决用户的个性化需求和移动终端续航能力短的问题。

技术实现思路

[0010]本专利技术的目的是规避上述
技术介绍
中方法中的不足，提供一种自适应调整显示屏刷新率的方法。该方法能够在使用高刷新率显示功能的同时，结合用户即时的面部情绪，适时地切换显示屏的刷新帧率，降低设备功耗，延长设备的使用时长。
[0011]本法的技术方案：一种自适应调整显示屏刷新率的方法，包括以下步骤：
[0012](1)利用移动终端设备上的图像识别传感器，将用户面部图像进行识别，分析提炼出人物面部表情信息；
[0013](2)将面部表情识别结果传入帧率切换模块，设备对用户情绪进行归类分析；
[0014](3)若用户表情呈现出持续性的紧张、焦虑或兴奋，则判断用户正处于游戏等需要高刷新率的应用场景下，提高移动终端设备显示屏的刷新率；若用户呈现出平静表情，则判断当前用户使用场景仅需低刷新率，降低显示屏的刷新率。
[0015]在步骤(2)中使用训练好的表情识别模型对用户的面部图像进行分类，具体过程包括：
[0016](A)将用户面部图像输入图像识别传感器，提取用户面部特征，系统进一步处理提取到的面部特征，获取人脸特征，对每个人脸特征标注情绪标签；
[0017](B)将多个含有标签的人脸特征信息输入机器学习算法模型进行训练和测试，得到训练好的表情识别模型；
[0018](C)将当前获取的人脸特征输入训练好的模型得到面部表情识别结果。
[0019]将情绪标签分为紧张兴奋与悠闲安静两类状态。
[0020]步骤(3)中所述的高刷新率是显示屏刷新率为90Hz或120Hz或144Hz。
[0021]步骤(3)中所述的降低显示屏刷新率是降至60Hz。
[0022]步骤(1)中所述的面部特征包括全局特征、眼睛特征、鼻子特征以及嘴部特征。
[0023]另一种实现方式：将情绪标签分为安静和非安静两种，只提取识别眼睛特征和嘴部特征，在用户表情为非安静时提高屏幕刷新率。
[0024]进一步的，识别到用户需要高刷新率时，检测目前正在使用的应用程序，若确实为游戏界面或视频界面，则开启高刷新率模式，若设备没有进入游戏界面或视频界面，则选择继续使用低分辨率。
[0025]本专利技术的有益效果：提供了一种自适应调整显示屏刷新率的方法，该方法将表情识别结果利用移动终端设备上的图像识别传感器，将用户面部图像进行识别，分析提炼出人物面部表情信息。再将面部表情识别结果传入帧率切换模块，设备对用户情绪进行归类分析：若用户面部表情持续性识别为紧张兴奋状态，则判断用户正处于游戏等需要高刷新率的应用场景下，开启移动终端设备的高刷新率模式；若用户表情呈现出悠闲安静状态，则判断当前用户使用场景仅需低刷新率，切换帧率为低刷新率。
[0026]该专利技术通过算法识别当前用户的情绪是在比较“紧张焦虑兴奋”还是“悠闲安静”的状态，从而根据用户当前的面部表情推断出用户当前的使用场景，有针对性地调整显示屏的刷新率，从而降低功耗，提升产品续航能力。例如：如果当前用户神情紧张或兴奋，眼神集中聚焦在屏幕，那很可能是处于游戏或看视频场景，那就将显示屏刷新率提升到最大。如果当前用户神情放松，眼神也并没有一直聚焦在屏幕上，用户应该处于一个对显示屏刷新率要求不高的场景，那就将显示屏刷新率降低到60Hz。对于大多数普通用户使用场景基本
可以维持在60Hz，对于游戏、视频等场景切换到高刷新率(90Hz/120Hz/144Hz)，从而在提升用户体验的基础上又达到了降低功耗，提升续航能力的目的。
附图说明
[0027]图1人脸特征提取和面部表情识别流程图。
[0028]图2帧率切换的基础方案流程图。
[0029]图3帧率切换优化后方案流程图。
具体实施方式
[0030]实施例1：目前已知行业内显示屏刷新频率会设置固定60Hz和自适应切换的方案，自适应切换方案默认在最高刷新率(90Hz/120Hz/144Hz)，一段时间后显示屏没有更新时就切换到60Hz。该方案可以做到画面静止或待机时刷新率切换到最小值，保证功耗，但使用过程中显示屏有刷新时一直使用高刷新率，从而待机续航能力会降低很多。该切换方式本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种自适应调整显示屏刷新率的方法，其特征在于包括以下步骤：(1)利用移动终端设备上的图像识别传感器，将用户面部图像进行识别，分析提炼出人物面部表情信息；(2)将面部表情识别结果传入帧率切换模块，设备对用户情绪进行归类分析；(3)若用户表情呈现出持续性的紧张、焦虑或兴奋，则判断用户正处于游戏等需要高刷新率的应用场景下，提高移动终端设备显示屏的刷新率；若用户呈现出平静表情，则判断当前用户使用场景仅需低刷新率，降低显示屏的刷新率。2.根据权利要求1所述自适应调整显示屏刷新率的方法，其特征在于：在步骤(2)中使用训练好的表情识别模型对用户的面部图像进行分类，具体过程包括：(A)将用户面部图像输入图像识别传感器，提取用户面部特征，系统进一步处理提取到的面部特征，获取人脸特征，对每个人脸特征标注情绪标签；(B)将多个含有标签的人脸特征信息输入机器学习算法模型进行训练和测试，得到训练好的表情识别模型；(C)将当前获取的人脸特征输入训练好的模型得到面部表情识别结果。3.根据权利要求2所述自适应调...

【专利技术属性】
技术研发人员：陈诗雨，
申请(专利权)人：重庆邮电大学，
类型：发明
国别省市：