【技术实现步骤摘要】
本专利技术涉及图像处理领域，尤其涉及一种mr装置及消除mr装置图像闪烁的方法。
技术介绍
1、现有市场上的混合现实(mr，mixed reality)产品的gpu渲染刷新率，显示刷新率，摄像传感器刷新率与曝光时间的设定是依据多项用户体验指标和软硬件性能限制制定的，但是其中并未考虑环境光变化频率和所拍摄物体亮度变化频率的影响。所以在不同的环境光闪烁频率条件下，现有mr产品的显示、摄像、渲染参数不会得到妥善的设置以避免肉眼可见的闪烁。这是由于市场现有产品普遍还未提供高性能的混合现实或透视功能，并且显示和摄像刷新率普遍并未超过市电频率的倍频。所以环境光闪烁引发图像闪烁的问题并未得到足够重视。在下一代高性能混合现实产品中，随着对显示图像、用户体验要求的逐渐增强，这一问题必须得到妥善解决。
技术实现思路
1、以下给出一个或多个方面的简要概述以提供对这些方面的基本理解。此概述不是所有构想到的方面的详尽综览，并且既非旨在指认出所有方面的关键性或决定性要素亦非试图界定任何或所有方面的范围。其唯一的目的是要以简化形式给出一个或多个方面的一些概念以为稍后给出的更加详细的描述之序。
2、为了解决环境光闪烁引发图像闪烁的问题，可以通过调整摄像模块的相关拍摄参数来匹配环境光闪烁，从而避免了环境光闪烁所引发的图像闪烁问题。然而，由于mr装置不仅仅包括摄像模块，还包括显示模块等。虽然改变摄像模块的相关拍摄参数能够在生成原始图像时克服画面闪烁的问题，但却因此引起了摄像模块与显示模块之间的工作频率不适配
3、为了既解决现有技术中，在vr、ar或mr产品中，由于没有考虑环境光闪烁而引发的图像闪烁问题，同时解决为了解决环境光闪烁问题却引发的摄像、渲染、显示频率混频所造成的显示图像闪烁或不稳定的次生问题，本专利技术提供了一种mr装置及消除mr装置图像闪烁的方法。
4、本专利技术的一方面所提供的mr装置至少包括摄像模块和显示模块，本专利技术的另一方面所提供的消除mr装置图像闪烁的方法包括：响应于存在触发人眼感知的环境光闪烁，确定所述环境光闪烁的闪烁频率；根据所述mr装置的工作状态判断所述显示模块是否存在特定工作频率；响应于仅存在单一的闪烁频率，且存在大于所述闪烁频率的所述特定工作频率，始终保持所述摄像模块的目标拍摄频率不大于所述闪烁频率；基于所述摄像模块以所述目标拍摄频率获取的原始图像，生成对应所述特定工作频率的中间图像；以及控制所述显示模块以所述特定工作频率显示基于所述中间图像获得的目标图像。
5、在上述方法的一实施例中，可选的，基于所述摄像模块以所述目标拍摄频率获取的原始图像，生成对应所述特定工作频率的中间图像进一步包括：在对应于所述特定工作频率的目标时刻，基于所述目标时刻前后的两帧原始图像生成所述目标时刻的中间图像。
6、在上述方法的一实施例中，可选的，基于所述摄像模块以所述目标拍摄频率获取的原始图像，生成对应所述特定工作频率的中间图像进一步包括：在对应于所述特定工作频率的目标时刻，基于所述目标时刻之前的预定帧数的原始图像的变化规律，基于所述目标时间的前一帧原始图像预测所述目标时刻的中间图像。
7、在上述方法的一实施例中，可选的，基于所述摄像模块以所述目标拍摄频率获取的原始图像，生成对应所述特定工作频率的中间图像进一步包括：根据所述mr装置的定位传感器获取用户的视野移动数据；以及在对应于所述特定工作频率的目标时刻，基于所述视野移动数据对所述目标时间的前一帧原始图像进行平移、伸缩、扭曲处理中的至少一者，以生成所述目标时刻的中间图像。
8、在上述方法的一实施例中，可选的，始终保持所述摄像模块的目标拍摄频率不大于所述闪烁频率进一步包括：始终保持所述摄像模块的目标拍摄频率为所述闪烁频率。
9、在上述方法的一实施例中，可选的，始终保持所述摄像模块的目标拍摄频率不大于所述闪烁频率进一步包括：始终保持所述摄像模块的目标拍摄频率小于所述闪烁频率，且调整所述摄像模块的目标拍摄频率以使所述特定工作频率为所述目标拍摄频率的倍频。
10、在上述方法的一实施例中，可选的，响应于所述目标拍摄频率小于所述闪烁频率，调整所述摄像模块的曝光时间与所述环境光闪烁的闪烁周期匹配。
11、在上述方法的一实施例中，可选的，所述mr装置还包括渲染模块，所述方法还包括：判断所述渲染模块是否存在特定渲染频率；其中响应于所述渲染模块存在特定渲染频率，且所述特定渲染频率与所述特定工作频率不匹配，控制所述渲染模块以所述特定渲染频率生成渲染图像，基于所述特定渲染频率的渲染图像生成对应所述特定工作频率的中间渲染图像，所述目标图像还基于所述中间渲染图像获得；或者响应于所述渲染模块不存在特定渲染频率，控制所述渲染模块以所述特定工作频率生成渲染图像，所述目标图像还基于所述中间渲染图像获得。
12、在上述方法的一实施例中，可选的，根据所述mr装置的工作状态判断所述显示模块是否存在特定工作频率进一步包括：根据所述mr装置的工作模式、所述显示模块的显示内容判断所述显示模块是否存在特定工作频率；其中响应于所述mr装置处于节能模式，所述显示模块存在小于第一预设阈值的特定工作频率；响应于所述mr装置处于高性能模式，所述显示模块存在大于第二预设阈值的特定工作频率；响应于所述显示模块的显示内容包括特定频率的视频源，所述显示模块的闪烁频率为所述视频源的特定频率的倍频。
13、本专利技术的另一方面还提供了一种mr装置，所述mr装置至少包括摄像模块和显示模块，其中，所述mr装置还包括至少一个处理器；以及与所述至少一个处理器耦合的存储器，所述存储器包含有存储于其中的指令，所述指令在被所述至少一个处理器执行时，使得所述mr装置执行如上文任意一项实施例所描述的消除mr装置图像闪烁的方法。
14、本专利技术的另一方面还提供了一种计算机可读存储介质，其上存储有计算机程序，其中，所述计算机程序被处理器执行时实现如上文任意一项实施例所描述的消除mr装置图像闪烁的方法。
15、根据本专利技术所提供的mr装置及消除mr装置图像闪烁的方法，能够通过调整摄像模块的拍摄参数，并基于摄像模块的原始图像生成中间图像来解决环境光亮度变化和摄像、渲染、显示频率混频所造成的屏幕闪烁或不稳定的问题。本专利技术提供了摄像、显示设备采用任意刷新率的方案，一方面能够动态适应环境光变化，另一方面为提高显示设备的刷新率提供了可能，即为混合现实性能进一步提升发展奠定了基础。
本文档来自技高网...【技术保护点】
1.一种消除MR装置图像闪烁的方法，所述MR装置至少包括摄像模块和显示模块，其特征在于，所述方法包括：
2.如权利要求1所述的方法，其特征在于，基于所述摄像模块以所述目标拍摄频率获取的原始图像，生成对应所述特定工作频率的中间图像进一步包括：
3.如权利要求1所述的方法，其特征在于，基于所述摄像模块以所述目标拍摄频率获取的原始图像，生成对应所述特定工作频率的中间图像进一步包括：
4.如权利要求1所述的方法，其特征在于，基于所述摄像模块以所述目标拍摄频率获取的原始图像，生成对应所述特定工作频率的中间图像进一步包括：
5.如权利要求1-4中任意一项所述的方法，其特征在于，始终保持所述摄像模块的目标拍摄频率不大于所述闪烁频率进一步包括：
6.如权利要求1-4中任意一项所述的方法，其特征在于，始终保持所述摄像模块的目标拍摄频率不大于所述闪烁频率进一步包括：
7.如权利要求6所述的方法，其特征在于，响应于所述目标拍摄频率小于所述闪烁频率，调整所述摄像模块的曝光时间与所述环境光闪烁的闪烁周期匹配。
8.如权利要
9.如权利要求1-4中任意一项所述的方法，其特征在于，根据所述MR装置的工作状态判断所述显示模块是否存在特定工作频率进一步包括：
10.一种MR装置，所述MR装置至少包括摄像模块和显示模块，其特征在于，所述MR装置还包括至少一个处理器；以及
11.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-9中任一项所述的消除MR装置图像闪烁的方法。
...【技术特征摘要】
1.一种消除mr装置图像闪烁的方法，所述mr装置至少包括摄像模块和显示模块，其特征在于，所述方法包括：
2.如权利要求1所述的方法，其特征在于，基于所述摄像模块以所述目标拍摄频率获取的原始图像，生成对应所述特定工作频率的中间图像进一步包括：
3.如权利要求1所述的方法，其特征在于，基于所述摄像模块以所述目标拍摄频率获取的原始图像，生成对应所述特定工作频率的中间图像进一步包括：
4.如权利要求1所述的方法，其特征在于，基于所述摄像模块以所述目标拍摄频率获取的原始图像，生成对应所述特定工作频率的中间图像进一步包括：
5.如权利要求1-4中任意一项所述的方法，其特征在于，始终保持所述摄像模块的目标拍摄频率不大于所述闪烁频率进一步包括：
6.如权利要求1-4中任意一项所述的方法，其特征在于，始终保...
【专利技术属性】
技术研发人员：乐城瑞，张睿，王超昊，
申请(专利权)人：万有引力宁波电子科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。