【技术实现步骤摘要】
本专利技术涉及图像处理领域，尤其涉及一种mr装置及消除mr装置图像闪烁的方法。
技术介绍
1、现有市场上的混合现实(mr，mixed reality)产品的gpu渲染刷新率，显示刷新率，摄像传感器刷新率与曝光时间的设定是依据多项用户体验指标和软硬件性能限制制定的，但是其中并未考虑环境光变化频率和所拍摄物体亮度变化频率的影响。所以在不同的环境光闪烁频率条件下，现有mr产品的显示、摄像、渲染参数不会得到妥善的设置以避免肉眼可见的闪烁。这是由于市场现有产品普遍还未提供高性能的混合现实或透视功能，并且显示和摄像刷新率普遍并未超过市电频率的倍频。所以环境光闪烁引发图像闪烁的问题并未得到足够重视。在下一代高性能混合现实产品中，随着对显示图像、用户体验要求的逐渐增强，这一问题必须得到妥善解决。
技术实现思路
1、以下给出一个或多个方面的简要概述以提供对这些方面的基本理解。此概述不是所有构想到的方面的详尽综览，并且既非旨在指认出所有方面的关键性或决定性要素亦非试图界定任何或所有方面的范围。其唯一的目的是要以简化形式给出一个或多个方面的一些概念以为稍后给出的更加详细的描述之序。
2、为了解决mr产品中的环境光闪烁引起的图像闪烁问题，本专利技术提供了一种mr装置以及消除mr装置图像闪烁的方法。
3、本专利技术的一方面所提供的mr装置至少包括摄像模块和显示模块，本专利技术的另一方面所提供的消除mr装置图像闪烁的方法包括：响应于存在触发人眼感知的环境光闪烁，确定所述环境光闪烁的闪烁
4、mr装置的显示模块的工作频率关联于用户最终的观赏体验，若mr装置的显示模块存在特定工作频率，在本专利技术中，通过控制显示模块始终工作在该特定工作频率，以保证用户的观赏体验，另一方面，为了消除环境光闪烁引起的显示画面闪烁问题，本专利技术至少先调整摄像模块的目标拍摄频率，以消除环境光闪烁引起的显示画面的闪烁。
5、在上述方法的一实施例中，可选的，根据所述闪烁频率和所述特定工作频率至少动态调整所述摄像模块的目标拍摄频率进一步包括：始终保持所述摄像模块的目标拍摄频率为所述特定工作频率；以及根据所述闪烁频率和所述特定工作频率动态调整所述摄像模块的曝光时间或对所述原始图像进行亮度补偿。
6、根据上述实施例，由于最终显示的目标图像的源头是摄像模块获取的原始图像，若保证摄像模块和显示模块处于同一工作频率，则不会引起画面的缺失和突变，在该实施例中，由于特定工作频率与闪烁频率不匹配，通过调整所述摄像模块的曝光时间或对所述原始图像进行亮度补偿来进一步消除由于环境光闪烁引起的画面闪烁问题。从而能够在保证画面连贯的情况下消除画面闪烁，提高用户观感。
7、在上述方法的一实施例中，可选的，根据所述闪烁频率和所述特定工作频率动态调整所述摄像模块的曝光时间或对所述原始图像进行亮度补偿进一步包括：响应于所述特定工作频率小于所述闪烁频率，调整所述摄像模块的曝光时间；或者响应于所述特定工作频率大于所述闪烁频率，和/或，响应于存在多个闪烁频率，对所述原始图像进行亮度补偿；其中所述目标图像基于亮度补偿后的原始图像获得。
8、在上述方法的一实施例中，可选的，调整所述摄像模块的曝光时间与所述环境光闪烁的闪烁周期匹配。
9、在上述方法的一实施例中，可选的，对所述原始图像进行亮度补偿进一步包括：对当前原始图像之前预设数量的多张历史原始图像，分别获取各所述历史原始图像的各个像素点亮度值或局部区域的区域平均亮度值；以及基于所述多张历史原始图像的像素点亮度值或区域平均亮度值对所述当前原始图像进行亮度补偿。
10、在上述方法的一实施例中，可选的，分别获取各所述历史原始图像的各个像素点亮度值或局部区域的区域平均亮度值进一步包括：获取各所述历史原始图像的各个像素点或局部区域基于各个色彩通道的像素点色度亮度值或区域平均色度亮度值；其中基于所述多张历史原始图像的像素点亮度值或区域平均亮度值对所述当前原始图像进行亮度补偿进一步包括：对于所述当前原始图像的各个色彩通道，基于所述多张所述历史原始图像对应的色彩通道的像素点色度亮度值或区域平均色度亮度值进行亮度补偿。
11、根据上述实施例，在对原始图像进行亮度补偿以消除环境光闪烁所引起的画面闪烁时，还进一步地调整色度亮度值，从而能够不仅考虑到画面亮度，还对亮度变化引起的色彩变化进行了补偿，使得最终呈现的连续画面之间的差异更小，以消除闪烁。
12、在上述方法的一实施例中，可选的，对所述原始图像进行亮度补偿还包括：基于所述多张历史原始图像的区域平均亮度值确定所述当前原始图像中的闪烁区域；其中基于所述多张历史原始图像的区域平均亮度值对所述当前原始图像进行亮度补偿进一步包括：对于所述当前原始图像的所述闪烁区域，基于多张所述历史原始图像的闪烁区域的多个所述区域平均亮度值进行亮度补偿。
13、根据上述实施例，响应于整个画面中仅存在部分区域是闪烁的，本实施例通过对局部区域进行亮度调整，能够有效地降低进行亮度补偿所需要的数据处理量，从而能够减低处理器的工作量，降低功耗。
14、在上述方法的一实施例中，可选的，根据所述闪烁频率和所述特定工作频率至少动态调整所述摄像模块的目标拍摄频率进一步包括：响应于仅存在单一且小于所述特定工作频率的闪烁频率，始终保持所述摄像模块的目标拍摄频率不大于所述闪烁频率；以及基于所述摄像模块以所述目标拍摄频率获取的原始图像，生成对应所述特定工作频率的中间图像；其中所述目标图像基于所述中间图像获得。
15、根据上述实施例，通过使摄像模块的目标拍摄频率不大于闪烁频率，能够消除目标拍摄频率与环境光闪烁频率之间的频差，从而在源头上消除了画面闪烁的问题，但由于摄像频率与显示频率之间不匹配，导致了用户最终看到的画面还是闪烁的、跳跃或缺失的，因此，在该实施例中，通过生成中间图像的方式，能够克服画面闪烁的问题的同时克服拍摄频率与最终显示频率不匹配的问题。
16、在上述方法的一实施例中，可选的，所述mr装置还包括渲染模块，所述方法还包括：判断所述渲染模块是否存在特定渲染频率；其中响应于所述渲染模块存在特定渲染频率，且所述特定渲染频率与所述特定工作频率不匹配，控制所述渲染模块以所述特定渲染频率生成渲染图像，基于所述特定渲染频率的渲染图像生成对应所述特定工作频率的中间渲染图像，所述目标图像还基于所述中间渲染图像获得；或者响应于所述渲染模块不存在特定渲染频率，控制所述渲染模块以所述特定工作频率生成渲染图像，所述目标图像还基于所述中间渲染图像获得。
17、进一步的，在本专利技术中，可以综本文档来自技高网...
【技术保护点】
1.一种消除MR装置图像闪烁的方法，所述MR装置至少包括摄像模块和显示模块，其特征在于，所述方法包括：
2.如权利要求1所述的方法，其特征在于，根据所述闪烁频率和所述特定工作频率至少动态调整所述摄像模块的目标拍摄频率进一步包括：
3.如权利要求2所述的方法，其特征在于，根据所述闪烁频率和所述特定工作频率动态调整所述摄像模块的曝光时间或对所述原始图像进行亮度补偿进一步包括：
4.如权利要求3所述的方法，其特征在于，调整所述摄像模块的曝光时间与所述环境光闪烁的闪烁周期匹配。
5.如权利要求3所述的方法，其特征在于，对所述原始图像进行亮度补偿进一步包括：
6.如权利要求5所述的方法，其特征在于，分别获取各所述历史原始图像的各个像素点亮度值或局部区域的区域平均亮度值进一步包括：
7.如权利要求5所述的方法，其特征在于，对所述原始图像进行亮度补偿还包括：
8.如权利要求1所述的方法，其特征在于，根据所述闪烁频率和所述特定工作频率至少动态调整所述摄像模块的目标拍摄频率进一步包括：
9.如权利要求1
10.如权利要求1-8中任意一项所述的方法，其特征在于，响应于仅存在单一的闪烁频率且所述显示模块不存在特定工作频率，始终保持所述摄像模块的目标拍摄频率为所述闪烁频率，并控制所述显示模块以所述闪烁频率显示所述目标图像。
11.如权利要求1-8中任意一项所述的方法，其特征在于，根据所述MR装置的工作状态判断所述显示模块是否存在特定工作频率进一步包括：
12.一种MR装置，所述MR装置至少包括摄像模块和显示模块，其特征在于，所述MR装置还包括至少一个处理器；以及
13.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-11中任一项所述的消除MR装置图像闪烁的方法。
...【技术特征摘要】
1.一种消除mr装置图像闪烁的方法，所述mr装置至少包括摄像模块和显示模块，其特征在于，所述方法包括：
2.如权利要求1所述的方法，其特征在于，根据所述闪烁频率和所述特定工作频率至少动态调整所述摄像模块的目标拍摄频率进一步包括：
3.如权利要求2所述的方法，其特征在于，根据所述闪烁频率和所述特定工作频率动态调整所述摄像模块的曝光时间或对所述原始图像进行亮度补偿进一步包括：
4.如权利要求3所述的方法，其特征在于，调整所述摄像模块的曝光时间与所述环境光闪烁的闪烁周期匹配。
5.如权利要求3所述的方法，其特征在于，对所述原始图像进行亮度补偿进一步包括：
6.如权利要求5所述的方法，其特征在于，分别获取各所述历史原始图像的各个像素点亮度值或局部区域的区域平均亮度值进一步包括：
7.如权利要求5所述的方法，其特征在于，对所述原始图像进行亮度补偿还包括：
8.如权利要求1所述的方法，其特...
【专利技术属性】
技术研发人员：乐城瑞，张睿，王爽，王超昊，
申请(专利权)人：万有引力宁波电子科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。