数据处理方法技术

本申请公开了一种数据处理方法

【技术实现步骤摘要】
数据处理方法、装置、电子设备、头戴设备及介质


[0001]本申请属于混合现实
，尤其涉及一种数据处理方法
、
装置
、
电子设备
、
头戴设备及介质
。

技术介绍

[0002]虚拟现实技术
VR
囊括计算机
、
电子信息
、
仿真技术，其基本实现方式是计算机模拟虚拟环境从而给人以环境沉浸感；混合现实技术
MR
是虚拟现实技术的进一步发展，该技术通过在现实场景呈现虚拟场景信息，在现实世界
、
虚拟世界和用户之间搭起一交互反馈的信息回路，以增强用户体验的真实感
。
目前主流的
MR
头戴式一体机在低光环境下为用户提供的显示内容的质量较差；并且通过在
MR
头戴式一体机上设置多个黑白相机采集环境图像以实现透视功能，用户体验较差
。

技术实现思路

[0003]本申请实施例提供一种与现有技术不同的实现方案，以解决相关技术中，混合现实技术的画面显示方法用户体验较差的技术问题
。
[0004]第一方面，本申请提供一种数据处理方法，适用于头戴设备，包括：
[0005]通过多个第一相机获取第一黑白图像；
[0006]通过目标相机获取与所述第一黑白图像对应的彩色图像；
[0007]获取所述多个第一相机中的任一第一相机，与所述目标相机之间的第一位置关系信息；
[0008]根据所述第一黑白图像
、
所述彩色图像，以及所述第一位置关系信息确定对应的第一现实环境图像；
[0009]获取所述第一黑白图像对应的虚拟现实画面信息；
[0010]根据所述第一现实环境图像与所述虚拟现实画面信息确定所述头戴设备的显示内容；
[0011]其中，所述目标相机的视场范围不小于所述多个第一相机对应的多个视场范围的交集
。
[0012]第二方面，本申请提供一种头戴设备，包括：数据处理单元与壳体，所述壳体的外侧设置有多个第一相机与目标相机，所述壳体的外侧为用户佩戴所述头戴设备时朝向用户前方的一侧；
[0013]所述多个第一相机两两对称设置于所述壳体的中心轴两侧；
[0014]所述目标相机设置于所述中心轴上，所述目标相机的视场范围不小于所述多个第一相机对应的多个视场范围的交集；
[0015]所述数据处理单元，用于：通过多个第一相机获取第一黑白图像；通过目标相机获取与所述第一黑白图像对应的彩色图像；获取所述多个第一相机中的任一第一相机，与所述目标相机之间的第一位置关系信息；根据所述第一黑白图像
、
所述彩色图像，以及所述第
一位置关系信息确定对应的第一现实环境图像；获取所述第一黑白图像对应的虚拟现实画面信息；根据所述第一现实环境图像与所述虚拟现实画面信息确定所述头戴设备的显示内容
。
[0016]第三方面，本申请提供一种数据处理装置，其特征在于，适用于头戴设备，包括：
[0017]第一获取模块，用于通过多个第一相机获取第一黑白图像；
[0018]第二获取模块，用于通过目标相机获取与所述第一黑白图像对应的彩色图像；
[0019]第三获取模块，用于获取所述多个第一相机中的任一第一相机，与所述目标相机之间的第一位置关系信息；
[0020]第一确定模块，用于根据所述第一黑白图像
、
所述彩色图像，以及所述多第一位置关系信息确定对应的第一现实环境图像；
[0021]第四获取模块，用于获取所述第一黑白图像对应的虚拟现实画面信息；
[0022]第二确定模块，用于根据所述第一现实环境图像与所述虚拟现实画面信息确定所述头戴设备的显示内容；
[0023]其中，所述目标相机的视场范围不小于所述多个第一相机对应的多个视场范围的交集
。
[0024]第四方面，本申请提供一种电子设备，包括：
[0025]处理器；以及
[0026]存储器，用于存储所述处理器的可执行指令；
[0027]其中，所述处理器配置为经由执行所述可执行指令来执行第一方面或第一方面各可能的实施方式中的任一方法
。
[0028]第五方面，本申请实施例提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现第一方面或第一方面各可能的实施方式中的任一方法
。
[0029]第六方面，本申请实施例提供一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现第一方面或第一方面各可能的实施方式中的任一方法
。
[0030]本申请通过通过多个第一相机获取第一黑白图像；通过目标相机获取与所述第一黑白图像对应的彩色图像；获取所述多个第一相机中的任一第一相机，与所述目标相机之间的第一位置关系信息；根据所述第一黑白图像
、
所述彩色图像，以及所述第一位置关系信息确定对应的第一现实环境图像；获取所述第一黑白图像对应的虚拟现实画面信息；根据所述第一现实环境图像与所述虚拟现实画面信息确定所述头戴设备的显示内容；其中，所述目标相机的视场范围不小于所述多个第一相机对应的多个视场范围的交集的方案，可结合设置于头戴设备的彩色相机对黑白环境图像进行处理，进而将虚拟场景信息与彩色现实场景信息结合展示，提高了用户体验
。
附图说明
[0031]为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图
。
在附图中：
[0032]图1为本申请一实施例提供的头戴式一体机的外观示意图；
[0033]图
2a
为本申请一实施例提供的数据处理方法的流程示意图；
[0034]图
2b
为本申请一实施例提供的头戴设备侧的以其中心为原点的坐标系的示意图；
[0035]图
2c
为本申请一实施例提供的头戴设备侧的虚拟现实画面信息展示方法；
[0036]图3为本申请实施例提供的一种数据处理装置的结构示意图；
[0037]图4为本申请实施例提供的一种电子设备的结构示意图
。
具体实施方式
[0038]下面详细描述本申请的实施例，所述实施例的示例在附图中示出
。
下面通过参考附图描述的实施例是示例性的，旨在用于解释本申请，而不能理解为对本申请的限制
。
[0039]本申请实施例的说明书
、
权利要求书及附图中的术语“第一”和“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序
。
应该理解这样使用的数据在适当情况下可以互本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种数据处理方法，其特征在于，适用于头戴设备，包括：通过多个第一相机获取第一黑白图像；通过目标相机获取与所述第一黑白图像对应的彩色图像；获取所述多个第一相机中的任一第一相机，与所述目标相机之间的第一位置关系信息；根据所述第一黑白图像
、
所述彩色图像，以及所述第一位置关系信息确定对应的第一现实环境图像；获取所述第一黑白图像对应的虚拟现实画面信息；根据所述第一现实环境图像与所述虚拟现实画面信息确定所述头戴设备的显示内容；其中，所述目标相机的视场范围不小于所述多个第一相机对应的多个视场范围的交集
。2.
根据权利要求1所述的方法，其特征在于，根据所述第一黑白图像
、
所述彩色图像，以及所述第一位置关系信息确定对应的第一现实环境图像包括：根据所述第一黑白图像确定对应的第一点云信息，所述第一点云信息为相对任一第一相机的相机坐标系的点云信息；根据所述第一点云信息与所述第一位置关系信息确定与所述第一点云信息对应的，相对所述目标相机的第二点云信息；利用所述第二点云信息
、
所述彩色图像，确定包含有色彩信息的第三点云信息；基于所述第三点云信息确定所述第一现实环境图像
。3.
根据权利要求2所述的方法，其特征在于，基于所述第三点云信息确定所述第一现实环境图像包括：根据所述第三点云信息与第二位置关系信息，确定与所述第三点云信息对应的，相对世界坐标系的第四点云信息，所述第二位置关系信息为所述目标相机的相机坐标系与世界坐标系之间的坐标系转换关系信息；利用所述第四点云信息与第三位置关系信息确定左眼彩色图像与右眼彩色图像，所述第三位置关系信息为左眼对应的相机坐标系与世界坐标系之间的关系，以及右眼对应的相机坐标系与世界坐标系之间的关系；基于所述左眼彩色图像与所述右眼彩色图像确定所述第一现实环境图像
。4.
根据权利要求2所述的方法，其特征在于，所述方法还包括：通过第二相机获取第二黑白图像；根据所述第一黑白图像与所述第二黑白图像确定第二现实环境图像；基于所述第二现实环境图像确定所述虚拟现实画面信息
。5.
根据权利要求4所述的方法，其特征在于，所述第二相机的个数为多个，所述方法还包括：当检测到所述多个第一相机与多个第二相机中任一个或多个相机的曝光参数数值小于预设阈值时，控制开启补光装置
。6.
根据权利要求4所述的方法，其特征在于，所述方法还包括：通过第三相机获取用户的面部图像；根据所述面部图像展示对应的用户形象
。
7.
一种头戴设备，其特征在于，包括：数据处理单元与壳体，所述壳体的外侧设置有多个第一相机与目标相机，所述壳体的外侧为用户佩戴所述头戴设备时朝向用户前方的一侧；所述多个第一相机两两对称设置于所述壳体的中心轴两侧；所述目标相机设置于所述中心轴上...

【专利技术属性】
技术研发人员：吴涛，周宏伟，
申请(专利权)人：北京字跳网络技术有限公司，
类型：发明
国别省市：