用于高效生成具有余辉的单光子雪崩二极管图像的系统和方法技术方案

一种用于高效地生成具有余辉的

【技术实现步骤摘要】
【国外来华专利技术】用于高效生成具有余辉的单光子雪崩二极管图像的系统和方法

技术介绍

[0001]混合现实
(MR)
系统，包括虚拟现实和增强现实系统，因其能够为其用户创造真正独特的体验而受到广泛关注
。
作为参考，常规的虚拟现实
(VR)
系统通过将其用户的视野限制到仅虚拟环境来创建完全沉浸式体验
。
在
VR
系统中，这常常是通过使用完全遮挡现实世界的任何视图的头戴式设备
(HMD)
来实现的
。
结果，用户完全沉浸在虚拟环境内
。
相比之下，常规的增强现实
(AR)
系统通过视觉地呈现被放置在现实世界中或者与现实世界交互的虚拟对象来创建增强现实体验
。
[0002]如在本文中所使用的，
VR
和
AR
系统被可互换地描述和引用
。
除非另有说明，否则在本文中的描述同样适用于所有类型的混合现实系统，其
(
如上文所详述的
)
包括
AR...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.
一种用于高效地生成具有余辉的单光子雪崩二极管
(SPAD)
图像的系统，所述系统包括：
SPAD
阵列，其包括多个
SPAD
像素；惯性测量单元
(IMU)
，其被配置为捕获姿态数据；一个或多个处理器；以及一个或多个硬件存储设备，其存储指令，所述指令能由所述一个或多个处理器执行以通过将所述系统配置为用于以下操作来将所述系统配置为高效地生成具有余辉的
SPAD
图像：使用所述
SPAD
阵列来捕获图像帧；使用所述
IMU
来捕获与对所述图像帧的捕获相关联的姿态数据；访问余辉帧，所述余辉帧包括基于至少两个先前图像帧生成的先前合成图像帧，所述至少两个先前图像帧和在与所述图像帧相关联的捕获时间点之前的时间点相关联；基于
(i)
与对所述图像帧的捕获相关联的所述姿态数据
、(ii)
基于所述图像帧和所述余辉帧的相似性比较或者
(iii)
与所述图像帧相关联的信号强度来生成余辉项；以及基于所述图像帧
、
所述余辉帧和所述余辉项来生成合成图像，其中，所述余辉项定义所述图像帧和所述余辉帧对所述合成图像的贡献
。2.
根据权利要求1所述的系统，其中，所述系统还包括显示器，并且其中，所述指令能由所述一个或多个处理器执行以将所述系统进一步配置为在所述显示器上显示所述合成图像
。3.
根据权利要求1所述的系统，其中：所述余辉项是基于表示与对所述图像帧的捕获相关联的运动量的姿态数据的，并且所述余辉项导致所述余辉帧针对与对所述图像帧的捕获相关联的较高的运动量的贡献减少
。4.
根据权利要求1所述的系统，其中，所述指令能由所述一个或多个处理器执行以将所述系统进一步配置为：通过使用姿态数据将所述余辉帧与所述图像帧空间对准来生成空间对准的图像帧和空间对准的余辉帧，并且其中，所述合成图像是基于所述空间对准的图像帧和所述空间对准的余辉帧的
。5.
根据权利要求4所述的系统，其中，所述余辉项是基于相似性比较的，所述相似性比较基于所述图像帧和所述余辉帧，并且其中，所述指令能由所述一个或多个处理器执行以将所述系统进一步配置为：测量在所述空间对准的图像帧与所述空间对准的余辉帧之间的相似性；以及响应于检测到在所述空间对准的图像帧与所述空间对准的余辉帧之间的至少相异区域，生成或者修改所述余辉项，以使得所述余辉项针对至少所述相异区域而定义所述空间对准的余辉帧对所述合...

【专利技术属性】
技术研发人员：R，
申请(专利权)人：微软技术许可有限责任公司，
类型：发明
国别省市：