【技术实现步骤摘要】
使用IR和环境光的混合像素动态视觉传感器跟踪
[0001]本公开的各方面涉及游戏控制器跟踪,具体地,本公开的各方面涉及使用动态视觉传感器的游戏控制器跟踪。
技术介绍
[0002]现代虚拟现实(VR)和增强现实(AR)实施方式依赖于准确且快速的运动跟踪以用于与装置的用户交互。AR和VR通常依赖于关于控制器相对于其他对象的位置和取向的信息。许多VR和AR实施方式依赖于控制器内的加速度计或陀螺仪进行的惯性测量与外部相机为确定控制器的位置和取向而对控制器进行的视觉检测组合。
[0003]最早实施方式中的一些使用由指向屏幕的游戏控制器上的具有定义的检测半径的红外相机检测到的红外光。相机以每秒200帧的适度快的速率拍摄图像,并且红外光的位置得以确定。在红外光之间的距离是预定的,并且根据红外光在相机图像中的相对位置,可计算控制器相对于屏幕的位置。加速度计有时还用于提供关于控制器的位置或取向的相对三维变化的信息。这些先前实施方式依赖于屏幕和指向该屏幕的控制器的固定位置。在现代VR和AR实施方式中,屏幕可在随用户移动的头戴式显示器中放置得靠近用户的面部。因此,具有绝对光位置(也称为灯塔)变得不期望,因为用户必须设置独立灯塔点,这要求额外设置时间并限制用户的移动范围。另外,即使红外相机的呈每秒200帧的适度快的帧率也未快到足以为运动提供平滑反馈。此外,该简单设置本身不适合与更现代的由内而外检测方法(诸如房间映射和手部检测)一起使用。
[0004]最近实施方式使用相机和加速度计与被训练来检测手部、控制器和/或其他身体部分的 ...
【技术保护点】
【技术特征摘要】
1.一种跟踪系统,所述跟踪系统包括处理器;动态视觉传感器(DVS),所述DVS可操作地耦合到所述处理器,所述DVS具有呈已知配置的光敏元件阵列,其中所述动态视觉传感器被配置为响应于从相对于彼此和相对于控制器主体呈已知配置的两个或更多个光源输出的光的变化而在所述阵列中的两个或更多个对应光敏元件处输出对应于两个或更多个事件的信号,其中所输出的信号包括对应于所述两个或更多个事件的时间和所述两个或更多个对应光敏元件在所述阵列中的位置的信息;以及一个或多个滤波器,所述一个或多个滤波器被配置为选择性地将来自所述两个或更多个光源的光传输到所述阵列中的所述光敏元件中的一者或多者,以及选择性地阻挡其他光到达所述阵列中的所述光敏元件中的一者或多者,其中所述一个或多个滤波器还被配置为选择性地阻挡来自所述两个或更多个光源的光到达所述阵列中的所述光敏元件中的一者或多者,以及选择性地将所述其他光传输到所述阵列中的所述光敏元件中的一者或多者,其中所述处理器被配置为根据所述两个或更多个事件的所述时间、所述两个或更多个对应光敏元件在所述阵列中的所述位置、所述两个或更多个光源相对于彼此和相对于所述控制器主体的所述已知配置确定控制器的位置和取向,其中所述处理器还被配置为根据从到达两个或更多个光敏元件的其他光产生的由所述两个或更多个光敏元件生成的信号确定一个或多个对象的位置和取向。2.如权利要求1所述的跟踪系统,其中所述其他光是来自环境的环境光,并且由两个或更多个光敏元件生成的所述信号由所述阵列中的两个或更多个光敏元件生成。3.如权利要求1所述的跟踪系统,其中所述一个或多个滤波器包括在所述阵列中的所述光敏元件中的第一组一个或多个红外(IR)光敏元件上的IR通滤波器和在所述阵列中的所述光敏元件中的第二组一个或多个光敏元件上的红外截止滤波器。4.如权利要求1所述的跟踪系统,其中所述一个或多个滤波器被配置为选择性地将来自所述两个或更多个光源的光传输到所述阵列中的所述光敏元件中的一者或多者,以及选择性地阻挡其他光到达所述阵列中的所述光敏元件中的所述一者或多者,其中所述一个或多个滤波器还被配置为选择性地阻挡来自所述两个或更多个光源的光到达所述阵列中的所述光敏元件中的不同的一者或多者,以及选择性地将所述其他光传输到所述阵列中的所述光敏元件中的所述不同的一者或多者。5.如权利要求1所述的跟踪系统,其中所述一个或多个滤波器被配置为选择性地将来自所述两个或更多个光源的光传输到所述阵列中的所述光敏元件中的一者或多者,以及选择性地在某些时间阻挡其他光到达所述阵列中的所述光敏元件中的所述一者或多者,并且其中所述一个或多个滤波器还被配置为选择性地阻挡来自所述两个或更多个光源的光到达所述阵列中的所述光敏元件中的不同的一者或多者,以及选择性地在其他时间将所述其他光传输到所述阵列中的所述光敏元件中的所述不同的一者或多者。6.如权利要求1所述的跟踪系统,其中所述一个或多个对象包括控制器。7.如权利要求6所述的跟踪系统,其中所述一个或多个对象包括除所述控制器外的对象。8.如权利要求...
【专利技术属性】
技术研发人员:X,
申请(专利权)人:索尼互动娱乐股份有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。