异步动态视觉传感器LED AI跟踪系统和方法技术方案

技术编号:43980077 阅读:12 留言:0更新日期:2025-01-10 20:05
一种跟踪系统使用动态视觉传感器(DVS),所述动态视觉传感器(DVS)可操作地耦合到处理器。所述DVS具有呈已知配置的光敏元件阵列。所述DVS输出对应于在所述阵列中的两个或更多个对应光敏元件处响应于从以相对于彼此和相对于控制器的已知配置安装的两个或更多个光源输出的光的变化的两个或更多个事件的信号。所述输出的信号指示所述事件的时间和所述对应光敏元件的位置。所述处理器确定在每个事件与两个或更多个对应光源之间的关联并使用所述确定的关联、所述光源的所述已知配置以及所述阵列中的所述对应光敏元件的所述位置来拟合所述控制器的位置和取向。

【技术实现步骤摘要】
【国外来华专利技术】

本公开的各方面涉及游戏控制器跟踪,具体地,本公开的各方面涉及使用动态视觉传感器的游戏控制器跟踪。


技术介绍

1、现代虚拟现实(vr)和增强现实(ar)实施方式依赖于准确且快速的运动跟踪以用于与装置的用户交互。ar和vr通常依赖于关于控制器相对于其他对象的位置和取向的信息。许多vr和ar实施方式依赖于控制器内的加速度计或陀螺仪进行的惯性测量与外部相机为确定控制器的位置和取向而对控制器进行的视觉检测组合。

2、最早实施方式中的一些使用由指向屏幕的游戏控制器上的具有定义的检测半径的红外相机检测到的红外光。相机以每秒200帧的适度快的速率拍摄图像,并且红外光的位置得以确定。在红外光之间的距离是预定的,并且根据红外光在相机图像中的相对位置,可计算控制器相对于屏幕的位置。加速度计有时还用于提供关于控制器的位置或取向的相对三维变化的信息。这些先前实施方式依赖于屏幕和指向该屏幕的控制器的固定位置。在现代vr和ar实施方式中,屏幕可在随用户移动的头戴式显示器中放置得靠近用户的面部。因此,具有绝对光位置(也称为灯塔)变得不期望,因为用户必须设置独立灯塔点,这要求额本文档来自技高网...

【技术保护点】

1.一种跟踪系统,包括

2.如权利要求1所述的跟踪系统,其中拟合所述控制器的位置和取向包括使用被训练来将至少所述两个或更多个事件拟合到所述控制器的位置和取向的机器学习模型。

3.如权利要求2所述的跟踪系统,其中所述机器学习模型是使用人工训练数据来训练的,其中所述人工训练数据包括具有对应掩蔽控制器位置和取向的至少两个或更多个事件。

4.如权利要求3所述的跟踪系统,其中噪声被添加到所述人工训练数据。

5.如权利要求2所述的跟踪系统,其中所述机器学习模型是根据实时控制器跟踪和掩蔽控制器位置和取向信息来训练的。

6.如权利要求2所述的跟...

【技术特征摘要】
【国外来华专利技术】

1.一种跟踪系统,包括

2.如权利要求1所述的跟踪系统,其中拟合所述控制器的位置和取向包括使用被训练来将至少所述两个或更多个事件拟合到所述控制器的位置和取向的机器学习模型。

3.如权利要求2所述的跟踪系统,其中所述机器学习模型是使用人工训练数据来训练的,其中所述人工训练数据包括具有对应掩蔽控制器位置和取向的至少两个或更多个事件。

4.如权利要求3所述的跟踪系统,其中噪声被添加到所述人工训练数据。

5.如权利要求2所述的跟踪系统,其中所述机器学习模型是根据实时控制器跟踪和掩蔽控制器位置和取向信息来训练的。

6.如权利要求2所述的跟踪系统,其中所述机器学习模型还被训练来根据所述两个或更多个事件来预测用户手部或臂部取向和位置。

7.如权利要求1所述的跟踪系统,其中拟合所述控制器的位置和取向包括使用拟合算法来将所述两个或更多个光源相对于彼此和相对于所述控制器的所述已知配置拟合到所述两个或更多个事件。

8.如权利要求1所述的跟踪系统,其中所述两个或更多个光源中的每一者被配置为以不同速率打开和关闭以将所述两个或更多个光源中的每一者彼此区分开。

9.如权利要求8所述的跟踪系统,其中所述两个或更多个光源中的每一者被配置为以预定义模式关闭和打开。

10.如权利要求1所述的跟踪系统,其中所述两个或更多个光源被配置为发射红外光,并且所述dvs的所述光敏元件被配置为检测红外光。

11.一种跟踪系统,包括

12.如权利要求11所述的跟踪系统,其中拟合所述控制器的位置和取向包括使用被训练来将至少所述两个或更多个事件拟合到所述两个或更多个光源相对于所述控制器的位置和取向的机器学习模型。

13.如权利要求12所述的跟踪系统,其中所述机器学习模型是使用人工训练数据来训练的,其中所述人工训练数据包括具有所述两个或更多个光...

【专利技术属性】
技术研发人员:X·叶中村勇一郎
申请(专利权)人:索尼互动娱乐股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1