运动感测和成像设备制造技术

公开的技术涉及一种运动感测和成像设备，包括：多个成像传感器，被布置为提供用于正被查看的景物的立体成像信息；在成像传感器周围布置的一个或者多个照射源；以及耦合到成像传感器和照射源以控制其操作的控制器，采集景物的成像信息、向用户至少提供成像信息的接近实时直通传递。运动感测和成像设备能够采集景物的成像信息并且向用户至少提供成像信息的接近实时直通传递。感测和成像设备可以被单独使用或者耦合到可佩带或者便携设备以创建能够向佩戴者呈现用信息的虚拟化或者创建的呈现来扩充的成像信息的可佩带感测系统。

【技术实现步骤摘要】

公开的技术涉及用于在能够使用成像或者其它传感器来检测在三维(3D)感测空间中的手势并且向用户呈现3D扩充的现实的可佩带传感器系统中使用的高度功能/高度准确的感测和成像设备。
技术介绍
一类设备(比如Google Glass)提供用于呈现在由用户佩戴的透视(see through)屏幕上叠加的信息的能力。另一类型的设备(比如Oculus Rift)向用户提供虚拟现实显示，该用户没有来自围绕用户的现实世界的信息。然而，这两个类型的设备无法充分地提供向反映围绕佩戴者的环境的实时图像流中集成虚拟(例如，计算)信息。因此，存在对于能够采集景物的成像信息并且向用户至少提供成像信息的接近实时直通传递(pass-through)的高度功能的感测和成像设备的需要。感测和成像设备理想地可以耦合到可佩戴或者便携设备以创建能够向佩戴者呈现用信息的虚拟化或者创建的呈现来扩充的成像信息的可佩带感测系统。迄今已知的设备未提供这些能力。
技术实现思路
存在对于能够采集景物的成像信息并且向用户至少提供成像信息的接近实时直通传递的高度功能的运动感测和成像设备的需要。该运动感测和成像设备理想地可以耦合到可佩戴或者便携设备以创建能够向佩戴者呈现用信息的虚拟化或者创建的呈现来扩充的成像信息的可佩带感测系统。根据本技术的各种实施例，公开了一种运动感测和成像设备，其特征在于，包括：多个成像传感器，被布置为提供用于正被查看的景物的立体成像信息；在该成像传感器周围布置的一个或者多个照射源；以及耦合到该成像传感器和照射源以控制其操作的控制器，采集景物的成像信息、向用户至少提供成像信息的接近实时直通传递。在该运动感测和成像设备中，其中该控制器还提供：捕获用于在该成像传感器的视点内的控制对象的成像信息，其中用于感兴趣的控制对象的该成像信息用来确定向在控制之下的机器指示命令的手势信息。在该运动感测和成像设备中，其中该捕获还包括：将从对IR光灵敏的像素接收的信息与从对例如RGB的可见光灵敏的像素接收的信息分离；处理来自IR传感器的将用于手势识别的图像信息；以及处理来自RGB传感器的将经由呈现界面作为实况视频馈送被提供的图像信息。在该运动感测和成像设备中，其中该处理来自RGB传感器的图像信息还包括：使用分别捕获在该景物中的照射的红色、绿色和蓝色分量的RGB像素来提取现实世界空间的粗略特征。在该运动感测和成像设备中，其中该处理来自IR传感器的图像信息还包括：使用捕获在该景物中的照射的红外线分量的IR像素来提取现实世界空间的细微特征。在该运动感测和成像设备中，其中该现实世界空间的细微特征包括该现实世界空间的表面纹理。在该运动感测和成像设备中，其中该现实世界空间的细微特征包括该现实世界空间的边缘。在该运动感测和成像设备中，其中该现实世界空间的细微特征包括该现实世界空间的曲率。在该运动感测和成像设备中，其中该现实世界空间的细微特征包括在该现实世界空间中的对象的表面纹理。在该运动感测和成像设备中，其中该现实世界空间的细微特征包括在该现实世界空间中的对象的边缘。在该运动感测和成像设备中，其中该现实世界空间的细微特征包括在该现实世界空间中的对象的曲率。在该运动感测和成像设备中，其中该控制器还提供：确定环境照明条件；以及基于确定的该条件调整输出的显示，确定该传感器在第一时间和第二时间相对于固定点的第一定位信息和第二定位信息。在该运动感测和成像设备中，还包括：运动传感器；并且其中该控制器还提供：确定在来自该运动传感器的第一定位信息和第二定位信息之间的差值信息；以及基于该差值信息计算用于该设备的相对于固定点的移动信息。在该运动感测和成像设备中，还包括：将该成像传感器和该照射源紧固到在可佩带呈现设备中的装配表面的一个或者多个紧固器。在该运动感测和成像设备中，还包括：将该成像传感器和该照射源紧固到在可佩带呈现设备中的腔的一个或者多个紧固器。在该运动感测和成像设备中，还包括：将该成像传感器和该照射源紧固到在便携呈现设备中的装配表面的一个或者多个紧固器。在该运动感测和成像设备中，还包括：将该成像传感器和该照射源紧固到在便携呈现设备中的腔的一个或者多个紧固器。所公开的技术的实现方式通过提供一种能够采集景物的成像信息并且向用户至少提供成像信息的接近实时直通传递的运动感测和成像设备来解决这些和其它问题。感测和成像设备可以被单独使用或者耦合到可佩带或者便携设备以创建能够向佩戴者呈现用信息的虚拟化或者创建的呈现来扩充的成像信息的可佩带感测系统。运动感测和成像设备的一个实现方式包括：多个成像传感器，被布置为提供用于正被查看的景物的立体成像信息；在成像传感器周围布置的一个或者多个照射源；以及耦合到成像传感器和照射源以控制其操作的控制器。控制器使该设备能够采集景物的成像信息并且向用户至少提供成像信息的接近实时直通传递。该设备可以耦合到可佩带设备以创建能够向佩戴者呈现用信息的虚拟化或者创建的呈现来扩充的成像信息的可佩带感测系统。在一个实现方式中，一种运动感测和成像设备的控制器还提供捕获用于在成像传感器的视点内的控制对象(包括比如人类手部的控制对象)的成像信息。用于感兴趣的控制对象的成像信息可以用来确定向在控制之下的机器指示命令的手势信息。在实现方式中，该设备支持用毫米以下准确度检测围绕该设备的佩戴者的对象的定位、姿态和运动并且提供这一信息以用于集成到向佩戴者提供的呈现中。在一个实现方式中，一种运动感测和成像设备包括用于将从对IR光灵敏的像素接收的信息与从对可见光(例如，RGB(红色、绿色和蓝色))灵敏的像素接收的信息分离并且处理来自IR(红外线)传感器的将用于手势识别的图像信息以及处理来自RGB传感器的将经由呈现界面作为实况视频馈送被提供的图像信息的能力。例如，使用具有RGB像素集合和IR像素集合的相机来捕获视频流，该视频流包括在现实世界中的景物的图像序列。分理出来自IR灵敏像素的信息以用于处理以识别手势。向可佩带设备(HUD、HMD等)的呈现界面提供来自RGB灵敏像素的信息作为向呈现输出的实况视频馈送。向可佩带设备的用户显示呈现输出。一个或者多个虚拟对象可以与视频流图像集成以形成呈现输出。因而，使该设备能够提供手势识别、现实世界对象的经由直通传递视频馈送的现实世界呈现本文档来自技高网...

【技术保护点】
一种运动感测和成像设备，其特征在于，包括：多个成像传感器，被布置为提供用于正被查看的景物的立体成像信息；在所述成像传感器周围布置的一个或者多个照射源；以及耦合到所述成像传感器和照射源以控制其操作的控制器，采集景物的成像信息、向用户至少提供成像信息的接近实时直通传递。

【技术特征摘要】
2014.08.08 US 62/035,0081.一种运动感测和成像设备，其特征在于，包括：
多个成像传感器，被布置为提供用于正被查看的景物的立体成
像信息；
在所述成像传感器周围布置的一个或者多个照射源；以及
耦合到所述成像传感器和照射源以控制其操作的控制器，采集
景物的成像信息、向用户至少提供成像信息的接近实时直通传递。
2.根据权利要求1所述的设备，其特征在于，其中所述控制器
还提供：
捕获用于在所述成像传感器的视点内的控制对象的成像信息，
其中用于感兴趣的控制对象的所述成像信息用来确定向在控制之下
的机器指示命令的手势信息。
3.根据权利要求2所述的设备，其特征在于，其中所述捕获还
包括：
将从对IR光灵敏的像素接收的信息与从对例如RGB的可见光
灵敏的像素接收的信息分离；
处理来自IR传感器的将用于手势识别的图像信息；以及
处理来自RGB传感器的将经由呈现界面作为实况视频馈送被提
供的图像信息。
4.根据权利要求3所述的设备，其特征在于，其中所述处理来
自RGB传感器的图像信息还包括：
使用分别捕获在所述景物中的照射的红色、绿色和蓝色分量的
RGB像素来提取现实世界空间的粗略特征。
5.根据权利要求3所述的设备，其特征在于，其中所述处理来
自IR传感器的图像信息还包括：
使用捕获在所述景物中的照射的红外线分量的IR像素来提取现
实世界空间的细微特征。
6.根据权利要求5所述的设备，其特征在于，其中所述现实世

\t界空间的细微特征包括所述现实世界空间的表面纹理。
7.根据权利要求5所述的设备，其特征在于，其中所述现实世
界空间的细微特征包括所述现实世界空间的边缘。
8...

【专利技术属性】
技术研发人员：D·S·霍尔茨，N·罗伊，何宏远，
申请(专利权)人：厉动公司，
类型：新型
国别省市：美国;US