透明智能手机制造技术

一种用于在移动计算装置上渲染增强现实场景的方法和系统，用一个或多个基于事件的视觉传感器来跟踪现实世界场景和/或用户的视点，并且基于用户的视点和现实世界场景的场景映射图以及基于对一个或多个基于事件的视觉传感器的跟踪来混合在移动计算装置上显示的增强现实场景。基于事件的视觉传感器提供许多优势，主要是通过本质上压缩数据流，从而减小处理单元需要执行的数据量。此外，基于事件的视觉传感器像素持续感测场景中的视觉变化并且以非常低的延迟报告它们。这使得基于事件的视觉传感器成为始终在线任务的理想传感器，诸如视觉跟踪和智能传感器控制或辅助传感模式的数据增强。

【技术实现步骤摘要】
【国外来华专利技术】透明智能手机相关申请的交叉引用本申请根据35USC119(e)要求2019年1月21日提交的美国临时申请号62/794,765的权益，所述申请通过引用整体并入本文。
技术介绍
新一代手持移动计算装置，诸如智能手机和平板电脑，都具有宽大的触摸屏显示器。它们的区域几乎覆盖了装置的整个正面。事实上，在一些示例中，显示器围绕装置的侧面缠绕。与此同时，在移动计算装置上执行的增强现实(AR)应用程序(应用)已经变得无处不在。这些在移动计算装置上执行的应用将虚拟内容与通常由装置的后置相机捕获的图像叠加在一起。
技术实现思路
通常，捕获的图像和虚拟内容的渲染是从后置相机的角度来执行的。从用户的视角来看，这具有创建在装置显示器外围显示的图像和周围环境之间的不连续性的效果，即，从用户的视点来看，AR场景与周围的现实世界场景并不混合。这损害了AR错觉，因为捕获的图像和AR内容相对于周围环境不对准，并且同一对象可能被看到两次，一次在装置的显示器上，并且一次在用户的视觉视角内。有些人建议跟踪用户的视点并且实现AR场景和现实世界场景之间的更好混合。如本文档来自技高网...

【技术保护点】
1.一种用于在移动计算装置上渲染增强现实场景的方法，所述方法包括：/n用一个或多个基于事件的视觉传感器跟踪现实世界场景和/或用户的视点；以及/n基于所述用户的所述视点和所述现实世界场景的场景映射图以及基于对所述一个或多个基于事件的视觉传感器的所述跟踪，混合在所述移动计算装置上显示的增强现实场景。/n

【技术特征摘要】
【国外来华专利技术】20190121 US 62/794,7651.一种用于在移动计算装置上渲染增强现实场景的方法，所述方法包括：
用一个或多个基于事件的视觉传感器跟踪现实世界场景和/或用户的视点；以及
基于所述用户的所述视点和所述现实世界场景的场景映射图以及基于对所述一个或多个基于事件的视觉传感器的所述跟踪，混合在所述移动计算装置上显示的增强现实场景。


2.根据权利要求1所述的方法，其中，对所述现实世界场景的所述跟踪和/或对所述用户的所述视点的所述跟踪包括：
基于所述一个或多个基于事件的视觉传感器中的前基于事件的视觉传感器来确定所述用户的所述视点是否已经被移位；并且如果认为有必要，
则基于来自所述前基于事件的视觉传感器的事件数据获取另外的信息来更新所述视点。


3.根据权利要求2所述的方法，其中，所述另外的信息由前深度传感器和/或前相机生成。


4.根据权利要求1至3中任一项所述的方法，其中，对所述现实世界场景的所述跟踪和/或对所述用户的所述视点的所述跟踪包括：
基于所述一个或多个基于事件的视觉传感器中的后基于事件的视觉传感器来确定所述场景中的对象是否已经移动；并且如果认为有必要，
则获取另外的信息来更新所述场景映射图。


5.根据权利要求4所述的方法，其中，所述另外的信息由后深度传感器和/或后相机生成。


6.根据权利要求1至5中任一项所述的方法，其中，对所述现实世界场景的跟踪和/或对所述用户的所述视点的所述跟踪包括：
基于来自所述一个或多个基于事件的视觉传感器中的惯性测量单元和/或后基于事件的视觉传感器的信息，确定所述移动计算装置的姿态是否已经改变；以及
从后深度传感器和/或后相机和/或后基于事件的视觉传感器获取另外的信息以更新场景映射图。


7.根据权利要求1至6中任一项所述的方法，其中，对于所述基于事件的视觉传感器的像素，所述基于事件的视觉传感器将OFF事件检测为光强度的离散降低和/或将ON事件检测为光强度的离散增加。


8.根据权利要求7所述的方法，其中，所述基于事件的视觉传感器包括比较器，所述比较器将光感受器信号和过去的光感受器信号之间的差异与阈值进行比较，以确定所述OFF事件和/或所述ON事件。


9.根据权利要求1至...

【专利技术属性】
技术研发人员：克里斯蒂安·布伦德利，拉斐尔·伯纳，迈克尔·加斯纳，
申请(专利权)人：索尼高级视觉传感股份公司，
类型：发明
国别省市：瑞士;CH