【技术实现步骤摘要】
用于显示虚拟对象的方法和系统
本公开涉及用于显示虚拟对象的方法和系统。
技术介绍
许多显示设备允许用户体验增强现实。通常,这些设备是以智能手机或头戴式显示器(HMD)的形式,并使用摄影机捕获用户物理、真实世界环境的实时视图。通过在此视图上叠加虚拟对象,用户可以体验到这些虚拟对象似乎存在于用户的真实世界环境中的现实。最近,增强现实进一步发展成为所谓的“混合现实”的形式。混合现实与增强现实的不同之处在于,在该环境中显示虚拟对象时,会考虑用户物理环境的物理边界或表面。例如,虚拟对象不是简单地覆盖在用户视图的顶部,而是看起来停留在真实世界的物理表面上,并且具有与该表面在真实世界环境中的位置相对应的深度。在一些版本的混合现实中,真实世界的用户视图可能被虚拟现实的视图完全掩盖,但虚拟现实本身可能包括真实世界环境内的一个或多个物理边界或表面的表示。通常,在增强或混合现实中显示虚拟对象时,这些对象出现的真实性将取决于用户真实世界环境的各个方面。例如,这些可能包括真实世界环境的照明条件、任何(真实)物理对象、表面或边界 ...
【技术保护点】
1.一种用于显示虚拟对象的系统,所述系统包括:/n用于显示环境的显示设备;/n摄影机;/n其中,所述摄影机可操作以捕获用户环境的区域的视频图像,所述视频图像中的所述区域的尺寸大于在所述显示设备处可视的环境的区域的尺寸;/n运动预测器,其可操作以预测所述摄影机的运动;/n场景处理器,其可操作以识别和处理捕获的视频图像的一部分作为所述预测运动的结果,所述捕获的视频图像的一部分对应于预计在所述显示设备处可视的环境的区域;/n图像生成器,被配置为从所述场景处理器接收输入,并且响应于所述输入生成用于在所述显示设备显示的虚拟对象;并且/n其中,所述图像生成器被配置为响应于所述预测运动的 ...
【技术特征摘要】
20180622 GB 1810270.71.一种用于显示虚拟对象的系统,所述系统包括:
用于显示环境的显示设备;
摄影机;
其中,所述摄影机可操作以捕获用户环境的区域的视频图像,所述视频图像中的所述区域的尺寸大于在所述显示设备处可视的环境的区域的尺寸;
运动预测器,其可操作以预测所述摄影机的运动;
场景处理器,其可操作以识别和处理捕获的视频图像的一部分作为所述预测运动的结果,所述捕获的视频图像的一部分对应于预计在所述显示设备处可视的环境的区域;
图像生成器,被配置为从所述场景处理器接收输入,并且响应于所述输入生成用于在所述显示设备显示的虚拟对象;并且
其中,所述图像生成器被配置为响应于所述预测运动的检测输出用于显示的所述虚拟对象。
2.根据权利要求1所述的系统,其中,所述系统包括两个摄影机,每个摄影机被配置为捕获所述环境的至少部分不同的区域的图像;
其中,在所述显示设备处可视的所述环境的区域小于由所述两个摄影机捕获的区域;并且
其中,所述场景处理器被配置为处理在所述显示设备处可视的所述环境的区域之外的区域的视频图像数据。
3.根据权利要求1所述的系统,其中,所述场景处理器被配置为确定所述捕获的视频图像的部分中的照明条件;并且
其中,所述图像生成器被配置为生成好像曝光在这些照明条件下的所述虚拟对象。
4.根据权利要求1所述的系统,其中,所述场景处理器被配置为检测所述捕获的视频图像的部分中的至少一个物理对象;并且
其中,所述图像生成器被配置为响应于检测到的至少一个物理对象生成虚拟对象。
5.根据权利要求4所述的系统,其中,所述场景处理器被配置为确定所述至少一个物理对象的相对位置和深度;并且
其中,所述图像生成器被配置为生成具有遮挡的所述虚拟对象,所述遮挡取决于所述至少一个物理对象的所述相对位置和深度。
6.根据权利要求4所述的系统,其中,所述图像生成器被配置为生成动画的虚拟对象,所述动画对应于所述虚拟对象和所述至少一个物理对象之间的虚拟交互。
7.根据权利要求1所述的系统,其中,所述运动预测器包括注视方向检测器,其可操作以检测所述用户的注视方向;并且
其中,所述运动预测器被配置为基于检测到的所述用户的注视方向的变化预测所述显示设备的运动。
8.根据权利要求1所述的系统,其中,所述系统包括运动检...
【专利技术属性】
技术研发人员:DED乌贝蒂,
申请(专利权)人:索尼互动娱乐股份有限公司,
类型:发明
国别省市:日本;JP
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。