与增强和虚拟现实环境交互的系统、方法和图形用户界面技术方案

本公开涉及与增强和虚拟现实环境交互的系统、方法和图形用户界面。一种计算机系统在增强现实环境中同时显示：包括相应物理对象的一个或多个相机的视场的至少一部分的表示，该表示随着视场内容的变化而被更新；以及虚拟用户界面中基于视场中相应物理对象的位置确定的相应位置处的相应虚拟用户界面对象。在对应于所显示的相应虚拟用户界面对象的位置处检测到输入的同时，响应于检测到输入相对于一个或多个相机的视场中的相应物理对象的移动，该系统根据输入相对于相应物理对象的移动量值来调节相应虚拟用户界面对象的外观。

【技术实现步骤摘要】
与增强和虚拟现实环境交互的系统、方法和图形用户界面本申请是申请日为2018年8月30日、申请号为201880055301.0、专利技术名称为“用于与增强和虚拟现实环境交互的系统、方法和图形用户界面”的专利技术专利申请的分案申请。
本专利技术总体涉及用于虚拟/增强现实的计算机系统，包括但不限于用于和增强现实环境与虚拟现实环境交互的电子设备。
技术介绍
近年来，用于虚拟/增强现实的计算机系统的发展显著增加。示例虚拟/增强现实环境包括至少一些替换或增强物理世界的虚拟元素。用于计算机系统和其他电子计算设备的输入设备诸如触敏表面用于与虚拟/增强现实环境进行交互。示例触敏表面包括触控板、触敏遥控器和触摸屏显示器。此类表面用于操纵显示器上的用户界面和其中的对象。示例性用户界面对象包括数字图像、视频、文本、图标和控制元件(诸如，按钮)以及其他图形。但用于与包括至少一些虚拟元素的环境(例如，增强现实环境、混合现实环境和虚拟现实环境)进行交互的方法和界面麻烦、低效且受限。例如，使用输入序列来选择一个或多个用户界面对象(例如，虚拟/增强现实环境中的一本文档来自技高网...

【技术保护点】
1.一种方法，包括：/n在具有显示生成部件、一个或多个相机和输入设备的计算机系统处：/n经由所述显示生成部件来显示(602)增强现实环境，其中显示所述增强现实环境包括同时显示(604)：/n包括相应物理对象的所述一个或多个相机的视场的至少一部分的表示，其中所述表示随着所述一个或多个相机的所述视场的内容变化而被更新；以及/n在所述一个或多个相机的所述视场的所述表示中的相应位置处的相应虚拟用户界面对象，其中所述相应虚拟用户界面对象具有基于所述一个或多个相机的所述视场中的所述相应物理对象而确定的位置；/n在显示所述增强现实环境的同时，在对应于所述相应虚拟用户界面对象的位置处检测(606)输入；/n在...

【技术特征摘要】
20180823 DK PA201870548;20170831 US 62/553,063;2011.一种方法，包括：
在具有显示生成部件、一个或多个相机和输入设备的计算机系统处：
经由所述显示生成部件来显示(602)增强现实环境，其中显示所述增强现实环境包括同时显示(604)：
包括相应物理对象的所述一个或多个相机的视场的至少一部分的表示，其中所述表示随着所述一个或多个相机的所述视场的内容变化而被更新；以及
在所述一个或多个相机的所述视场的所述表示中的相应位置处的相应虚拟用户界面对象，其中所述相应虚拟用户界面对象具有基于所述一个或多个相机的所述视场中的所述相应物理对象而确定的位置；
在显示所述增强现实环境的同时，在对应于所述相应虚拟用户界面对象的位置处检测(606)输入；
在继续(608)检测所述输入的同时：
检测所述输入相对于所述一个或多个相机的所述视场中的所述相应物理对象的移动，其中所述输入相对于所述相应物理对象的移动基于所述输入在所述输入设备上的移动；以及
响应于检测到所述输入相对于所述一个或多个相机的所述视场中的所述相应物理对象的移动，根据所述输入相对于所述相应物理对象的移动量值来调节所述相应虚拟用户界面对象的外观；以及
在根据所述输入相对于所述相应物理对象的所述移动量值来调节(618)所述相应虚拟用户界面对象的所述外观之后：
检测所述一个或多个相机的所述视场相对于所述相应物理对象的移动；以及
响应于检测到所述一个或多个相机的所述视场相对于所述相应物理对象的移动，继续根据所述一个或多个相机的所述视场相对于所述相应物理对象的移动量值来调节所述相应虚拟用户界面对象的所述外观。


2.根据权利要求1所述的方法，其中根据所述输入相对于所述相应物理对象的所述移动量值来调节所述相应虚拟用户界面对象的所述外观包括：
根据确定所述输入相对于所述相应物理对象的所述移动量值为第一量值，将所述相应虚拟用户界面对象的所述外观调节第一调节；以及
根据确定所述输入相对于所述相应物理对象的所述移动量值为不同于所述第一量值的第二量值，将所述相应虚拟用户界面对象的所述外观调节不同于所述第一调节的第二调节。


3.根据权利要求1至2中任一项所述的方法，其中所述相应虚拟用户界面对象在所述调节之前和之后被锚定到所述一个或多个相机的所述视场中的所述相应物理对象。


4.根据权利要求1至3中任一项所述的方法，其中响应于检测到所述输入相对于所述一个或多个相机的所述视场中的所述相应物理对象的移动来调节所述相应虚拟用户界面对象的所述外观，而不考虑所述输入的移动是由于：
所述输入在所述输入设备上的移动，
所述一个或多个相机相对于所述相应物理对象的移动，还是
所述输入在所述输入设备上的移动和所述一个或多个相机相对于所述相应物理对象的移动的组合。


5.根据权利要求1至4中任一项所述的方法，其中所述输入相对于所述相应物理对象的移动基于：
所述一个或多个相机的所述视场相对于所述相应物理对象的移动；以及
所述输入在所述输入设备上的移动。


6.根据权利要求1至5中任一项所述的方法，其中：
在对应于所述相应虚拟用户界面对象的所述位置处检测所述输入包括在所述相应虚拟用户界面对象上的第一接触点处检测所述输入；以及
所述计算机系统更新所述相应虚拟用户界面对象的所述显示，以便将所述相应虚拟用户界面对象上的所述第一接触点的显示保持在与所述输入的位置相对应的位置处。


7.根据权利要求1至6中任一项所述的方法，其中：
所述一个或多个相机的所述视场的移动是从图像分析得到的，所述图像分析表明所述一个或多个相机的所述视场内的一个或多个参考点在由所述一个或多个相机捕获的连续图像之间已改变。


8.根据权利要求1至7中任一项所述的方法，其中调节所述相应虚拟用户界面对象的所述外观包括移动所述相应虚拟用户界面对象的至少一部分，其中所述相应虚拟用户界面对象的移动基于所述相应物理对象的物理形状。


9.根据权利要求1至8中任一项所述的方法，其中调节所述相应虚拟用户界面对象的所述外观包括移动所述相应虚拟用户界面对象的至少一部分，其中所述相应虚拟用户界面对象的移动基于同时进行的一个或多个触摸输入的移动和所述计算机系统的移动。


10.根据权利要求1至9中任一项所述的方法，其中调节所述相应虚拟用户界面对象的所述外观包括将所述相应虚拟用户界面对象的至少一部分移动超出所述相应虚拟用户界面对象的静止状态的最大极限，并且所述方法包括：
在继续检测所述输入的同时，根据所述输入相对于所述相应物理对象的所述移动量值，在超出所述相应虚拟用户界面对象的所述静止状态的所...

【专利技术属性】
技术研发人员：M·K·豪恩斯坦，J·A·玛丽亚，J·米斯格，M·克伦，L·R·T·格灵，A·奥夫南，M·斯陶贝尔，J·T·伯恩斯坦，
申请(专利权)人：苹果公司，
类型：发明
国别省市：美国;US