用于进程数据共享的方法和设备技术

在一个具体实施中，一种由包括处理器、非暂态存储器和图像采集接口的设备来执行访问进程间的共享数据的方法。该方法包括获得由该图像采集接口采集的图像数据。该方法还包括至少部分地基于由图像采集接口测量的惯性测量单元(IMU)信息来确定姿态数据。该方法还包括至少部分地基于通过该图像采集接口获得的眼动跟踪信息来确定视线估计。至少部分地基于进程的特性，该方法包括确定该图像数据、该姿态数据和该视线估计的布置。该方法还包括至少部分地基于下述中的至少一者来确定进程的访问调度：该布置、进程的特性以及与该设备相关联的硬件定时参数。

【技术实现步骤摘要】
【国外来华专利技术】用于进程数据共享的方法和设备
本公开整体涉及数据共享，并且具体涉及使用确定性拉取/获取模型提供低延迟数据共享的系统、方法和设备。
技术介绍
物理环境是指人们在没有电子系统帮助的情况下能够感测和/或交互的物理世界。物理环境诸如物理公园包括物理物品，诸如物理树木、物理建筑物和物理人。人们能够诸如通过视觉、触觉、听觉、味觉和嗅觉来直接感测物理环境和/或与物理环境交互。相反，计算机生成现实(CGR)环境是指人们经由电子系统感知和/或交互的完全或部分模拟的环境。在CGR中，跟踪人的物理运动的一个子集或其表示，并且作为响应，以符合至少一个物理定律的方式调节在CGR环境中模拟的一个或多个虚拟对象的一个或多个特征。例如，CGR系统可以检测人的头部转动，并且作为响应，以与此类视图和声音在物理环境中变化的方式类似的方式调节呈现给人的图形内容和声场。在一些情况下(例如，出于可达性原因)，对CGR环境中虚拟对象的特征的调节可以响应于物理运动的表示(例如，声音命令)来进行。人可以利用其感觉中的任一者来感测CGR对象和/或与CGR对象交互，包括视觉、听觉、本文档来自技高网...

【技术保护点】
1.一种方法，包括：/n在具有非暂态存储器、图像采集接口和一个或多个处理器的设备处：/n获得由所述图像采集接口采集的与视场相关联的图像数据；/n至少部分地基于惯性测量单元(IMU)信息来确定姿态数据，其中所述姿态数据对应于由所述图像采集接口测量的用户的当前姿态；/n至少部分地基于通过所述图像采集接口获得的眼动跟踪信息来确定视线估计；/n至少部分地基于能够与所述图像采集接口通信的多个进程的多个特性来确定所述图像数据、所述姿态数据和所述视线估计的布置；以及至少部分地基于下述中的至少一者来确定所述多个进程的访问调度：/n所述图像数据、所述姿态数据和所述视线估计的所述布置，/n所述多个进程的所述多个特...

【技术特征摘要】
【国外来华专利技术】20180823 US 62/721,6851.一种方法，包括：
在具有非暂态存储器、图像采集接口和一个或多个处理器的设备处：
获得由所述图像采集接口采集的与视场相关联的图像数据；
至少部分地基于惯性测量单元(IMU)信息来确定姿态数据，其中所述姿态数据对应于由所述图像采集接口测量的用户的当前姿态；
至少部分地基于通过所述图像采集接口获得的眼动跟踪信息来确定视线估计；
至少部分地基于能够与所述图像采集接口通信的多个进程的多个特性来确定所述图像数据、所述姿态数据和所述视线估计的布置；以及至少部分地基于下述中的至少一者来确定所述多个进程的访问调度：
所述图像数据、所述姿态数据和所述视线估计的所述布置，
所述多个进程的所述多个特性，以及
与所述设备相关联的硬件定时参数。


2.根据权利要求1所述的方法，其中至少部分地基于所述多个进程的所述多个特性来确定所述图像数据、所述姿态数据和所述视线估计的所述布置包括：
获得所述多个进程中的第一进程的第一图像数据、第一姿态数据和第一视线估计中的至少一者，其中所述第一进程通过特性的第一集合来表征；
获得所述多个进程中的第二进程的第二图像数据、第二姿态数据和第二视线估计中的至少一者，其中所述第二进程通过特性的第二集合来表征；以及
将所述第一图像数据、所述第一姿态数据和所述第一视线估计与所述第二图像数据、所述第二姿态数据和所述第二视线估计聚合以生成所述图像数据、所述姿态数据和所述视线估计，其中所述图像数据、所述姿态数据和所述视线估计至少部分地基于所述特性的第一集合和所述特性的第二集合来布置。


3.根据权利要求1至2中任一项所述的方法，其中所述访问调度基于确定性模型来确定，并且所述方法包括：
对于所述多个进程中的第一进程，确定用于所述第一进程的输入、提供所述输入的硬件或第二进程中的至少一者，以及用于从所述硬件或所述第二进程中的至少一者获得所述输入的时间参数；以及
至少部分地基于所述时间参数来计算所述第一进程的唤醒时间。


4.根据权利要求1至3中任一项所述的方法，还包括：
从基础设备获得用于渲染的帧，其中所述帧与时间戳相关联；
基于所述姿态数据的轨迹和所述时间戳来预测在渲染时间处的渲染姿态；以及
在所述渲染时间使用所述渲染姿态来调节所述帧。


5.根据权利要求1至4中任一项所述的方法，其中确定所述多个进程的所述访问调度包括：
触发基础设备对数据的收集，其中所述基础设备获得下述中的至少一者：所述图像数据、所述姿态数据、所述视线估计的布置；所述多个进程的所述多个特性；以及来自所述设备的所述硬件定时参数，并且所述基础设备还从其他设备收集数据；以及
从第二设备接收所述访问调度，其中所述访问调度由所述第二设备基于所述数据来确定。


6.根据权利要求1至5中任一项所述的方法，还包括：
根据所述访问调度来访问所述布置以便生成用于显示的场景；以及
使用从所述布置获得的数据并根据所述访问调度来显示场景，其中所述数据是所述图像数据、所述姿态数据和所述视线估计中的至少一者的子集。


7.根据权利要求6所述的方法，其中根据所述访问调度来访问所述布置包括：
基于所述访问调度来确定所述多个进程中的进程的预期执行时间；以及
在根据所述布置获取所述进程使用的数据时，在所述预期执行时间唤醒所述进程以进行数据访问。


8.根据权利要求1至7中任一项所述的方法，其中所述图像数据、所述姿态数据和所述视线估计存储在存储设备中，并且所述图像数据、所述姿态数据和所述视线估计的所述布置包括用于将所述图像数据、所述姿态数据和所述视线估计存储在所述存储设备中的布局或顺序中的至少一者。


9.根据权利要求1至8中任一项所述的方法，其中所述图像采集接口包括用于采集与所述视场相关联的所述图像数据的图像传感器。


10.根据权利要求1至9中任一项所述的方法，其中所述图像采集接口包括用于测量所述用户的所述当前姿态的IMU。


11.根据权利要求1至10中任一项所述的方法，其中所述图像采集接口包括用于获得所述眼动跟踪信息的眼动跟踪器。


12.根据权利要求1至11中任一项所述的方法，其中所述多个进程的所述多个特性包括所述进程使用所述图像数据、所述姿态数据和所述视线估计的顺序。


13.根据权利要求1至12中任一项所述的方法，其中所述硬件定时参数与图像传感器、IMU、眼动跟踪器、控制器、处理器或通信设备中的至少一者相关联。


14.一种设备，包括：
图像采集接口；和
一个或多个处理器，所述一个或多个处理器用于：
获得由所述图像采集接口采集的与视场相关联的图像数据；
至少部分地基于惯性测量单元(IMU)信息来确定姿态数据，其中所述姿态数据对应于由所述图像采集接口测量的用户的当前姿态；
至少部分地基于通过所述图像采集接口获得的眼动跟踪信息来确定视线估计；
至少部分地基于能够与所述图像采集接口通信的多个进程的多个特性来确定所述图像...

【专利技术属性】
技术研发人员：R·德赛，M·J·洛克威尔，V·M·达吉内尼，R·S·W·李，
申请(专利权)人：苹果公司，
类型：发明
国别省市：美国;US