基于设备位置调整图像的显示制造技术

本公开涉及基于设备位置调整图像的显示。本文所公开的各种具体实施包括用于基于设备位置来调整图像的显示的设备、系统和方法。在一些具体实施中，设备包括图像传感器、显示器、非暂态存储器以及与图像传感器、显示器和非暂态存储器耦接的一个或多个处理器。在一些具体实施中，方法包括获得该设备的用户的身体部位的第一图像。在一些具体实施中，该方法包括经由图像传感器捕获身体部位的第二图像。在一些具体实施中，该方法包括基于第二图像来确定身体部位相对于设备的位置。在一些具体实施中，该方法包括通过基于该身体部位相对于设备的位置调整第一图像来生成调整后的图像。在一些具体实施中，该方法包括在显示器上显示调整后的图像。的图像。的图像。

【技术实现步骤摘要】
基于设备位置调整图像的显示
[0001]相关申请的交叉引用
[0002]本申请要求于2021年9月9日提交的美国临时专利申请63/242,179号以及于2022年7月29日提交的美国专利申请17/877,255号的权益，这些申请全文以引用方式并入。


[0003]本公开整体涉及基于设备位置调整图像的显示。

技术介绍

[0004]一些设备包括捕获图像的图像传感器和显示所捕获的图像的显示器。这些图像可描绘各种物体或人。这些图像可呈现在移动通信设备上。

技术实现思路

[0005]本文所公开的各种具体实施包括用于基于设备位置来调整图像的显示的设备、系统和方法。在一些具体实施中，设备包括图像传感器、显示器、非暂态存储器以及与该图像传感器、该显示器和该非暂态存储器耦接的一个或多个处理器。在一些具体实施中，方法包括获得设备的用户的身体部位的第一图像。在一些具体实施中，方法包括经由图像传感器捕获身体部位的第二图像。在一些具体实施中，方法包括基于第二图像来确定身体部位相对于设备的位置。在一些具体实施中，方法包括通过基于身体部位相对于设备的位置调整第一图像来生成调整后的图像。在一些具体实施中，方法包括在显示器上显示调整后的图像。
[0006]根据一些具体实施，设备包括一个或多个处理器、非暂态存储器以及一个或多个程序。在一些具体实施中，一个或多个程序存储在非暂态存储器中并由一个或多个处理器执行。在一些具体实施中，一个或多个程序包括用于执行或促使执行本文描述的任何方法的指令。根据一些具体实施，一种非暂态计算机可读存储介质中存储有指令，该指令当由设备的一个或多个处理器执行时使该设备执行或导致执行本文所述方法中的任一种。根据一些具体实施，一种设备包括一个或多个处理器、非暂态存储器，以及用于执行或导致执行本文所述方法中的任一种的装置。
附图说明
[0007]因此，本公开可被本领域的普通技术人员理解，更详细的描述可参考一些例示性具体实施的方面，其中一些具体实施在附图中示出。
[0008]图1A是根据一些具体实施的操作环境中的用户和电子设备的侧视图。
[0009]图1B是根据一些具体实施的用户和电子设备的前视图。
[0010]图1C是根据一些具体实施的用户和电子设备的另一侧视图。
[0011]图1D是根据一些具体实施的用户和电子设备的另一前视图。
[0012]图2是根据一些具体实施的图像呈现引擎的框图。
[0013]图3是根据一些具体实施的基于设备位置来调整图像的显示的方法的流程图表示。
[0014]图4是根据一些具体实施的基于设备位置来调整图像的显示的设备的框图。
[0015]根据通常的做法，附图中示出的各种特征部可能未按比例绘制。因此，为了清楚起见，可以任意地扩展或减小各种特征部的尺寸。另外，一些附图可能未描绘给定的系统、方法或设备的所有部件。最后，在整个说明书和附图中，类似的附图标号可用于表示类似的特征部。
具体实施方式
[0016]描述了许多细节以便提供对附图中所示的示例具体实施的透彻理解。然而，附图仅示出了本公开的一些示例方面，因此不应被视为限制。本领域的普通技术人员将理解，其他有效方面和/或变体不包括本文所述的所有具体细节。此外，没有详尽地描述众所周知的系统、方法、部件、设备和电路，以免模糊本文所述的示例性具体实施的更多相关方面。
[0017]物理环境是指人们在没有电子设备帮助的情况下能够对其感测和/或与其交互的物理世界。物理环境可包括物理特征，诸如物理表面或物理对象。例如，物理环境对应于包括物理树木、物理建筑物和物理人的物理公园。人们能够诸如通过视觉、触觉、听觉、味觉和嗅觉来直接感测物理环境和/或与物理环境交互。相反，扩展现实(XR)环境是指人们经由电子设备感测和/或交互的完全或部分模拟的环境。例如，XR环境可包括增强现实(AR)内容、混合现实(MR)内容、虚拟现实(VR)内容等。在XR系统的情况下，跟踪人的物理运动的一个子集或其表示，并且作为响应，以符合至少一个物理定律的方式调整在XR系统中模拟的一个或多个虚拟对象的一个或多个特征。例如，XR系统可以检测头部移动，并且作为响应，以与此类视图和声音在物理环境中变化的方式类似的方式调整呈现给人的图形内容和声场。又如，XR系统可以检测呈现XR环境的电子设备(例如，移动电话、平板电脑、膝上型电脑等)的移动，并且作为响应，以类似于此类视图和声音在物理环境中将如何改变的方式调整呈现给人的图形内容和声场。在一些情况下(例如，出于可达性原因)，XR系统可响应于物理运动的表示(例如，声音命令)来调整XR环境中图形内容的特征。
[0018]有许多不同类型的电子系统使人能够感测和/或与各种XR环境交互。示例包括头戴式系统、基于投影的系统、平视显示器(HUD)、集成有显示能力的车辆挡风玻璃、集成有显示能力的窗户、被形成为设计用于放置在人的眼睛上的透镜的显示器(例如，类似于隐形眼镜)、耳机/听筒、扬声器阵列、输入系统(例如，具有或不具有触觉反馈的可穿戴或手持式控制器)、智能电话、平板电脑、以及台式/膝上型计算机。头戴式系统可具有集成不透明显示器和一个或多个扬声器。另选地，头戴式系统可被配置为接受外部不透明显示器(例如，智能电话)。头戴式系统可结合用于捕获物理环境的图像或视频的一个或多个成像传感器、和/或用于捕获物理环境的音频的一个或多个麦克风。头戴式系统可具有透明或半透明显示器，而不是不透明显示器。透明或半透明显示器可以具有媒介，代表图像的光通过该媒介被引导到人的眼睛。显示器可以利用数字光投影、OLED、LED、uLED、硅基液晶、激光扫描光源或这些技术的任意组合。媒介可以是光学波导、全息图媒介、光学组合器、光学反射器、或它们的任意组合。在一些具体实施中，透明或半透明显示器可被配置为选择性地变得不透明。基于投影的系统可以采用将图形图像投影到人的视网膜上的视网膜投影技术。投影系统也
可以被配置为将虚拟对象投影到物理环境中，例如作为全息图或在物理表面上。
[0019]设备可包括显示器，该显示器显示设备的用户的身体部位的图像。显示身体部位的图像允许位于设备的物理环境中另一个人在身体部位被设备遮挡时查看身体部位的表示。例如，如果设备遮挡用户的手，则显示器显示用户的手的图像，使得位于设备的物理环境中的另一个人可查看被设备遮挡的用户的手的图像。显示身体部位的图像提供了在物理环境中的人正在直接查看身体部位的外观。例如，显示用户的手的图像提供了用户或与用户交互的人正在直接看着用户的手的外观。然而，身体部位的图像与身体部位之间的不对准会减损外观。例如，如果显示器正在显示器的中心显示用户的手，并且用户正以使得设备的左侧部分刚好遮挡手的方式握住设备，则对应于用户的手的像素的位置可能不匹配预期手所在的位置。因此，设备可能需要基于设备相对于身体部位的位置来调整图像的显示。例如，如果设备的左侧部分刚好遮挡手，则设备可能需要将手的图像朝向左移位。
[0020]本公开提供了用于基于身体部位相对于设备的位本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种方法，包括：在包括图像传感器、显示器、非暂态存储器以及与所述图像传感器、所述显示器和所述非暂态存储器耦接的一个或多个处理器的设备处：获得所述设备的用户的身体部位的第一图像；经由所述图像传感器捕获所述身体部位的第二图像；基于所述第二图像确定所述身体部位相对于所述设备的位置；通过基于所述身体部位相对于所述设备的所述位置调整所述第一图像来生成调整后的图像；以及在所述显示器上显示所述调整后的图像。2.根据权利要求1所述的方法，其中调整所述第一图像包括将所述第一图像中的对应于所述身体部位的像素与所述身体部位对准。3.根据权利要求1所述的方法，其中调整所述第一图像包括利用矩阵将对应于所述第一图像的第一坐标空间与对应于所述身体部位的第二坐标空间进行匹配。4.根据权利要求2所述的方法，还包括通过识别所述身体部位的几何形状并且对所述身体部位的所述几何形状进行编码来生成所述矩阵。5.根据权利要求1所述的方法，其中调整所述第一图像包括旋转所述第一图像。6.根据权利要求1所述的方法，其中调整所述第一图像包括将所述第一图像移位。7.根据权利要求1所述的方法，其中调整所述第一图像包括缩放所述第一图像。8.根据权利要求1所述的方法，其中调整所述第一图像包括：检测所述身体部位与所述身体部位的所述第一图像之间的不对准；以及响应于所述不对准大于公差阈值来调整所述第一图像。9.根据权利要求1所述的方法，其中调整所述第一图像包括：确定所述设备是否相对于所述身体部位正在移动；响应于确定所述设备未相对于所述身体部位正在移动而调整所述第一图像；以及响应于确定所述设备相对于所述身体部位正在移动而放弃调整所述第一图像。10.根据权利要求1所述的方法，其中调整所述第一图像包括：确定在所述设备的阈值距离内是否有人；响应于确定在所述设备的所述阈值距离内有人而调整所述第一图像；以及响应于确定在所述设备的所述阈值距离内没有人而放弃调整所述第一图像。11.根据权利要求1所述的方法，其中调整所述第一图像包括：确定所述设备的电池水平；响应于所述电池水平满足阈值电池水平而调整所述第一图像；以及响应于所述电池水平突...

【专利技术属性】
技术研发人员：帕维尔，
申请(专利权)人：苹果公司，
类型：发明
国别省市：