校正车辆引起的方向改变的系统和方法技术方案

描述了一种用于校正车辆引起的电子设备的方向改变的方法。该方法包括确定电子设备的第一中心姿势，以及确定何时由车辆导致了电子设备的运动。可以使用传感器结合在处理器上操作的计算机视觉来跟踪场景内的至少一个关键点，以确定第二中心姿势。然后确定第二中心姿势是否在相对于第一中心姿势的容差内；以及当第二中心姿势和第一中心姿势之间存在差异时，调整第二中心姿势。

System and Method for Correcting Direction Change Caused by Vehicles

A method for correcting the direction change of electronic equipment caused by vehicles is described. The method includes determining the first central posture of the electronic device and determining when the motion of the electronic device is caused by the vehicle. Sensors can be used in conjunction with computer vision operating on the processor to track at least one key point in the scene to determine the second central posture. Then determine whether the second central posture is within tolerance relative to the first central posture, and adjust the second central posture when there is a difference between the second central posture and the first central posture.

【技术实现步骤摘要】
【国外来华专利技术】校正车辆引起的方向改变的系统和方法
本专利技术的实施例总体上涉及便携式电子设备，具体地，涉及用于校正车辆引起的电子设备的方向改变的系统和方法。
技术介绍
不采用外部系统进行跟踪的虚拟现实设备和其他头戴式显示(HMD)设备依赖于HMD中的传感器或HMD中使用的设备中的传感器以进行头部取向跟踪。许多类似的HMD设备使用移动设备来渲染虚拟的或增强的场景，因此依赖于HMD或移动设备中的传感器来进行头部取向跟踪。然而，当骑乘在任何类型的经历方向改变的移动车辆中时，HMD传感器可能错误地将该方向改变报告为头部旋转。例如，当载有佩戴头戴式显示器(HMD)的乘客的汽车向左转时，由于汽车的转向，HMD的视角图不正确地向右旋转。也就是说，当汽车向左转时，场景的HMD视角图将向右移动。为了补偿，用户将转头直到转向停止、用户不能再转头或者用户重置HMD的对准。
技术实现思路
【技术问题】因此，校正车辆引起的电子设备的方向改变的设备和方法是有益的。【问题的解决方案】描述了一种用于校正车辆引起的电子设备的方向改变的方法。该方法包括确定电子设备的第一中心姿势，以及确定何时由车辆导致了电子设备的运动。可以使用传感器结合在处理器上操作的计算机视觉来跟踪场景内的至少一个关键点，以确定第二中心姿势。确定第二中心姿势是否在相对于第一中心姿势的容差内；以及当第二中心姿势和第一中心姿势之间存在差异时，调整第二中心姿势。还描述了一种电子设备。该电子设备包括显示器；传感器，被配置为跟踪场景内的至少一个关键点；以及处理器，耦接到显示器和传感器。处理器被配置为确定何时由车辆导致了电子设备的运动。处理器还使用传感器结合在处理器上操作的计算机视觉来跟踪场景内的至少一个关键点，以确定第二中心姿势。处理器确定第二中心姿势是否在相对于第一中心姿势的容差内，并且当第二中心姿势与第一中心姿势之间存在差异时，调整第二中心姿势。一种非暂时性计算机可读存储介质，其中存储有表示可由处理器执行的指令的数据。处理器执行方法，该方法包括确定电子设备的第一中心姿势，以及确定何时由车辆导致了电子设备的运动。处理器还使用传感器结合在处理器上操作的计算机视觉来跟踪场景内的至少一个关键点，以确定第二中心姿势。处理器还确定第二中心姿势是否在相对于第一中心姿势的容差内；以及当第二中心姿势和第一中心姿势之间存在差异时，调整第二中心姿势。将从对随后的具体实施方式和权利要求的考虑中认识其他特征。在进行下面的具体实施方式之前，阐述贯穿本专利文档所使用的某些词语和短语的定义可能是有利的。术语“耦接”及其派生词是指两个或更多个元件之间的任何直接或间接的通信，不管这些元件是否彼此物理接触。术语“发送”、“接收”和“通信”及其派生词包括直接和间接通信两者。术语“包含”和“包括”及其派生词意指在没有限制的情况下的包含。术语“或”是非排除性的，意指和/或。短语“与...相关联”及其派生词意指包括、被包括在内、与...互连、包含、被包含在内、连接到或与...连接、耦接到或与...耦接、可与...通信、与...协作、交织、并置、接近...、绑定到...或与...绑定、具有、具有...的属性、具有到...的关系或与...的关系等。术语“控制器”意指控制至少一个操作的任何设备、系统或其部分。可以用硬件、或硬件和软件和/或固件的组合来实现这样的控制器。与任意特定控制器相关联的功能可以是集中式或分布式的，不管本地还是远程。当与项目列表一起使用短语“......中的至少一个”时，意指可以使用列出的项目中的一个或多个的不同组合，并且可能仅需要列表中的一个项目。例如，“A、B和C中的至少有一个”包括任意下面的组合：A、B、C；A和B；A和C；B和C；以及A和B和C。此外，以下描述的各种功能可以由一个或多个计算机程序来实现或支持，每个计算机程序由计算机可读程序代码形成并体现在计算机可读介质中。术语“应用”和“程序”是指一个或多个计算机程序、软件组件、指令集、过程、功能、对象、类、实例、相关数据或其适于在合适的计算机可读程序代码中实现的部分。短语“计算机可读程序代码”包括任何类型的计算机代码，包括源代码、目标代码和可执行代码。短语“计算机可读介质”包括能够由计算机访问的任何类型的介质，诸如只读存储器(ROM)、随机存取存储器(RAM)、硬盘驱动器、高密度盘(CD)、数字视频盘(DVD)或任何其他类型的存储器。“非暂时性”计算机可读介质排除了传输短暂的电信号或其他信号的有线、无线、光学或其他通信链路。非暂时性计算机可读介质包括其中可以永久存储数据的介质以及其中可以存储数据并随后重写的介质，诸如可重写光盘或可擦除存储器设备。贯穿本专利文献提供了其他某些词语和短语的定义。本领域普通技术人员应该理解，在许多情况下(如果不是大多数情况)，这样的定义适用于这样定义的词语和短语的先前以及将来的使用。附图说明图1示出了用于实现电子设备的系统的示例性框图；图2示出了头戴式电子设备的示例性框图；图3是示出了与佩戴HMD的航空乘客的视角图相关联的可能关键点的图像；图4示出了电子设备和车辆系统的电子元件的示例性框图；图5示出了示出校正车辆引起的电子设备的方向改变的方法的示例性流程图；图6示出了示出检测激活转向校正的条件的方法的示例性流程图；图7示出了示出在转向校正期间使用计算机视觉来校正姿势的方法的示例性流程图；图8示出了示出建立车辆移动数据的方法的示例性流程图；以及图9示出了示出校正车辆引起的电子设备的方向改变的另一方法的示例性流程图。具体实施方式虽然说明书包括限定被认为是新颖的本专利技术的一个或多个实现的特征的权利要求，但是相信从结合附图的描述的考虑中将更好地理解电路和方法。虽然公开了各种电路和方法，但是应理解，电路和方法仅仅是本专利技术的布置的示例，其可以以各种形式实施。因此，本说明书中公开的具体结构和功能细节不应被解释为限制性的，而仅仅作为权利要求的基础，并且作为教导本领域技术人员以实质上任何适当的详细结构不同地采用本专利技术的布置的代表性基础。此外，本文中所使用的术语和短语不是限制性的，而是提供电路和方法的可理解的描述。HMD设备通常使用车载计算机或移动设备来渲染虚拟和增强的场景，但是依赖于HMD或移动设备中的传感器来进行头部取向跟踪。也就是说，这种设备不采用外部传感器进行头部位置跟踪。当乘坐在车辆中行驶并且车辆改变方向时，这种布置可能是一个问题。在虚拟世界中，场景将改变方向，因为HMD认为用户正在转头，而实际上是车辆正在转向。为了解决这个问题，可以检测潜在的方向改变，并且可以采用计算机视觉(CV)技术来补偿由车辆方向的改变而产生的错误信息。如果可用，可以使用全球定位系统(GPS)信息和路径信息来预测和精化何时采用CV技术。更具体地，可以针对方位位置检测优化CV技术。此外，可以建立过程以确定何时采用CV技术。如果GPS信息和路径信息可用，则该信息可以被用于增强转向事件的预测和跟踪。另外，还可以记录与路线相关联的车辆移动信息以重新使用或与其他HMD用户共享。可以采用CV技术来测量不是车辆的一部分的视觉提示，以增强对转向事件的跟踪。在一个实施例中，采用CV、GPS和路径信息来创建VR体验，其移动与车辆的移动绑定。实施例还可以用于增强现实(AR)或混合现实(M本文档来自技高网...

【技术保护点】
1.一种校正车辆引起的电子设备的方向改变的方法，包括：确定所述电子设备的第一中心姿势；确定何时由车辆导致所述电子设备的运动；使用传感器结合在处理器上操作的计算机视觉来跟踪场景内的至少一个关键点，以确定第二中心姿势；确定所述第二中心姿势是否在相对于所述第一中心姿势的容差内；以及当所述第二中心姿势和所述第一中心姿势之间存在差异时，调整所述第二中心姿势。

【技术特征摘要】
【国外来华专利技术】2016.03.24 US 62/312,860;2017.03.15 US 15/459,9161.一种校正车辆引起的电子设备的方向改变的方法，包括：确定所述电子设备的第一中心姿势；确定何时由车辆导致所述电子设备的运动；使用传感器结合在处理器上操作的计算机视觉来跟踪场景内的至少一个关键点，以确定第二中心姿势；确定所述第二中心姿势是否在相对于所述第一中心姿势的容差内；以及当所述第二中心姿势和所述第一中心姿势之间存在差异时，调整所述第二中心姿势。2.根据权利要求1所述的方法，其中，确定何时由车辆导致所述电子设备的运动包括确定所述车辆何时遵循预期的路径。3.根据权利要求2所述的方法，还包括确定何时即将发生转向，其中当转向即将发生时执行跟踪所述至少一个关键点。4.根据权利要求1所述的方法，其中，确定何时由车辆导致所述电子设备的运动包括评估GPS信号。5.根据权利要求1所述的方法，其中，确定何时由车辆导致所述电子设备的运动包括确定何时由所述车辆的转向导致所述电子设备的转向。6.根据权利要求5所述的方法，还包括确定所述车辆的转向的改变的速率是否在容差内。7.根据权利要求6所述的方法，其中，确定何时由车辆导致所述电子设备的运动包括执行多个HMD姿势的累积滤波。8.一种电子设备，包括：显示器；传感器，被配置为跟踪场景内的至少一个关键点；处理器，耦接到所述显示器和所述传感器，所述处理器被配置为：...

【专利技术属性】
技术研发人员：克里斯托弗·A·佩里，夏兰·罗奇福特，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：韩国,KR