增强现实设备及电子设备的显示追踪方法和装置制造方法及图纸

本公开提供了一种增强现实设备的显示追踪方法，包括：获取增强现实设备所在物理空间的图像信息，该物理空间的图像信息包括另一电子设备的当前显示图像；识别物理空间的图像信息，得到另一电子设备的当前显示图像；基于该当前显示图像提取组成特征集的一个或多个特征；以及基于特征集与一个或多个参考特征集匹配对比的结果，确定当前的显示追踪位置，该显示追踪位置为增强现实设备展示虚拟图像的位置，一个参考特征集对应由基于另一电子设备第一时刻的显示图像提取的一个或多个参考特征组成，不同参考特征集对应由不同时刻的显示图像提取的参考特征组成。本公开还提供了一种增强现实设备的显示追踪装置以及一种电子设备的显示追踪方法和装置。

【技术实现步骤摘要】
增强现实设备及电子设备的显示追踪方法和装置
本公开涉及一种增强现实设备的显示追踪方法和装置，以及一种电子设备的显示追踪方法和装置。
技术介绍
随着科技的快速发展，将真实世界信息和虚拟世界信息“无缝”集成的新技术增强现实有望能够应用于更多场景中，以丰富现实世界，构建更加丰富和美好的世界。在实现本专利技术过程中，专利技术人发现现有技术中至少存在如下问题：现有的增强现实无标记跟踪技术中，通常都需要基于预先输入的图像生成离线模型作为目标图像的参考，然后识别增强现实设备的摄像头实时捕获的图像中的特征，并将该识别的特征与离线模型进行匹配对比，若存在匹配成功的特征，则说明该捕获的图像中与该特征对应的部分为目标图像，根据该目标图像相对于增强现实设备摄像头的三维坐标等信息对虚拟物体进行渲染、投影变换，得到虚拟物体正确的投影图像，然后将其叠加于捕获图像进行融合显示，得到增强效果。但此种方法以离线模型为参考，要求目标图像的结构和轮廓维持不变，且在目标或用户快速移动时，该跟踪技术的实时性差，因此，此方法对于目标图像的特征持续改变的情形(例如数字显示)则不再适用。
技术实现思路
本公开的一个方面提供了一种增强现实设备的显示追踪方法，包括：获取增强现实设备所在物理空间的图像信息，该物理空间的图像信息包括另一电子设备的当前显示图像；识别物理空间的图像信息，得到另一电子设备的当前显示图像；基于另一电子设备的当前显示图像，提取一个或多个特征，该一个或多个特征组成特征集；以及基于特征集与一个或多个参考特征集匹配对比的结果，确定当前的显示追踪位置，其中，显示追踪位置为增强现实设备展示虚拟图像的位置，一个参考特征集对应由基于另一电子设备第一时刻的显示图像提取的一个或多个参考特征组成，不同参考特征集对应由不同时刻的显示图像提取的参考特征组成。可选地，基于特征集与一个或多个参考特征集匹配对比的结果，确定当前的显示追踪位置包括：将特征集基于预设顺序依次与至少一个参考特征集进行匹配对比，直至得到至少一个匹配的特征或所述至少一个参考特征集都被匹配对比；以及基于匹配对比的结果，确定当前的显示追踪位置。可选地，基于匹配对比的结果，确定当前的显示追踪位置包括：在得到至少一个匹配的特征的情况下：将增强现实设备的投影画面中、与至少一个匹配的特征在另一电子设备的当前显示图像中的位置对应的位置作为当前的显示追踪位置；和/或，在至少一个匹配的特征是与预设顺序的第一个参考特征集的参考特征匹配的情况下：获取参考特征集，以更新预设顺序的第一个参考特征集；其中，获取的参考特征集包括：增强现实设备通过向另一电子设备发送第一获取请求获取的、另一电子设备基于其在接收第一获取请求的时刻的显示图像提取的一个或多个参考特征；或者，参考特征集包括：增强现实设备基于向另一电子设备发送第二获取请求获取的另一电子设备在接收第二获取请求时的显示图像，提取的一个或多个参考特征。可选地，基于匹配对比的结果，确定当前的显示追踪位置包括：在没有匹配的特征的情况下：将特征集中，与已存储的匹配特征表征同一物体的一个或多个特征确定为匹配的一个或多个特征；以及将增强现实设备的投影画面中、与匹配的一个或多个特征在另一电子设备的当前显示图像中的位置对应的位置作为当前的显示追踪位置，其中，已存储的匹配特征包括：基于获取当前显示图像之前获取的先前显示图像提取得到的特征集中匹配的至少一个特征。可选地，基于匹配对比的结果，确定当前的显示追踪位置包括：在没有匹配的特征的情况下，基于已存储的至少两个显示追踪位置，确定当前的显示追踪位置，其中，已存储的显示追踪位置包括：基于获取当前显示图像之前获取的先前显示图像提取得到的特征集中，匹配的至少一个特征得到的显示追踪位置。可选地，基于匹配对比的结果，确定当前的显示追踪位置包括：在没有匹配的特征的情况的持续时长不小于预设时长的情况下，获取参考特征集，以更新预设顺序的第一个参考特征集，其中，预设时长包括：根据显示图像得到参考特征集的时长；并且/或者，上述方法还包括：定期获取参考特征集，以定期更新预设顺序的第一个参考特征集，其中，获取的参考特征集包括：增强现实设备通过向另一电子设备发送第一获取请求获取的、另一电子设备基于其在接收第一获取请求的时刻的显示图像提取的一个或多个参考特征；或者，参考特征集包括：增强现实设备基于向另一电子设备发送第二获取请求获取的另一电子设备在接收第二获取请求时的显示图像，提取的一个或多个参考特征。本公开的另一方面提供了一种电子设备的显示追踪方法，包括：基于显示图像，提取一个或多个参考特征，该一个或多个参考特征组成参考特征集；以及向增强现实设备发送参考特征集，以使增强现实设备基于特征集与一个或多个参考特征集匹配对比的结果确定当前的显示追踪位置，该显示追踪位置为所述增强现实设备展示虚拟图像的位置，其中，特征集由增强现实设备基于获取的其所在物理空间的图像信息中电子设备的当前显示图像，提取的一个或多个特征组成，一个参考特征集对应由电子设备的第一时刻的显示图像生成，不同参考特征集对应由所述电子设备的不同时刻的显示图像生成。可选地，基于显示图像，提取一个或多个参考特征包括：电子设备在接收到增强现实设备的第一获取请求的情况下，基于其在接收第一获取请求的时刻的显示图像，提取一个或多个参考特征。本公开的另一方面提供了一种增强现实设备的显示追踪方法，包括：获取增强现实设备所在物理空间的图像信息，该物理空间的图像信息包括另一电子设备的当前显示图像；向另一电子设备发送物理空间的图像信息；以及自另一电子设备获取当前的显示追踪位置，其中，显示追踪位置为增强现实设备展示虚拟图像的位置，该显示追踪位置包括：另一电子设备根据其基于物理空间的图像信息包括的当前显示图像提取的特征集与一个或多个参考特征集匹配对比的结果，确定的显示追踪位置，一个参考特征集对应由另一电子设备基于其第一时刻的显示图像提取的一个或多个参考特征组成，不同参考特征集对应由另一电子设备基于其不同时刻的显示图像提取的参考特征组成。本公开的另一方面提供了一种电子设备的显示追踪方法，包括：接收增强现实设备发送的其所在物理空间的图像信息，该物理空间的图像信息包括电子设备的当前显示图像；识别物理空间的图像信息，得到电子设备的当前显示图像；基于当前显示图像，提取一个或多个特征，该一个或多个特征组成特征集；基于特征集与一个或多个参考特征集匹配对比的结果，确定当前的显示追踪位置；以及向增强现实设备发送显示追踪位置，其中，显示追踪位置为所述增强现实设备展示虚拟图像的位置，一个参考特征集对应由电子设备基于其第一时刻的显示图像提取的一个或多个参考特征组成，不同参考特征集对应由电子设备基于其不同时刻的显示图像提取的参考特征组成。可选地：基于特征集与一个或多个参考特征集匹配对比的结果，确定当前的显示追踪位置包括：将特征集基于预设顺序依次与至少一个参考特征集进行匹配对比，直至得到至少一个匹配的特征或至少一个参考特征集都被匹配对比；以及基于匹配对比的结果，确定当前的显示追踪位置。可选地，基于匹配对比的结果，确定当前的显示追踪位置包括：在得到至少一个匹配的特征的情况下：将增强现实设备的投影画面中、与至少一个匹配的特征在电子设备的当前显示图像中的位置对应的位置作为本文档来自技高网...

【技术保护点】
1.一种增强现实设备的显示追踪方法，包括：获取所述增强现实设备所在物理空间的图像信息，所述物理空间的图像信息包括另一电子设备的当前显示图像；识别所述物理空间的图像信息，得到所述另一电子设备的当前显示图像；基于所述另一电子设备的当前显示图像，提取一个或多个特征，所述一个或多个特征组成特征集；以及基于所述特征集与一个或多个参考特征集匹配对比的结果，确定当前的显示追踪位置，其中，所述显示追踪位置为所述增强现实设备展示虚拟图像的位置，其中，一个参考特征集对应由基于所述另一电子设备第一时刻的显示图像提取的一个或多个参考特征组成，不同参考特征集对应由不同时刻的显示图像提取的参考特征组成。

【技术特征摘要】
1.一种增强现实设备的显示追踪方法，包括：获取所述增强现实设备所在物理空间的图像信息，所述物理空间的图像信息包括另一电子设备的当前显示图像；识别所述物理空间的图像信息，得到所述另一电子设备的当前显示图像；基于所述另一电子设备的当前显示图像，提取一个或多个特征，所述一个或多个特征组成特征集；以及基于所述特征集与一个或多个参考特征集匹配对比的结果，确定当前的显示追踪位置，其中，所述显示追踪位置为所述增强现实设备展示虚拟图像的位置，其中，一个参考特征集对应由基于所述另一电子设备第一时刻的显示图像提取的一个或多个参考特征组成，不同参考特征集对应由不同时刻的显示图像提取的参考特征组成。2.根据权利要求1所述的方法，其中，基于所述特征集与一个或多个参考特征集匹配对比的结果，确定当前的显示追踪位置包括：将所述特征集基于预设顺序依次与至少一个参考特征集进行匹配对比，直至得到至少一个匹配的特征或所述至少一个参考特征集都被匹配对比；以及基于所述匹配对比的结果，确定当前的显示追踪位置。3.根据权利要求2所述的方法，其中，基于所述匹配对比的结果，确定当前的显示追踪位置包括：在得到至少一个匹配的特征的情况下：将所述增强现实设备的投影画面中、与所述至少一个匹配的特征在所述另一电子设备的当前显示图像中的位置对应的位置作为当前的显示追踪位置；和/或在所述至少一个匹配的特征是与预设顺序的第一个参考特征集的参考特征匹配的情况下，获取参考特征集，以更新所述预设顺序的第一个参考特征集，其中，获取的所述参考特征集包括：所述增强现实设备通过向所述另一电子设备发送第一获取请求获取的、所述另一电子设备基于其在接收所述第一获取请求的时刻的显示图像提取的一个或多个参考特征；或者，所述参考特征集包括：所述增强现实设备基于向所述另一电子设备发送第二获取请求获取的另一电子设备在接收所述第二获取请求时的显示图像，提取的一个或多个参考特征。4.根据权利要求2所述的方法，其中，基于所述匹配对比的结果，确定当前的显示追踪位置包括：在没有匹配的特征的情况下：将所述特征集中，与已存储的匹配特征表征同一物体的一个或多个特征确定为匹配的一个或多个特征；以及将所述增强现实设备的投影画面中、与所述匹配的一个或多个特征在所述另一电子设备的当前显示图像中的位置对应的位置作为当前的显示追踪位置，其中，所述已存储的匹配特征包括：基于获取所述当前显示图像之前获取的先前显示图像提取得到的特征集中匹配的至少一个特征。5.根据权利要求2所述的方法，其中，基于所述匹配对比的结果，确定当前的显示追踪位置包括：在没有匹配的特征的情况下，基于已存储的至少两个显示追踪位置，确定当前的显示追踪位置，其中，所述已存储的显示追踪位置包括：基于获取所述当前显示图像之前获取的先前显示图像提取得到的特征集中，匹配的至少一个特征得到的显示追踪位置。6.根据权利要求2所述的方法，其中：基于所述匹配对比的结果，确定当前的显示追踪位置包括：在没有匹配的特征的情况的持续时长不小于预设时长的情况下，获取参考特征集，以更新所述预设顺序的第一个参考特征集，其中，所述预设时长包括：根据所述显示图像得到参考特征集的时长；并且/或者所述方法还包括：定期获取参考特征集，以定期更新所述预设顺序的第一个参考特征集，其中，获取的所述参考特征集包括：所述增强现实设备通过向所述另一电子设备发送第一获取请求获取的、所述另一电子设备基于其在接收所述第一获取请求的时刻的显示图像提取的一个或多个参考特征；或者，所述参考特征集包括：所述增强现实设备基于向所述另一电子设备发送第二获取请求获取的另一电子设备在接收所述第二获取请求时的显示图像，提取的一个或多个参考特征。7.一种电子设备的显示追踪方法，包括：接收增强现实设备发送的其所在物理空间的图像信息，所述物理空间的图像信息包括所述电子设备的当前显示图像；识别所述物理空间的图像信息，得到所述电子设备的当前显示图像；基于所述当前显示图像，提取一个或多个特征，所述一个或多个特征组成特征集；...

【专利技术属性】
技术研发人员：黄大卫，
申请(专利权)人：联想北京有限公司，
类型：发明
国别省市：北京,11