AR内容的投屏方法、系统、电子设备和存储介质技术方案

本申请涉及一种AR内容的投屏方法，其中，该方法包括：第一终端通过相机模组数据流生成实景图，并通过渲染引擎将实景图与虚拟内容叠加，生成增强现实画面，其中，若第一终端通过跟踪相机获取位姿数据，在生成增强现实画面的过程中，基于预设流程将实景图和虚拟内容进行时空同步；第一终端，通过WebRTC通讯技术与第二终端建立无线串流通道，通过无线串流通道直接发送增强现实画面至第二终端，并指示第二终端同步展示增强现实画面通过本申请，解决了相关技术中AR投屏方法时空间不同步的问题，在无需额外硬件装置的情况下，实现了AR内容的投屏播放，并且能够保障AR投屏画面质量。并且能够保障AR投屏画面质量。并且能够保障AR投屏画面质量。

【技术实现步骤摘要】
AR内容的投屏方法、系统、电子设备和存储介质


[0001]本申请涉及增强现实领域，特别是涉及一种AR内容的投屏方法、系统、电子设备和存储介质。

技术介绍

[0002]随着AR(Argument Reality、增强现实)技术的不断发展，用户普遍希望能够录制和分享自身的AR内容，如何将AR内容录制以及投屏至其他终端，是本领域的迫切需求。
[0003]在相关技术中，应用较多的是基于VR(Virtual Reality，虚拟现实)的投屏技术，由于VR内容不涉及现实内容，因此也不存在虚实叠加导致时空错乱的问题，相较于AR投屏技术实现起来更为容易。
[0004]相关技术中的AR投屏内容，通过在AR终端设备一侧安装微摄像头，通过该微摄像头同时拍摄显示界面中的虚像和实像，并采用有线或无线的方式连接到外部显示设备并发送该拍摄图像，从而实现投屏播放。
[0005]但是，上述方案需要增加特定的设备(微摄像机)，该方法不仅需要额外的硬件成本，同时，由于微摄像机透过镜片拍摄虚像时虚像成像效果较差，并且微摄像机的安装角度很难保证虚实内容的空间一致本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种AR内容的投屏方法，其特征在于，所述方法包括：第一终端，通过相机模组数据流生成实景图，并通过渲染引擎将所述实景图与虚拟内容叠加，生成增强现实画面，其中，若所述第一终端通过跟踪相机获取位姿数据，在生成增强现实画面的过程中，基于预设流程将所述实景图和所述虚拟内容进行时空同步；所述第一终端，通过WebRTC通讯技术与第二终端建立无线串流通道，通过所述无线串流通道直接发送增强现实画面至所述第二终端，并指示所述第二终端同步展示所述增强现实画面。2.根据权利要求1所述的方法，其特征在于，所述第一终端通过RGB相机同时获取位姿数据以及拍摄实景图的情况下，直接通过渲染引擎将所述实景图与虚拟内容叠加，生成增强现实画面。3.根据权利要求1所述的方法，其特征在于，基于预设流程将所述实景图和所述虚拟内容进行时空同步，包括：在通过渲染引擎将所述实景图与虚拟内容叠加的过程中，对所述实景图和所述虚拟内容进行时间同步，以及，根据所述跟踪相机采集的位姿数据，将所述实景图和所述虚拟内容进行空间同步。4.根据权利要求3所述的方法，其特征在于，对所述实景图和所述虚拟内容进行时间同步，包括：通过硬件装置执行同步曝光，对所述实景图和所述虚拟内容进行时间同步，或者，获取所述实景图和所述虚拟内容的时间标记信息，基于所述时间标记信息，通过数据流软同步，实现所述实景图和所述虚拟内容的时间同步。5.根据权利要求2所述的方法，其特征在于，根据所述跟踪相机采集的位姿数据，将所述实景图和所述虚拟内容进行空间同步包括：获取所述跟踪相机和所述RGB相机之间的外参；根据所述外参，将所述跟踪相机的位姿数据转换到所述RGB相机，所述跟踪相机与所述RGB完成位姿绑定；所述渲染引擎中的虚拟相机，绑定所述跟踪相机采集的位姿数据，所述虚拟相机与所述RGB相机完成位姿绑定；在所述虚拟相机与所述RGB相机完成位姿绑定之后，通过渲染引擎将所述实景图与所述虚拟内容叠加，所述实景图和所述虚拟内容...

【专利技术属性】
技术研发人员：步青，张高明，苗壮，丛林，
申请(专利权)人：杭州易现先进科技有限公司，
类型：发明
国别省市：