模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法技术

技术编号:34428109 阅读:43 留言:0更新日期:2022-08-06 16:02
本发明专利技术公开了模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法,方法包括:将媒体素材添加至以相对坐标系建立的三维虚拟空间采用模板化编辑制作生成虚拟仿真内容;在某个实景中初次使用该虚拟仿真内容时识别实景图像的特定标记物建立绝对坐标系,并得到虚拟物体在绝对坐标系的校正参数;根据虚拟物体生成对应实景物体的掩膜,结合校正参数生成与实景对应的渲染图像,获取手柄按键信号并进行模板内容的交互操作,渲染图像输出至头戴设备的显示器进行显示。本发明专利技术属于VR/AR技术领域,通过校正参数对虚拟仿真内容进行位置和姿态校正,通过生成掩膜对实景图像进行分割以生成渲染图像,大幅提高了虚拟仿真内容的制作效率。大幅提高了虚拟仿真内容的制作效率。大幅提高了虚拟仿真内容的制作效率。

【技术实现步骤摘要】
模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法


[0001]本专利技术涉及VR/AR
,尤其涉及一种模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法。

技术介绍

[0002]随着虚拟现实技术的逐步发展,虚拟现实技术逐渐应用到越来越多的智能设备中,如在MR(混合现实,Mixed Reality)设备中可对虚拟仿真内容进行逼真地呈现。然而,现有的MR设备在对虚拟仿真内容进行制作时,通常需要先对实景中的实际物体进行坐标及尺寸的测量,再根据测量数据进行虚拟场景搭建、虚拟物体建模制作等过程,并最终制作得到可进行呈现的虚拟仿真内容。现有技术方法中制作虚拟仿真内容并进行呈现的技术方法,需要对各种实际物体进行测量,因此导致制作过程较为繁琐,影响了虚拟仿真内容制作的效率。因此,现有的技术方法存在无法高效制作得到可在MR设备中进行呈现的虚拟仿真内容的问题。

技术实现思路

[0003]本专利技术实施例提供了一种模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法、装置、设备及介质,旨在解决现有技术方法中所存在的无法高效制作得到可在MR设备中进行呈现的虚拟仿真内容的问题。
[0004]第一方面,本专利技术实施例提供了一种模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法,所述方法包括:
[0005]采用相对坐标系构建三维虚拟空间,根据预置参数值将媒体素材添加至该三维虚拟空间中,并采用模板化编辑制作生成虚拟仿真内容;
[0006]获取所述头戴设备的第一位置姿态信息及所述手柄的第二位置姿态信息;
[0007]根据所述第一位置姿态信息识别实景图像中的特定标记物建立绝对坐标系,并匹配所述虚拟仿真内容中相应虚拟物体,得到校正参数,实现绝对坐标构建的三维虚拟空间的虚拟仿真;
[0008]针对所述实景图像中的实景物体构建对应的虚拟物体,调整虚拟物体的位置、姿态及大小以匹配实景物体,从而生成实景物体的对应的掩膜,进而实现虚拟物体和实景物体的穿越遮挡;
[0009]获取所述手柄输入的手柄按键信息并根据所述第二位置姿态信息,通过虚拟仿真模板参数及虚拟仿真内容参数对所述手柄按键信息进行逻辑判断,得到对应的逻辑判断结果;
[0010]根据所述校正参数、所述虚拟仿真内容、所述虚拟仿真模板参数及所述掩膜生成的虚拟场景与所述实景图像叠加生成最终渲染图像并输出至所述头戴设备的显示器进行显示。
[0011]第二方面,本专利技术实施例提供了一种模板化编辑的虚拟内容在MR/AR头戴设备中
交互呈现装置,其包括:
[0012]虚拟仿真内容生成单元,用于采用相对坐标系构建三维虚拟空间,根据预置参数值将媒体素材添加至该三维虚拟空间中,并采用模板化编辑制作生成虚拟仿真内容;
[0013]姿态位置信息获取单元,用于获取所述头戴设备的第一位置姿态信息及所述手柄的第二位置姿态信息;
[0014]校正参数获取单元,用于根据所述第一位置姿态信息识别实景图像中的特定标记物建立绝对坐标系,并匹配所述虚拟仿真内容中相应虚拟物体,得到校正参数,实现绝对坐标构建的三维虚拟空间的虚拟仿真;
[0015]掩膜生成单元,用于针对所述实景图像中的实景物体构建对应的虚拟物体,调整虚拟物体的位置、姿态及大小以匹配实景物体,从而生成实景物体的对应的掩膜,进而实现虚拟物体和实景物体的穿越遮挡;
[0016]逻辑判断结果获取单元,用于获取所述手柄输入的手柄按键信息并根据所述第二位置姿态信息,通过虚拟仿真模板参数及虚拟仿真内容参数对所述手柄按键信息进行逻辑判断,得到对应的逻辑判断结果;
[0017]图像渲染单元,用于根据所述校正参数、所述虚拟仿真内容、所述虚拟仿真模板参数及所述掩膜生成的虚拟场景与所述实景图像叠加生成最终渲染图像并输出至所述头戴设备的显示器进行显示。
[0018]第三方面,本专利技术实施例又提供了一种计算机设备,其包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述第一方面所述的模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法。
[0019]第四方面,本专利技术实施例还提供了一种计算机可读存储介质,其中所述计算机可读存储介质存储有计算机程序,所述计算机程序当被处理器执行时使所述处理器执行上述第一方面所述的模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法。
[0020]本专利技术实施例提供了一种模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法及装置。将媒体素材添加至以相对坐标系建立的三维虚拟空间采用模板化编辑制作生成虚拟仿真内容;在某个实景中初次使用该虚拟仿真内容时识别实景图像的特定标记物建立绝对坐标系,并得到虚拟物体在绝对坐标系的校正参数;根据虚拟物体生成对应实景物体的掩膜,结合校正参数生成与实景对应的渲染图像,获取手柄按键信号并进行模板内容的交互操作,渲染图像输出至头戴设备的显示器进行显示。上述方法中,通过校正参数对虚拟仿真内容进行位置和姿态校正,通过生成掩膜对实景图像进行分割,从而将虚拟物体对应添加至实景图像中以生成渲染图像,无需现场测量每个实景物体的精确摆放位置及姿态参数,大幅提高了虚拟仿真内容的制作效率。
附图说明
[0021]为了更清楚地说明本专利技术实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0022]图1为本专利技术实施例提供的模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法的流程示意图;
[0023]图2为本专利技术实施例提供的模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法的应用场景示意图;
[0024]图3为本专利技术实施例提供的模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法的子流程示意图;
[0025]图4为本专利技术实施例提供的模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法的另一子流程示意图;
[0026]图5为本专利技术实施例提供的模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法的又一子流程示意图;
[0027]图6为本专利技术实施例提供的模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法的再一子流程示意图;
[0028]图7为本专利技术实施例提供的模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法的另一流程示意图;
[0029]图8为本专利技术实施例提供的模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法的后一子流程示意图;
[0030]图9为本专利技术实施例提供的模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现装置的示意性框图;
[0031]图10为本专利技术实施例提供的计算机设备的示意性框图。
具体实施方式
[0032]下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法,其特征在于,所述方法应用于渲染单元中,所述渲染单元与头戴设备及手柄建立网络连接以实现数据信息的传输,所述方法包括:采用相对坐标系构建三维虚拟空间,根据预置参数值将媒体素材添加至该三维虚拟空间中,并采用模板化编辑制作生成虚拟仿真内容;获取所述头戴设备的第一位置姿态信息及所述手柄的第二位置姿态信息;根据所述第一位置姿态信息识别实景图像中的特定标记物建立绝对坐标系,并匹配所述虚拟仿真内容中相应虚拟物体,得到校正参数,实现绝对坐标构建的三维虚拟空间的虚拟仿真;针对所述实景图像中的实景物体构建对应的虚拟物体,调整虚拟物体的位置、姿态及大小以匹配实景物体,从而生成实景物体的对应的掩膜,进而实现虚拟物体和实景物体的穿越遮挡;获取所述手柄输入的手柄按键信息并根据所述第二位置姿态信息,通过虚拟仿真模板参数及虚拟仿真内容参数对所述手柄按键信息进行逻辑判断,得到对应的逻辑判断结果;根据所述校正参数、所述虚拟仿真内容、所述虚拟仿真模板参数及所述掩膜生成的虚拟场景与所述实景图像叠加生成最终渲染图像并输出至所述头戴设备的显示器进行显示。2.根据权利要求1所述的模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法,其特征在于,所述采用相对坐标系构建三维虚拟空间,根据预置参数值将媒体素材添加至该三维虚拟空间中,并采用模板化编辑制作生成虚拟仿真内容,包括:在所述三维虚拟空间中以相对坐标系建立对应的虚拟空间坐标系;根据所述预置参数值将媒体素材添加至所述虚拟空间坐标系以生成虚拟物体;所述预置参数值包括各媒体素材的位置、姿态、大小;所述媒体素材包括图片、视频、flash、网页、流媒体、3d模型、动画、声音;根据预设的逻辑关系及状态变化信息生成添加至所述虚拟空间坐标系中各虚拟物体的属性连接、属性仿真、组合动画及脚本;根据预设的交互参数设定所述虚拟空间坐标系中各虚拟物体的交互触发点、交互逻辑、交互操作类型,以生成所述虚拟仿真内容。3.根据权利要求1或2所述的模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法,其特征在于,所述实景图像为所述头戴设备的摄像头拍摄并输出至渲染单元的实景图像,所述根据所述第一位置姿态信息识别实景图像中的特定标记物建立绝对坐标系,并匹配所述虚拟仿真内容中相应虚拟物体,得到校正参数,实现绝对坐标构建的三维虚拟空间的虚拟仿真,包括:识别所述实景图像中的多个特定标记物,以得到每一所述特定标记物对应的位置信息;将各所述特定标记物作为坐标原点以根据各所述特定标记物的位置信息建立标记物坐标系;将所述实景图像中特定标记物与所述虚拟仿真内容中的虚拟物体进行形状匹配,以确定所述虚拟仿真内容中与所述特定标记物形状相同的虚拟物品的匹配关系;根据所述匹配关系计算所述三维虚拟空间的虚拟空间坐标系与所述标记物坐标系对
应的变换矩阵,所述变换矩阵由校正参数组成。4.根据权利要求1所述的模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法,其特征在于,所述针对所述实景图像中的实景物体构建对应的虚拟物体,调整虚拟物体的位置、姿态及大小以匹配实景物体,从而生成实景物体的对应的掩膜,进而实现虚拟物体和实景物体的穿越遮挡,包括:确定所述虚拟仿真内容中与所述实景图像中的第一物体对应的目标虚拟物体;所述第一物体为所述实景图像中与背景分割的物体;根据所述目标虚拟物体在所述虚拟仿真内容中的3D模型生成与所述第一物体对应的掩膜;所述虚拟物体不可见。5.根据权利要求1所述的模板化编辑的虚拟内容在MR/AR头戴设备中交互呈现方法,其特征在于,...

【专利技术属性】
技术研发人员:刘玉婷温晓晴
申请(专利权)人:深圳迪乐普数码科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1