三维虚拟特效的生成方法、装置、计算机设备及存储介质制造方法及图纸

技术编号:28784274 阅读:13 留言:0更新日期:2021-06-09 11:18
本公开提供了一种三维虚拟特效的生成方法、装置、计算机设备及存储介质,其中,该方法包括:获取对目标运动场馆进行采集得到的目标图像;基于目标图像,生成与目标运动场馆匹配的三维场馆模型,其中,三维场馆模型包括目标运动场馆中至少一个功能区域的特征数据,每个功能区域的特征数据分别标识有对应功能区域的类别标注信息;基于至少一个功能区域分别对应的类别标注信息,为目标运动场馆的至少一个功能区域匹配虚拟特效,得到目标运动场馆的三维虚拟特效。维虚拟特效。维虚拟特效。

【技术实现步骤摘要】
三维虚拟特效的生成方法、装置、计算机设备及存储介质


[0001]本公开涉及增强现实(Augmented Reality,AR)
,具体而言,涉及一种三维虚拟特效的生成方法、装置、计算机设备及存储介质。

技术介绍

[0002]AR技术是一种将虚拟信息与真实世界融合的技术,运用了多媒体、三维建模等多种技术手段,将计算机生成的虚拟图像信息模拟仿真后应用于真实世界中向用户展示,在虚拟场景展示、场景导览等领域应用广泛。当前针对大型场馆生成的三维虚拟特效的匹配度较差。

技术实现思路

[0003]本公开实施例至少提供一种三维虚拟特效的生成方法、装置、计算机设备及存储介质。
[0004]第一方面,本公开实施例提供了一种三维虚拟特效的生成方法,包括:获取对目标运动场馆进行采集得到的目标图像;基于所述目标图像,生成与所述目标运动场馆匹配的三维场馆模型,其中,所述三维场馆模型包括所述目标运动场馆中至少一个功能区域的特征数据,每个所述功能区域的特征数据分别标识有对应所述功能区域的类别标注信息;基于所述至少一个功能区域分别对应的所述类别标注信息,为所述目标运动场馆的至少一个功能区域匹配虚拟特效,得到所述目标运动场馆的三维虚拟特效。
[0005]这样,由于目标运动场馆的三维虚拟特效是根据目标运动场馆的不同功能区域对应生成的,因此得到的三维虚拟特效可以更细致、和更具有针对性的匹配到目标运动场馆的不同功能区域,并且三维虚拟特效在功能区域层级有更明确的划分,使得生成的虚拟三维特效与目标运动场馆的匹配度更高。/>[0006]一种可选的实施方式中,所述基于所述目标图像,生成与所述目标运动场馆匹配的三维场馆模型,包括:对所述目标图像进行特征点提取,得到所述目标图像中的特征点;确定所述目标图像中特征点对应的功能区域的类别标注信息;基于所述目标图像、以及所述特征点对应的功能区域的类别标注信息,生成所述目标运动场馆的三维场馆模型。
[0007]这样,通过对目标图像进行特征点提取得到的特征点来表征运动场馆内各功能区域,简化了各功能区域在目标运动场馆内具体位置的表达方式、和数据量,进而在基于目标图像、以及特征点对应的功能区域的类别标注信息生成目标运动场馆的三维场馆模型时,处理更简单,效率更高。
[0008]一种可选的实施方式中,所述确定所述目标图像中特征点对应的功能区域的类别标注信息,包括:基于所述特征点与所述目标图像中像素点之间的映射关系、以及对所述目标图像中对各所述功能区域的原始标注信息,得到所述目标图像中各特征点分别对应的功能区域的类别标注信息。
[0009]这样,利用目标图像中的特征点进行识别,相较于目标图像中的像素点以及对应
目标运动场馆中的点云点数据量更少,可以在有代表性地表示目标图像中原始数据的同时,有效的提升处理的速度。此外,利用目标图像的原始标注信息得到目标图像中不同特征点分别对应的功能区域的类别标注信息,可以对不同的特征点进行准确的分类标注。
[0010]一种可选的实施方式中,所述三维场馆模型中每个所述功能区域的特征数据包括每个所述功能区域的点云点的数据;所述基于所述目标图像、以及所述特征点对应的功能区域的类别标注信息,生成所述目标运动场馆的三维场馆模型,包括:基于所述目标图像,对所述目标运动场馆进行三维重建,得到在同一功能区域中与所述特征点对应的点云点在三维场馆模型中的坐标值;以及,基于所述特征点对应的功能区域的类别标注信息,确定在同一功能区域中与所述特征点对应的点云点的类别标注信息。
[0011]这样,由于特征点对应的功能区域的类别标注信息较为准确,因此利用特征点对应的功能区域的类别信息、以及特征点与点云点之间的对应的关系确定统一功能区域中与特征点对应的点云点的类别标注信息时,确定的点云点的类别标注信息也更为准确。
[0012]一种可选的实施方式中,所述获取所述目标图像,包括:获取位于所述目标运动场馆内的多个功能区域的摄像头采集的视频流;从各功能区域的所述视频流中,选择各功能区域在同一时间戳下采集的所述目标图像。
[0013]这样,利用多个摄像头对目标运动场馆内的多个功能区域进行采集,可以避免出现摄像死角,使得采集得到的目标运动场馆对应的目标图像对目标运动场馆中的多个功能区域拍摄更完整;并且,利用对同一区域拍摄的两个摄像头,即可以确定区域中的点云点,因此还可以不使用广角摄像头或者深度摄像头,也即对摄像头的要求较低,从而可以降低模型重建的设备成本。
[0014]一种可选的实施方式中,所述从各功能区域的所述视频流中,选择各功能区域在同一时间戳下采集的所述目标图像,包括:基于所述视频流中各帧视频帧图像的时间戳,从各功能区域的所述视频流中,获取多个图像组;其中,每个图像组中包括在同一时间戳下采集的各功能区域的备选视频帧图像;从所述多个图像组中,确定备选视频帧图像均满足预设图像质量条件的目标图像组,并将所述目标图像组中的备选视频帧图像确定为所述目标图像。
[0015]这样,可以获取到质量较高的目标图像,以使后续对目标图像进行处理时更容易,且得到的处理结果更加准确。此外,利用时间戳确定不同摄像头分别对应的一组图像组,可以有效的避免在拍摄中摄像头的位姿变化或者场景变化对目标图像造成的影响。
[0016]一种可选的实施方式中,所述基于所述至少一个功能区域分别对应的所述类别标注信息,为所述目标运动场馆的至少一个功能区域匹配虚拟特效,得到所述目标运动场馆的三维虚拟特效,包括:基于所述类别标注信息所表征的区域类别、以及所述至少一个功能区域分别在所述三维场馆模型中的坐标值,为所述至少一个功能区域分别匹配与所述区域类别对应的虚拟特效,生成所述目标运动场馆的三维虚拟特效。
[0017]这样,即能够为目标运动场馆的不同区域确定对应的三维虚拟特效,使得生成的目标运动场馆的三维虚拟特效与目标运动场馆中的各个功能区域在针对性更强的同时,具有更高的匹配度。
[0018]一种可选的实施方式中,还包括:在AR设备中展示所述目标运动场馆的三维虚拟特效;响应于对指定类型的三维虚拟特效的触发操作,控制所述AR设备中展示调整所述指
定类型的三维虚拟特效的展示效果。
[0019]这样,通过展示三维虚拟特效,并响应对不同类型三维虚拟特效的触发,还可以提升目标运动场馆和触发三维虚拟特效的用户之间的互动性。同时,不同类型的三维虚拟特效,还可以提升三维虚拟特效内容的丰富性和多样性。
[0020]第二方面,本公开实施例还提供一种三维虚拟特效的生成装置,包括:
[0021]获取模块,用于获取对目标运动场馆进行采集得到的目标图像;第一生成模块,用于基于所述目标图像,生成与所述目标运动场馆匹配的三维场馆模型,其中,所述三维场馆模型包括所述目标运动场馆中至少一个功能区域的特征数据,每个所述功能区域的特征数据分别标识有对应所述功能区域的类别标注信息;第二生成模块,用于基于所述至少一个功能区域分别对应的所述类别标注信息,为所述目标运动场馆的至少一个功能区域匹配虚拟特效,本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种三维虚拟特效的生成方法,其特征在于,包括:获取对目标运动场馆进行采集得到的目标图像;基于所述目标图像,生成与所述目标运动场馆匹配的三维场馆模型,其中,所述三维场馆模型包括所述目标运动场馆中至少一个功能区域的特征数据,每个所述功能区域的特征数据分别标识有对应所述功能区域的类别标注信息;基于所述至少一个功能区域分别对应的所述类别标注信息,为所述目标运动场馆的至少一个功能区域匹配虚拟特效,得到所述目标运动场馆的三维虚拟特效。2.根据权利要求1所述的生成方法,其特征在于,所述基于所述目标图像,生成与所述目标运动场馆匹配的三维场馆模型,包括:对所述目标图像进行特征点提取,得到所述目标图像中的特征点;确定所述目标图像中特征点对应的功能区域的类别标注信息;基于所述目标图像、以及所述特征点对应的功能区域的类别标注信息,生成所述目标运动场馆的三维场馆模型。3.根据权利要求1或2所述的生成方法,其特征在于,所述确定所述目标图像中特征点对应的功能区域的类别标注信息,包括:基于所述特征点与所述目标图像中像素点之间的映射关系、以及对所述目标图像中对各所述功能区域的原始标注信息,得到所述目标图像中各特征点分别对应的功能区域的类别标注信息。4.根据权利要求2所述的生成方法,其特征在于,所述三维场馆模型中每个所述功能区域的特征数据包括每个所述功能区域的点云点的数据;所述基于所述目标图像、以及所述特征点对应的功能区域的类别标注信息,生成所述目标运动场馆的三维场馆模型,包括:基于所述目标图像,对所述目标运动场馆进行三维重建,得到在同一功能区域中与所述特征点对应的点云点在三维场馆模型中的坐标值;以及,基于所述特征点对应的功能区域的类别标注信息,确定在同一功能区域中与所述特征点对应的点云点的类别标注信息。5.根据权利要求1

4任一项所述的生成方法,其特征在于,获取所述目标图像,包括:获取位于所述目标运动场馆内的多个功能区域的摄像头采集的视频流;从各功能区域的所述视频流中,选择各功能区域在同一时间戳下采集的所述目标图像。6.根据权利要求5所述的生成方法,其特征在于,所述从各功能区域的所述视频流中,选择各功能区域在同一时间戳下采集的所述目标图像,包括:基于所...

【专利技术属性】
技术研发人员:侯欣如姜翰青刘文韬焦飞冯友计欧华富王鼎禄
申请(专利权)人:北京市商汤科技开发有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1