【技术实现步骤摘要】
基于视觉变动分析的沙盘投影方法、装置、设备及介质
[0001]本专利技术涉及全息投影
,尤其涉及一种基于视觉变动分析的沙盘投影方法、装置、电子设备及计算机可读存储介质。
技术介绍
[0002]随着3D技术的持续发展,全息投影技术(Front
‑
projected Holographic Display)得到越来越多的关注和应用。全息投影技术是指利用干涉和衍射原理记录并再现物体真实的三维图像的技术,广泛应用于舞台表演、各类博物馆、主题公园、展览会等展览展示活动中。
[0003]在城市规划沙盘展示等展示活动中,通常基于全息投影技术进行3D沙盘展览,配合声音、灯光、烟雾等外部介质,给观众营造一种立体的、真实的沉浸式的感官效果,提升了展览效果。
[0004]通常在上述3D沙盘展览活动中,一般观众位置是比较固定的,大多数正对展台,且默认观众是不走动的,在3D沙盘投影过程中,投影的各项参数也是预先设定好的,例如,投影的角度、投影的分辨度等。但是当观众一旦发生移动,从不同的角度再去观看3D沙盘时,会 ...
【技术保护点】
【技术特征摘要】
1.一种基于视觉变动分析的沙盘投影方法,其特征在于,所述方法包括:采集3D沙盘投影空间的全景图像,获取当前预设时间段内的人群图像集合;利用预先训练的人体目标跟踪网络,识别所述人群图像集合中每张人群图像中的人体目标,提取每张所述人群图像的时序特征;根据所述人体目标标记每张所述人群图像中的人体目标遮蔽区域,将所述人体目标遮蔽区域映射到所述全景图像中,并利用每张所述人群图像的时序特征对映射后的遮蔽区域进行时序标注,得到遮蔽区域轨迹图;利用预先训练的人体位置预测模型,根据所述遮蔽区域轨迹图,预测预设的下一时间段内的人群移动方向,并根据所述人群移动方向调整预设的3D沙盘投影仪的投影方向;对每张所述人群图像中的人体目标的人脸区域进行标记,并计算每张所述人群图像中的人脸区域的平均尺寸;根据每张所述人群图像的人脸区域的平均尺寸,计算所述当前预设时间段内人群人脸尺寸变化幅度,并根据所述人脸尺寸变化幅度调整所述3D沙盘投影仪的投影距离。2.如权利要求1所述的基于视觉变动分析的沙盘投影方法,其特征在于,所述利用预先训练的人体目标跟踪网络,识别所述人群图像集合中每张人群图像中的人体目标,包括:利用所述预先训练的人体目标跟踪网络的编码层对每张所述人群图像进行分窗及向量转换,得到每个分窗对应的分窗向量矩阵;利用所述预先训练的人体目标跟踪网络的窗口注意机制对每个所述分窗向量矩阵进行特征提取,得到每个所述分窗向量矩阵对应的特征向量矩阵;利用所述预先训练的人体目标跟踪网络的窗口交互机制,对每个所述分窗向量对应的特征向量矩阵进行融合计算,得到全局特征集合;计算所述全局特征集合与预设的人体特征标签之间的匹配概率值,提取所述匹配概率值大于预设阈值的全局特征,得到人体特征集合;利用所述预先训练的人体目标跟踪网络的输出层在每张所述人群图像中对所述人体特征集合进行框选,得到每张所述人群图像中的人体目标。3.如权利要求1所述的基于视觉变动分析的沙盘投影方法,其特征在于,所述提取每张所述人群图像的时序特征,包括:获取每张所述人群图像的生成时间;对每个所述生成时间进行向量转换,得到对应人群图像的一维时间向量,将所述一维时间向量作为对应人群图像的时序特征。4.如权利要求1所述的基于视觉变动分析的沙盘投影方法,其特征在于,所述将所述人体目标遮蔽区域映射到所述全景图像中,包括:利用预设的全景图模型将所述全景图像转换为全景曲面图;生成所述全景曲面图的基准坐标系,并根据所述基准坐标系构建每张所述人群图像相对于所述全景曲面图的平移函数;按照每张所述人群图像的生成时间依次将对应的人群图像的人体目标遮蔽区域,根据所述平移函数平移到所述全景曲面图中的对应的位置;对所述全景曲面图中每两张相邻的人体目标遮蔽区域进行拼接和边缘融合,得到映射在所述全景曲面图中的遮蔽区域。
5.如权利要求1所述的基于视觉变动分析的沙盘投影方法,其特征在于,所述利用预先训练的人体位置预测模型,根据所述遮蔽区域轨迹图,预测预设的下一时间段内的人群移...
【专利技术属性】
技术研发人员:尚江伟,
申请(专利权)人:深圳市禾讯数字创意有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。