【技术实现步骤摘要】
本专利技术涉及增强现实，尤其涉及一种基于增强现实技术的多媒体展示系统及方法。
技术介绍
1、增强现实技术是一种将虚拟内容与现实世界融合的技术，通过显示设备在真实环境中叠加虚拟元素，使用户能够在现实中与虚拟元素进行互动，如游戏、教育、医疗等等，但为了能够使多媒体展示的内容更加生动，需要将虚拟内容与现实世界相结合，创造出更加生动、有趣、沉浸的展示体验。
2、现有的传统多媒体展示是通过屏幕或投影仪等设备呈现，可以通过播放视频、显示图片、播放音频等方式来呈现多种形式和内容的信息，不能将虚拟内容与现实环境融合，用户只能被动地接收展示内容，导致用户不能在现实中与虚拟元素进行互动，从而对进行多媒体展示时的准确性较低。
技术实现思路
1、本专利技术提供一种基于增强现实技术的多媒体展示系统及方法，其主要目的在于解决进行多媒体展示时的准确性较低的问题。
2、为实现上述目的，本专利技术提供的一种基于增强现实技术的多媒体展示系统，所述系统包括环境图像数据识别模块、环境物体链接图构建模块、三维虚拟数字影像生成模块、可视化界面映射模块及多媒体实时展示界面展示模块，其中，
3、所述环境图像数据识别模块，用于获取现实世界环境的环境图像数据，利用预设的图像识别算法识别所述环境图像数据中的目标环境物体；
4、所述环境物体链接图构建模块，用于提取所述目标环境物体的位置坐标，提取所述目标环境物体的语义信息，根据所述语义信息确定所述目标环境物体之间的关联性，根据所述位置坐标、
5、所述三维虚拟数字影像生成模块，用于根据预设的时间窗口检测所述环境图像数据的图像状态，根据所述图像状态及所述环境物体链接图生成所述环境图像数据对应的三维虚拟数字影像；
6、所述可视化界面映射模块，用于通过预设的三维映射算法计算所述三维虚拟数字影像与预设的三维空间多媒体信息标识之间的相对位置关系，根据所述相对位置关系将所述三维虚拟数字影像映射至可视化界面，其中所述通过预设的三维映射算法计算所述三维虚拟数字影像与预设的三维空间多媒体信息标识之间的相对位置关系时，具体用于：
7、任一获取所述三维虚拟数字影像的虚拟坐标，任一获取所述三维空间多媒体信息标识的界面坐标；通过如下的三维映射算法计算所述虚拟坐标与所述界面坐标之间的变换关系：
8、
9、其中，ub为所述界面坐标中的横坐标，vb为所述界面坐标中的纵坐标，e为畸变因子，α为比例参数，ua为所述虚拟坐标中的横坐标，va为所述虚拟坐标中的纵坐标，u0为光学畸变的中心横坐标，v0为光学畸变的中心纵坐标；
10、根据所述变换关系确定所述相对位置关系；
11、所述多媒体实时展示界面展示模块，用于利用预设的多交互通道及预设的交互任务对所述可视化界面的三维虚拟数字影像进行实时交互，得到多媒体实时展示界面。
12、可选地，所述环境图像数据识别模块在利用预设的图像识别算法识别所述环境图像数据中的目标环境物体时，具体用于：
13、对所述环境图像数据进行图像增强处理，得到环境增强图像数据；
14、利用预设的图像识别算法中的卷积层提取所述环境增强图像数据的第一环境特征；
15、利用预设的图像识别算法中的池化层对所述第一环境特征进行池化操作，得到第二环境特征；
16、利用预设的图像识别算法中的全连接对所述第二环境特征进行特征分类，得到目标特征类别；
17、根据所述目标特征类别确定所述环境图像数据中的目标环境物体。
18、可选地，所述环境物体链接图构建模块在根据所述语义信息确定所述目标环境物体之间的关联性时，具体用于：
19、根据所述语义信息对所述目标环境物体对应的目标像素分配语义标签，得到目标环境物体标签；
20、根据所述目标环境物体标签生成所述目标环境物体的语义图；
21、根据所述语义图确定所述目标环境物体的层次因子；
22、通过所述层次因子确定所述目标环境物体之间的关联性。
23、可选地，所述环境物体链接图构建模块在根据所述位置坐标、所述关联性及预设的物体属性构建所述环境图像数据对应的环境物体链接图时，具体用于：
24、将所述环境图像数据中的目标环境物体确定为目标节点；
25、根据所述关联性创建所述目标节点的关联连接关系；
26、按照所述位置坐标及所述关联连接关系将所述目标节点连接，得到节点连接图；
27、逐一将所述物体属性分配至所述节点连接图中的目标节点中，得到所述环境图像数据对应的环境物体链接图。
28、可选地，所述三维虚拟数字影像生成模块在根据预设的时间窗口检测所述环境图像数据的图像状态时，具体用于：
29、获取所述环境图像数据的时间序列；
30、根据所述时间窗口检测所述时间序列对应的环境图像数据中的关键特征；
31、逐一将所述关键特征进行特征比对，得到特征比对逻辑值；
32、当所述特征比对逻辑值等于预设的比对阈值时，将所述环境图像数据的图像状态确定为静态图像状态；
33、当所述特征比对逻辑值不等于预设的比对阈值时，将所述环境图像数据的图像状态确定为动态图像状态。
34、可选地，所述三维虚拟数字影像生成模块在根据所述图像状态及所述环境物体链接图生成所述环境图像数据对应的三维虚拟数字影像时，具体用于：
35、当所述图像状态为动态图像状态时，根据所述环境图像数据的时间序列提取第一环境图像数据及第二环境图像数据；
36、提取所述第一环境图像数据的第一特征点，提取所述第二环境图像数据第二特征点；
37、根据所述第一特征点的属性生成所述第一特征点对应的第一特征向量，根据所述第二特征点的属性生成所述第二特征点对应的第二特征向量；
38、将所述第一特征向量与所述第二特征向量进行匹配，得到匹配特征点；
39、通过所述匹配特征点及所述环境物体链接图确定所述第一环境图像数据与所述第二环境图像之间的最优融合线，其中所述最优融合线计算公式为：
40、
41、其中，e为所述最优融合线，min为最小值函数，li为第i个阶段的决策数量指标，ui为第i个阶段的初始点，oi为第i个阶段的终止点，n为总阶段；
42、根据所述最优融合线将所述第一环境图像数据与所述第二环境图像数据进行融合，得到三维虚拟数字影像。
43、可选地，所述三维虚拟数字影像生成模块在提取所述第一环境图像数据的第一特征点时，具体用于：
44、根据预设的高斯函数构建所述第一环境图像数据的尺度空间函数，其中所述尺度空间函数为：
45、l(x,y,δ)＝g(x,y,δ)×j(x,y)
46、其中，l为所述尺度空间函数，g为本文档来自技高网...
【技术保护点】
1.一种基于增强现实技术的多媒体展示系统，其特征在于，所述系统包括环境图像数据识别模块、环境物体链接图构建模块、三维虚拟数字影像生成模块、可视化界面映射模块及多媒体实时展示界面展示模块，其中，
2.如权利要求1所述的基于增强现实技术的多媒体展示系统，其特征在于，所述环境图像数据识别模块在利用预设的图像识别算法识别所述环境图像数据中的目标环境物体时，具体用于：
3.如权利要求1所述的基于增强现实技术的多媒体展示系统，其特征在于，所述环境物体链接图构建模块在根据所述语义信息确定所述目标环境物体之间的关联性时，具体用于：
4.如权利要求1所述的基于增强现实技术的多媒体展示系统，其特征在于，所述环境物体链接图构建模块在根据所述位置坐标、所述关联性及预设的物体属性构建所述环境图像数据对应的环境物体链接图时，具体用于：
5.如权利要求1所述的基于增强现实技术的多媒体展示系统，其特征在于，所述三维虚拟数字影像生成模块在根据预设的时间窗口检测所述环境图像数据的图像状态时，具体用于：
6.如权利要求1所述的基于增强现实技术的多媒体展示系统
7.如权利要求6所述的基于增强现实技术的多媒体展示系统，其特征在于，所述三维虚拟数字影像生成模块在提取所述第一环境图像数据的第一特征点时，具体用于：
8.如权利要求1所述的基于增强现实技术的多媒体展示系统，其特征在于，所述可视化界面映射模块在根据所述相对位置关系将所述三维虚拟数字影像映射至可视化界面时，具体用于：
9.如权利要求1所述的基于增强现实技术的多媒体展示系统，其特征在于，所述多媒体实时展示界面展示模块在利用预设的多交互通道及预设的交互任务对所述可视化界面的三维虚拟数字影像进行实时交互，得到多媒体实时展示界面时，具体用于：
10.一种基于增强现实技术的多媒体展示系统的运行方法，其特征在于，用于执行如权利要求1-9中任一项所述的基于增强现实技术的多媒体展示系统，所述方法包括：
...【技术特征摘要】
1.一种基于增强现实技术的多媒体展示系统，其特征在于，所述系统包括环境图像数据识别模块、环境物体链接图构建模块、三维虚拟数字影像生成模块、可视化界面映射模块及多媒体实时展示界面展示模块，其中，
2.如权利要求1所述的基于增强现实技术的多媒体展示系统，其特征在于，所述环境图像数据识别模块在利用预设的图像识别算法识别所述环境图像数据中的目标环境物体时，具体用于：
3.如权利要求1所述的基于增强现实技术的多媒体展示系统，其特征在于，所述环境物体链接图构建模块在根据所述语义信息确定所述目标环境物体之间的关联性时，具体用于：
4.如权利要求1所述的基于增强现实技术的多媒体展示系统，其特征在于，所述环境物体链接图构建模块在根据所述位置坐标、所述关联性及预设的物体属性构建所述环境图像数据对应的环境物体链接图时，具体用于：
5.如权利要求1所述的基于增强现实技术的多媒体展示系统，其特征在于，所述三维虚拟数字影像生成模块在根据预设的时间窗口检测所述环境图像数据的图像状态时，具体用于：
<...【专利技术属性】
技术研发人员：孙伟杰，
申请(专利权)人：深圳微盐红创设计院有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。