一种AR沉浸式旅游导览方法、装置、存储介质及终端设备制造方法及图纸

本发明专利技术公开了一种AR沉浸式旅游导览方法，包括：识别并判断当前环境类型，并根据所述环境类型按预设规则选取需要构建的人体形象；根据所述需要构建的人体形象通过3D人体扫描技术进行三维模拟人体表面轮廓的非接触自动测量，合成三维人体形象；将所述合成的三维人体形象通过AR设备显示出来；本发明专利技术还公开了一种AR沉浸式旅游导览装置；本发明专利技术利用AR技术合成历史人物三维景象并进行呈现，解决旅游景点中的历史场景无法重现给游客的技术问题，实现游客在参观旅游景点时能重现历史场景，增加游客体验；通过增加语音识别和动作互动功能，进一步提高游客的体验感；通过捕捉当期环境中游客的动作识别运动轨迹并进行显示，再进一步提高游客的体验感。

An AR Immersion Tourist Guide Method, Device, Storage Media and Terminal Equipment

【技术实现步骤摘要】
一种AR沉浸式旅游导览方法、装置、存储介质及终端设备
本专利技术涉及视觉处理
，尤其涉及一种AR沉浸式旅游导览方法、装置、存储介质及终端设备。
技术介绍
现在的旅游景点，特别是一些文化古迹，历史场景难以重现，体验和所看到的皆是几千年以后的场景，光凭文字导览或导游的讲解，难以想象古人的场景，体验效果也不好。
技术实现思路
本专利技术提供了一种AR沉浸式旅游导览方法、装置、存储介质及终端设备，以解决旅游景点中的历史场景无法重现给游客的技术问题，从而利用AR技术合成历史人物三维景象并进行呈现，进而实现游客在参观旅游景点时能重现历史场景，增加游客体验。为了解决上述技术问题，本专利技术实施例提供了一种AR沉浸式旅游导览方法，包括：识别并判断当前环境类型，并根据所述环境类型按预设规则选取需要构建的人体形象；根据所述需要构建的人体形象通过3D人体扫描技术进行三维模拟人体表面轮廓的非接触自动测量，合成三维人体形象；将所述合成的三维人体形象通过AR设备显示出来。作为优选方案，所述根据所述需要构建的人体形象通过3D人体扫描技术进行三维模拟人体表面轮廓的非接触自动测量，合成三维人体形象，包括：通过标准可视化外壳技术从多个视角捕捉静态的所述需要构建的人体形象，控制光线穿过图像轮廓点约束出3D人体形状；对所述3D人体形状进行一致形态评估，保留与所述需要构建的人体形象保持一致的所述3D人体形状；对一致形态的偏离进行每一帧的优化，得到逐帧形态并计算所述3D人体形状的纹理图。作为优选方案，所述通过标准可视化外壳技术从多个视角捕捉静态的所述需要构建的人体形象，控制光线穿过图像轮廓点约束出3D人体形状，包括：拟合SMPL模型和2D检测，估计每一帧的初始人体形状和3D姿势；基于拟合结果，将每一帧中的轮廓点与人体模型中的3D点结合起来，根据每个投影光线的对应3D模型点的反向变形模型，变换投影光线；所有帧的拟合结果进行处理，得到了一个以标准姿势展示的人体形状。作为优选方案，还包括：采集并识别语音信息数据，对所述识别的语音信息数据进行提取转化为动作指令，并控制所述三维人体形象执行所述动作指令。作为优选方案，还包括：采集图像并识别图像中的动作行为，对所述识别的动作行为进行提取转化为动作指令，并根据预设的动作指令规则控制所述三维人体形象执行相应的动作反应。作为优选方案，还包括：实时采集当前环境中人物的动作运动轨迹，根据运动学算法对所述动作运动轨迹进行模拟计算出当前环境中人物的三维图形，进行显示。作为优选方案，所述运动学算法包括：IK逆向运动学算法和FK正向运动学算法。本专利技术实施例还提供了一种AR沉浸式旅游导览装置，包括：识别判断模块，用于识别并判断当前环境类型，并根据所述环境类型按预设规则选取需要构建的人体形象；3D人体合成模块，用于根据所述需要构建的人体形象通过3D人体扫描技术进行三维模拟人体表面轮廓的非接触自动测量，合成三维人体形象；显示模块，用于将所述合成的三维人体形象通过AR设备显示出来；还包括：语音识别模块，用于采集并识别语音信息数据，对所述识别的语音信息数据进行提取转化为动作指令，并控制所述三维人体形象执行所述动作指令；动作互动模块，用于采集图像并识别图像中的动作行为，对所述识别的动作行为进行提取转化为动作指令，并根据预设的动作指令规则控制所述三维人体形象执行相应的动作反应；运动轨迹模块，用于实时采集当前环境中人物的动作运动轨迹，根据运动学算法对所述动作运动轨迹进行模拟计算出当前环境中人物的三维图形，进行显示。本专利技术实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质包括存储的计算机程序；其中，所述计算机程序在运行时控制所述计算机可读存储介质所在的设备执行如上述任一项所述的AR沉浸式旅游导览方法。本专利技术实施例还提供了一种终端设备，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器在执行所述计算机程序时实现如上述任一项所述的AR沉浸式旅游导览方法。相比于现有技术，本专利技术实施例具有如下有益效果：本专利技术利用AR技术合成历史人物三维景象并进行呈现，解决旅游景点中的历史场景无法重现给游客的技术问题，实现游客在参观旅游景点时能重现历史场景，增加游客体验；通过增加语音识别和动作互动功能，进一步提高游客的体验感；通过捕捉当期环境中游客的动作识别运动轨迹并进行显示，再进一步提高游客的体验感。附图说明图1：为本专利技术实施例中的AR沉浸式旅游导览方法流程示意图；图2：为本专利技术实施例中的AR沉浸式旅游导览装置结构示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。请参照图1，本专利技术优选实施例提供了一种AR沉浸式旅游导览方法，包括：S1，识别并判断当前环境类型，并根据所述环境类型按预设规则选取需要构建的人体形象；S2，根据所述需要构建的人体形象通过3D人体扫描技术进行三维模拟人体表面轮廓的非接触自动测量，合成三维人体形象；S3，将所述合成的三维人体形象通过AR设备显示出来。在本实施例中，所述根据所述需要构建的人体形象通过3D人体扫描技术进行三维模拟人体表面轮廓的非接触自动测量，合成三维人体形象，包括：S21，通过标准可视化外壳技术从多个视角捕捉静态的所述需要构建的人体形象，控制光线穿过图像轮廓点约束出3D人体形状；S22，对所述3D人体形状进行一致形态评估，保留与所述需要构建的人体形象保持一致的所述3D人体形状；S23，对一致形态的偏离进行每一帧的优化，得到逐帧形态并计算所述3D人体形状的纹理图。在本实施例中，所述通过标准可视化外壳技术从多个视角捕捉静态的所述需要构建的人体形象，控制光线穿过图像轮廓点约束出3D人体形状，包括：S211，拟合SMPL模型和2D检测，估计每一帧的初始人体形状和3D姿势；S212，基于拟合结果，将每一帧中的轮廓点与人体模型中的3D点结合起来，根据每个投影光线的对应3D模型点的反向变形模型，变换投影光线；S213，所有帧的拟合结果进行处理，得到了一个以标准姿势展示的人体形状。在本实施例中，还包括：S4，采集并识别语音信息数据，对所述识别的语音信息数据进行提取转化为动作指令，并控制所述三维人体形象执行所述动作指令。在本实施例中，还包括：S5，采集图像并识别图像中的动作行为，对所述识别的动作行为进行提取转化为动作指令，并根据预设的动作指令规则控制所述三维人体形象执行相应的动作反应。在本实施例中，还包括：S6，实时采集当前环境中人物的动作运动轨迹，根据运动学算法对所述动作运动轨迹进行模拟计算出当前环境中人物的三维图形，进行显示。在本实施例中，所述运动学算法包括：IK逆向运动学算法和FK正向运动学算法。请参照图2，相应地，本专利技术优选实施例还提供了一种AR沉浸式旅游导览装置，包括：识别判断模块，用于识别并判断当前环境类型，并根据所述环境类型按预设规则选取需要构建的人体形象；3D人体合成模块，用于根据所述需要构建的人体形象通过3D人体扫描技术进行三维模拟人体表面轮廓的非接触自本文档来自技高网...

【技术保护点】
1.一种AR沉浸式旅游导览方法，其特征在于，包括：识别并判断当前环境类型，并根据所述环境类型按预设规则选取需要构建的人体形象；根据所述需要构建的人体形象通过3D人体扫描技术进行三维模拟人体表面轮廓的非接触自动测量，合成三维人体形象；将所述合成的三维人体形象通过AR设备显示出来。

【技术特征摘要】
1.一种AR沉浸式旅游导览方法，其特征在于，包括：识别并判断当前环境类型，并根据所述环境类型按预设规则选取需要构建的人体形象；根据所述需要构建的人体形象通过3D人体扫描技术进行三维模拟人体表面轮廓的非接触自动测量，合成三维人体形象；将所述合成的三维人体形象通过AR设备显示出来。2.如权利要求1所述的AR沉浸式旅游导览方法，其特征在于，所述根据所述需要构建的人体形象通过3D人体扫描技术进行三维模拟人体表面轮廓的非接触自动测量，合成三维人体形象，包括：通过标准可视化外壳技术从多个视角捕捉静态的所述需要构建的人体形象，控制光线穿过图像轮廓点约束出3D人体形状；对所述3D人体形状进行一致形态评估，保留与所述需要构建的人体形象保持一致的所述3D人体形状；对一致形态的偏离进行每一帧的优化，得到逐帧形态并计算所述3D人体形状的纹理图。3.如权利要求2所述的AR沉浸式旅游导览方法，其特征在于，所述通过标准可视化外壳技术从多个视角捕捉静态的所述需要构建的人体形象，控制光线穿过图像轮廓点约束出3D人体形状，包括：拟合SMPL模型和2D检测，估计每一帧的初始人体形状和3D姿势；基于拟合结果，将每一帧中的轮廓点与人体模型中的3D点结合起来，根据每个投影光线的对应3D模型点的反向变形模型，变换投影光线；所有帧的拟合结果进行处理，得到了一个以标准姿势展示的人体形状。4.如权利要求1所述的AR沉浸式旅游导览方法，其特征在于，还包括：采集并识别语音信息数据，对所述识别的语音信息数据进行提取转化为动作指令，并控制所述三维人体形象执行所述动作指令。5.如权利要求1所述的AR沉浸式旅游导览方法，其特征在于，还包括：采集图像并识别图像中的动作行为，对所述识别的动作行为进行提取转化为动作指令，并根据预设的动作指令规则控制所...

【专利技术属性】
技术研发人员：罗旭，
申请(专利权)人：谷东科技有限公司，
类型：发明
国别省市：广东,44