一种基于智能穿戴设备的交互式虚拟校园漫游系统技术方案

本发明专利技术公开了一种基于智能穿戴设备的交互式虚拟校园漫游系统，包括数据采集模块、三维建模模块、模型植入与交互模块、穿戴设备连接模块，数据采集模块根据施工CAD图绘制出校园的整体框架，通过拍摄获得实体外观的材质，作为素材可以进行贴图使用；三维建模模块通过建模软件完成建模、贴图、渲染；模型植入与交互模块将上述建好的模型全部导入到三位视频系统中；穿戴设备连接模块完成头盔显示设备接口的连接，实现与头盔和手柄的交互。本发明专利技术根据施工CAD图绘制出校园的整体框架，用相机对各个实体的建筑物外形进行拍摄，获得实体外观的材质，因此在确保模型量不是很大的前提下，既保障了模型的准确性又兼顾了模型的视觉效果，提高了用户的沉浸感。

【技术实现步骤摘要】

本专利技术属于对用于电脑制图的三维模型或图像的操作领域，具体涉及利用人机互动技术实现一种基于智能穿戴设备的交互式虚拟校园漫游系统。
技术介绍
虚拟现实是一种可以创建和体验虚拟世界的计算机仿真系统，它利用计算机生成一种模拟环境，是一种多源信息融合的交互式的三维动态视景和实体行为的系统仿真，使用户沉浸到该环境中。虚拟现实技术是仿真技术与计算机图形学、人机接口技术、多媒体技术、传感技术、网络技术等多种技术的集合，是一门富有挑战性的交叉技术前沿学科和研究领域。2014年，Facebook以20亿美元收购了虚拟现实设备制造商OculusVR，引发了包括谷歌和微软在内的科技巨头斥巨资投资虚拟现实行业的热潮。截至目前为止，国内外多家IT相关企业积极投入到虚拟现实设备以及应用的研发中，包括阿里巴巴以52亿元人民币投资了创业公司MagicLeap，万达影院宣布未来两到三年将在全国影院推出100个VR体验区；软银以320亿美金正在收购ARM，6月份披露已为VR市场开发了全新的架构；三星斥巨资抢到了里约奥运会的VR独家直播权；谷歌发布了针对VR设备的平台Daydream等等。虚拟现实技术近年来发展迅速，可以应用到国防、教育、影视、游戏等领域，可以预计未来对虚拟现实的需求会越来越多，甚至会改变人类的生活沟通等方式。近几年，国内外对虚拟现实的研究越来越多，有基于硬件层面的，如头盔设备，以HTCVIVE、SONYVR、OculusVR为三大行业引领，另外有SumSangGearVR、乐视等手机盒子在移动端的支持，VR硬件呈直线上升的趋势。同时，VR在内容的研发上也受到IT行业以及风投的重点关注，包括VR硬件厂商在内，多家企业纷纷进入VR内容的研发领域，总之，VR市场具有巨大的潜力。虚拟现实在房地产演示、虚拟校园等空间展示项目上已经有了很多实例。已有多所大学开发了各自学校的虚拟校园系统，比如，西安交通大学、哈尔滨工业大学、常州工程职业技术学院等。虽然这些学校的虚拟校园系统实现的效果整体上类似，但在具体选用的技术和开发平台上还是有比较大的区别。有的采用全景技术实现虚拟校园，通过实地拍摄获取照片，利用软件拼合照片为全景图的方式，有的通过在VR-Platform中导入校园模型的方式构建。通过研究发现，虚拟校园主要有2D和3D显示效果之分，2D主要是拍实景照另加360全景演示的方式；3D主要是先建模，再将模型导入到相应的引擎当中做交互。在虚拟校园的三维展示中存在的问题主要有两点，第一是校园模型量一般会很大，导致虚拟校园的运行包很大，这样系统运行时对电脑硬件就有很高的要求，容易造成比较严重的卡顿现象，影响用户的体验；第二，用户对体验的要求越来越高，键盘交互已经不能满足用户的需要，如何提高虚拟交互系统的沉浸感，这是急需改进的问题。将头盔显示设备应用在校园展示系统中，尚无先例，这是本专利技术最大的创新点，通过头盔的应用，可以更好地解决虚拟系统沉浸感提高的难点。
技术实现思路
本专利技术解决的技术问题是模型量很大时用户体验下降，以及如何提高虚拟交互系统的沉浸感的问题。为解决上述问题，本专利技术提出一种基于智能穿戴设备的交互式虚拟校园漫游系统，以提高用户的沉浸感，实现虚拟校园漫游。具体的技术方案为一种基于智能穿戴设备的交互式虚拟校园漫游系统，包括数据采集模块、三维建模模块、模型植入与交互模块、穿戴设备连接模块，数据采集模块根据施工CAD图绘制出校园的整体框架，然后通过对校园内的实体建筑物外形进行拍摄获得实体外观的材质，作为素材可以进行贴图使用；三维建模模块通过建模软件完成建模、贴图、渲染；模型植入与交互模块将上述建好的模型全部导入到三位视频系统中；穿戴设备连接模块完成头盔显示设备接口的连接，实现与头盔和手柄的交互。进一步，上述的建模包含以下步骤：(1)以底图为基础创建长方体墙体，墙体的长、宽、高几何信息须依据前期所采集的数据，在创建完成长方体后把其转化为可编辑多边形，先根据各楼层数量进行边连接操作，在划分完楼层后再根据实际情况对各层的的窗户进行划分，如果每一层的窗户相同等距则进行等分，否则调整连接参数，再次进行边连接，形成楼体外部轮廓；(2)对多边形进行面删除操作，若该位置为门窗则将该面删除以便将制作好的门窗添加上去，每个面的位置可以使用挤出、插入命令进行调整，各个参数的调整应根据实际情况进行设置，对于各种墙体附加物也应在单独制作后添加上去；(3)制作窗户、门等构件，根据门窗的实际大小创建平面，然后将平面转化为可编辑多边形，通过使用边连接、挤出、删除、贴图操作制作出门窗；(4)将制作完成的门窗添加到相应位置，由于大部分的窗户是相同的，使用复制操作以提高建模效率。作为优选，贴图时尽量对每个独立的物体进行整体贴图。进一步，贴图时可以采用UVW展开的方式，同时制作法线贴图，以减少模型的体积，增强效果的真实感。本专利技术的有益效果：1，本专利技术在建模时，首先根据施工CAD图绘制出校园的整体框架，然后用相机对各个实体的建筑物外形进行拍摄，获得实体外观的材质，这样在确保模型量不是很大的前提下，既保障了模型的准确性又兼顾了模型的视觉效果。2，在建模的工程中考虑到很多的建筑物的窗户是相同或者类似的，所以在实际的建模过程中不应单独创建每个窗户，而应在创建一个窗户后进行复制操作，这种方法快速简单，可以有效提高建模的效率。附图说明图1是虚拟校园漫游系统的整体开发流程示意图；图2是虚拟校园漫游系统的模块示意图；图3是虚拟校园漫游系统开发的关键步骤；图4是基础数据采集的流程示意图；图5是基于真实数据绘制三维虚拟校园模型的具体流程示意图；图6是虚拟三维模型在研发平台中进行交互的开发流程示意图；图7是用户使用软件的主要操作步骤；图8是用户使用穿戴头盔和手柄操作软件的实际手绘示意图。具体实施方式现结合附图对本专利技术的具体实施方式做进一步详细的说明。本专利技术漫游系统的模块组成如图2所示，包括数据采集模块、三维建模模块、模型植入与交互模块、穿戴设备连接模块。数据采集模块是根据施工CAD图绘制出校园的整体框架，在这里要特别注意对细节信息的获取，因为CAD图上是整体轮廓图，因此要用工具尺对细节信息进行获取，如门框等进行测量，以便在建模时更加精确，然后用相机对各个实体的建筑物外形进行拍摄，获得实体外观的材质，作为素材可以进行贴图使用，在这里必须进行多次拍摄，特别是细节处，这样可以对贴图细化，效果更加逼真；三维建模模块是在3Dmax软件中建模，贴图，渲染，这一步最为重要，需要注意三点：①建模的面数要尽量精简，把不需要的面全部删除；②对于一些复杂的模型，可以采用精简模型加贴图的方式，即先用多面数的模型进行贴图，将渲染后的效果图帖在精简后的模型上，这样效果和多面数模型相同，但是由于实际的模型面数精简，就可以减少程序包，提高运行速度；③贴图时，要对相机所拍摄的照片进行适当的处理，尽量提高逼真的还原效果；模型植入与交互模块，是将建好的模型全部导入到Unity3D中，使用c#和js实现交互，这里会出现贴图丢失的问题，需要重新进行适当的贴图处理，同时，由于Unity3D中，灯光渲染能力没有3Dmax中强，所以在3Dmax中建模时要考虑到这点，减少对灯光的使用，以免导入后出现问题。在Unity3D中，要尽量规范代码，以本文档来自技高网...

【技术保护点】
一种基于智能穿戴设备的交互式虚拟校园漫游系统，其特征在于包括数据采集模块、三维建模模块、模型植入与交互模块、穿戴设备连接模块，数据采集模块根据施工CAD图绘制出校园的整体框架，然后通过对校园内的实体建筑物外形进行拍摄获得实体外观的材质，作为素材可以进行贴图使用；三维建模模块通过建模软件完成建模、贴图、渲染；模型植入与交互模块将上述建好的模型全部导入到三位视频系统中；穿戴设备连接模块完成头盔显示设备接口的连接，实现与头盔和手柄的交互。

【技术特征摘要】
1.一种基于智能穿戴设备的交互式虚拟校园漫游系统，其特征在于包括数据采集模块、三维建模模块、模型植入与交互模块、穿戴设备连接模块，数据采集模块根据施工CAD图绘制出校园的整体框架，然后通过对校园内的实体建筑物外形进行拍摄获得实体外观的材质，作为素材可以进行贴图使用；三维建模模块通过建模软件完成建模、贴图、渲染；模型植入与交互模块将上述建好的模型全部导入到三位视频系统中；穿戴设备连接模块完成头盔显示设备接口的连接，实现与头盔和手柄的交互。2.根据权利要求1所述的一种基于智能穿戴设备的交互式虚拟校园漫游系统，其特征在于所述建模包含以下步骤：(1)以底图为基础创建长方体墙体，墙体的长、宽、高几何信息须依据前期所采集的数据，在创建完成长方体后把其转化为可编辑多边形，先根据各楼层数量进行边连接操作，在划分完楼层后再根据实际情况对各层的的窗户进行划分，如果每一层的窗户相同等距则进...

【专利技术属性】
技术研发人员：朱惠娟，丛玉华，张皓名，宁泽西，张庆，
申请(专利权)人：南京理工大学紫金学院，
类型：发明
国别省市：江苏;32