一种互动的建筑物表面投影方法技术

本发明专利技术公开了一种互动的建筑物表面投影方法。使用本发明专利技术能够在凹凸不平的建筑物表面进行投影，并通过各种传感器或手持移动终端对投影内容进行实时控制，产生互动效果。本发明专利技术在凹凸不平的建筑物表面进行投影，利用建筑物表面的凹凸点制作具有立体效果的互动媒体，同时通过采用新型人机交互技术，如体感互动、激光互动、语音互动或者移动终端互动技术，与本发明专利技术提出的媒体渲染方法制作的媒体进行互动，从而产生超乎想象的震撼视觉效果并且能够与建筑物完美结合，同时能够使人在欣赏的过程中产生立体视觉。

【技术实现步骤摘要】
【专利摘要】本专利技术公开了。使用本专利技术能够在凹凸不平的建筑物表面进行投影，并通过各种传感器或手持移动终端对投影内容进行实时控制，产生互动效果。本专利技术在凹凸不平的建筑物表面进行投影，利用建筑物表面的凹凸点制作具有立体效果的互动媒体，同时通过采用新型人机交互技术，如体感互动、激光互动、语音互动或者移动终端互动技术，与本专利技术提出的媒体渲染方法制作的媒体进行互动，从而产生超乎想象的震撼视觉效果并且能够与建筑物完美结合，同时能够使人在欣赏的过程中产生立体视觉。【专利说明】
本专利技术涉及投影拼接显示技术以及新型人机交互技术，具体涉及。
技术介绍
传统的投影拼接显示技术都是以平面或者曲面投影屏幕作为显示表面。随着投影机技术的进步、人们对视觉体验要求的不断地提升以及伴随着新媒体艺术的发展，需要一种更加具有视觉冲击力，具有震撼效果的新型投影显示技术。并且，随着互动技术的发展，人们不再满足于只观看影片，而是希望自己能够参与到整个活动中去，这就需要有新型的人机交互技术。
技术实现思路
有鉴于此，本专利技术提供了，能够在凹凸不平的建筑物表面进行投影，并通过各种传感器或手持移动终端对投影内容进行实时控制，产生互动效果。本专利技术的互动的建筑物表面投影方法，以建筑物外表面为投影平面，以多台投影机为显示设备，通过采用手动或自动投影拼接的方法对投影图像进行投影拼接，通过各台投影机投影内容与建筑表面关键点的对准，完成多投影拼接并利用建筑面表面关键点达到3D效果，其中，关键点为建筑外表面各个不连续面形成的交线以及各条交线的交点；设置游戏开发引擎和人机互动设备，其中，人机互动设备用于收集用户的动作，游戏开发引擎设有端口用于接收人机互动设备发回的用户的动作信息，用户的动作信息与投影图像结合形成互动媒体。其中，互动的建筑物表面投影方法，具体包括以下步骤:步骤1，确定投影表面及观看者位置，使用相机在观看者所在位置拍摄投影表面的照片；步骤2，根据投影表面的材质、现场光照条件以及项目预算确定投影机参数、投影机数量以及投影机位置布置；步骤3，采用手动或自动方法确定有效投影区域:手动方法确定有效投影区域方法如下:手动选取一个能够包围整个建筑区域的矩形作为有效投影区域；自动方法确定有效投影区域方法如下:根据步骤I照片中建筑物区域亮度与背景亮度的不同，使用图像处理方法求取建筑物区域，取该区域的最小外接矩形作为有效投影区域； 步骤4，确定互动方案:根据项目要求以及项目现场条件确定采用的互动技术，所述互动技术包括体感互动、激光互动、语音互动和移动终端互动技术；步骤5，具有3D效果的互动媒体制作:以步骤I得到的照片作为互动媒体制作的模板，使用视频制作软件进行素材制作，得到连续的图片素材；当需要展示与关键点位置相关的效果时，沿着照片中建筑物表面关键点位置以及连接关键点的直线制作3D特效；设置游戏开发引擎，用于合成图片素材，并预留端口用于接收人机互动设备发回的用户动作信息，图片素材与用户动作结合形成互动媒体；步骤6，现场安装架设投影机，调整各台投影机位置及角度以充满整个有效投影区域；现场安装人机互动设备，并调试设备的参数；步骤7，使用手动或自动投影拼接方法进行多投影几何校正；其中，所述手动投影拼接方法如下:通过手动拖动网格使投影表面的关键点位置与投影视频对齐，同时将图像空间中的一条直线在观看者视角同样调整成直线，并进行颜色校正及融合区域亮度衰减；所述自动投影拼接方法是基于结构光扫描的自动多投影拼接的，具体步骤为:步骤7.1，在与步骤I相同的位置架设相机，相机参数设置与步骤I相机参数相同，该相机能够拍摄到投影表面；步骤7.2，根据有效投影区域四个角点在相机图像坐标系下的坐标以及待投影区域四个角点在显示图像坐标系下的坐标，利用单应矩阵计算相机图像空间与显示图像空间之间的对应关系Hd ；步骤7.3，针对每台投影机覆盖的建筑表面区域，分别使用编码结构光扫描的方法建立每台投影机图像空间与相机图像之间的对应关系Ma，i=l,2,…，N, N为投影机数量；步骤7.4，结合相机图像空间与显示图像空间之间的对应关系Hd以及任意一台投影机图像空间与相机图像之间的`对应关系Ma，得到显示图像空间与任意一台投影机图像空间的对应关系；步骤7.5，对待显示图像进行颜色校正以及融合区域亮度衰减；步骤8，通过人机互动设备采集得到用户互动数据，用户互动数据通过网络实时发送给互动媒体，互动媒体根据接收到信息依照制作互动媒体时预设的程序步骤，实时调用相应的素材以及特效，完成互动媒体渲染；步骤9，根据步骤7得到的显示图像空间与任意一台投影机图像空间的对应关系，将显示图像空间中的点映射到其对应的投影机图像空间中相应位置，依次完成每台投影机中所有点的对应即完成了互动媒体的投影拼接渲染，通过网络让所有投影机同步播放经步骤8得到的互动媒体。有益效果:与传统的互动投影使用地面、墙面或者投影拼接作为显示表面不同，本专利技术提出了一种在凹凸不平的建筑物表面进行投影，并利用建筑物表面的凹凸点制作具有立体效果的互动媒体，同时通过采用新型人机交互技术(如体感互动、激光互动、语音互动或者移动终端互动技术)与本专利技术提出的媒体渲染方法制作的媒体进行互动，从而产生超乎想象的震撼视觉效果并且能够与建筑物完美结合，同时能够使人在欣赏的过程中产生立体视觉。【专利附图】【附图说明】图1为本专利技术手动拼接融合方法进行互动建筑投影显示的投影方式布置示意。其中，101-拟投影的建筑物外表面；102_投影机；103_融合服务器；104_渲染控制服务器；106_体感交互识别服务器；107_体感传感器；108_参与交互的用户；106，107，108组成体感互动部分105。【具体实施方式】下面结合附图并举实施例，对本专利技术进行详细描述。本专利技术提供了，其投影布局示意如图1所示，具体实施步骤如下: 步骤I，确定投影表面及观看者位置:确定需要投影的表面，并根据需求确定观看者所在位置，使用相机在观看者所在位置拍摄投影表面的照片(该照片要求包括整个需要投影的建筑表面)，并记录该位置、相机的高度、角度以及相机的焦距。如果相机镜头存在比较明显的畸变，则需要预先对相机进行畸变校正(一般采用张正友提出的相机标定方法，Zhang Z.A flexible new techniquefor camera calibration.Pattern Analysis and Machine Intelligence, IEEETransactions on,2000, 22 (11):1330-1334.)。步骤2，确定投影方案:根据建筑物投影表面的材质、现场光照条件以及其他因素(如项目预算等)确定投影机型号、投影机镜头型号、投影机数量以及投影机固定方案等。步骤3，确定有效投影区域:一般有效投影区域为照片中整个建筑物所在区域，可以通过手动或者自动方法确定有效投影区域。自动有效投影区域确定方法是根据照片中建筑物区域亮度与背景亮度的不同，使用图像处理方法(如图像二值化方法)求取建筑物区域，取该区域的最小外接矩形作为有效投影区域；手动有效投影区域确定方法是手动选取一个能够包围整个建筑区域的矩形作为有效投影区域，一般是选取建筑物区域的最小外接矩形作为有效投影区域。步骤4，确定互动方案:本文档来自技高网...

【技术保护点】
一种互动的建筑物表面投影方法，其特征在于，以建筑物外表面为投影平面，以多台投影机为显示设备，通过采用手动或自动投影拼接的方法对投影图像进行投影拼接，通过各台投影机投影内容与建筑表面关键点的对准，完成多投影拼接并利用建筑面表面关键点达到3D效果，其中，关键点为建筑外表面各个不连续面形成的交线以及各条交线的交点；设置游戏开发引擎和人机互动设备，其中，人机互动设备用于收集用户的动作，游戏开发引擎设有端口用于接收人机互动设备发回的用户的动作信息，用户的动作信息与投影图像结合形成互动媒体。

【技术特征摘要】

【专利技术属性】
技术研发人员：刘越，李翔，翁冬冬，杨涛，陈锋，
申请(专利权)人：北京理工大学，
类型：发明
国别省市：