本发明专利技术属于计算机人机交互技术领域，公开了一种历史与民族文化互动式体验游戏系统、控制方法及介质，信号接收模块通过信号接收装置捕捉游戏者躯体的运动信号、语音输入和触控信号后，将信号输入至信号处理模块中；信号处理模块通过信号处理程序处理信号接收模块中游戏者的运动、语言以及触控信号，然后生成对游戏程序的控制信号；游戏终端通过游戏终端程序根据信号处理模块的控制信号输出，执行相应的游戏流程；游戏场景呈现装置，游戏场景是从程序终端投影到白板上的实机运行画面，在白板的对面设置有平面镜，用于进行游戏场景呈现。本发明专利技术能够很好地解决现有问题，并为体感识别技术与语音识别技术结合游戏系统的开发提供了一种新的思路。一种新的思路。一种新的思路。
【技术实现步骤摘要】
历史与民族文化互动式体验游戏系统、控制方法及介质
[0001]本专利技术属于计算机人机交互
，尤其涉及一种历史与民族文化互动式体验游戏系统、控制方法及介质。
技术介绍
[0002]目前，互动装置艺术作为一种新兴的艺术，它的产生是随着科技的进步和艺术观念的更新而产生的，它属于数字艺术中新媒介艺术的一个新的分支。其无论在表现形式，还是在与观众的交互中都给予了观众新的认知感受。而互动游戏装置作为互动装置的一个分支，充分发挥了互动装置的互动性，并与游戏的可玩性相结合，给玩家带来了强烈而新奇的感官体验。其中，Kinect互动游戏装置通过体感识别与游戏性的结合，成为互动游戏装置中的佼佼者之一。
[0003]然而，尽管互动装置在游戏领域已经有了一定的发展，但现有技术下，大多数基于Kinect的互动游戏装置往往只是现有的其他游戏主题通过Kinect的粗糙实现，这类游戏过分专注于Kinect的互动形式与内容，对游戏其他方面的挖掘有限，游戏内容缺乏深度，往往只是热门商业类游戏主题的再运用，尤其缺乏有历史背景与民族文化的游戏题材，玩家在游戏体验后缺乏获得感。另一方面，目前缺乏体感识别技术与语音识别技术结合的运用实例，尤其是对于如何将Kinect技术与语音识别技术结合，并特别运用于具有历史背景与民族文化的游戏中，目前尚未出现相关的专利技术专利。
[0004]因此，现有的Kinect游戏领域缺乏一种与语音识别技术结合的运用，来填补体感识别技术与语音识别技术结合游戏门类的空白。同时也缺乏一种具有历史背景与民族文化元素和主题的Kinect游戏实例，弥补玩家在游戏体验后缺乏的获得感。
[0005]通过上述分析，现有技术存在的问题及缺陷为：
[0006](1)现有基于Kinect的互动游戏装置只是现有的其他游戏主题通过Kinect的粗糙实现，这类游戏过分专注于Kinect的互动形式与内容，对游戏其他方面的挖掘有限，游戏内容缺乏深度，往往只是热门商业类游戏主题的再运用，尤其缺乏有历史背景与民族文化的游戏题材，玩家在游戏体验后缺乏获得感。
[0007](2)目前缺乏体感识别技术与语音识别技术结合的运用实例，尤其是对于如何将Kinect技术与语音识别技术结合，并特别运用于具有历史背景与民族文化的游戏中，目前尚未出现相关的专利技术专利。
[0008](3)现有的Kinect游戏领域缺乏与语音识别技术结合的运用来填补体感识别技术与语音识别技术结合游戏门类的空白；同时也缺乏具有历史背景与民族文化元素和主题的Kinect游戏实例，弥补玩家在游戏体验后缺乏的获得感。
技术实现思路
[0009]针对现有技术存在的问题，本专利技术提供了一种历史与民族文化互动式体验游戏系统、控制方法及介质，尤其涉及一种基于Kinect传感器、深度学习和语音识别技术的历史与
民族文化互动式体验游戏系统、控制方法及介质。
[0010]本专利技术是这样实现的，一种历史与民族文化互动式体验游戏系统，所述信号接收装置包括运动信号接收装置、语音信号接收装置和触控信号接收装置；所述运动信号接收装置通过红外线深度探测对游戏者的骨骼位置进行捕捉；所述语音信号接收装置为无线麦克风；所述触控信号接收装置通过红外线距离检测判断游戏者的触控点位，接收其触控信号。
[0011]进一步，所述信号接收装置还包括Kinect2.0传感器、麦克风和红外触控框；所述Kinect置于平面镜的下方，正对游戏系统参与用户；所述红外触控框布置在投影白板的一周；所述Kinect和红外触控框通过USB2.0与计算机控制终端进行连接；所述麦克风通过无线蓝牙与计算机控制终端连接；所述投影仪通过HDMI连接线与计算机控制终端连接。
[0012]进一步，所述信号处理程序包括运动信号处理程序和语音信号处理程序；所述运动信号处理程序通过将运动信号接收装置采集的骨骼位置信息与某一特定预定义人体姿势的骨骼位置进行对比，从而判断游戏者是否做出某一特定姿势，进而控制游戏终端程序的进行；所述语音信号处理程序通过深度学习模型对接收到语音信号进行识别，并将识别结果与预先定义的文字进行对比，对比的结果作为游戏程序的控制信号。
[0013]进一步，所述游戏终端程序是基于Unity3D引擎开发的具有历史背景与民族文化的游戏；所述游戏场景呈现装置包括平面镜、投影白板、投影仪以及游玩所需的实体交互道具；所述交互道具外形与中外民族文化传说中的人物或者动物相似，所述投影面白板置于游戏系统参与用户背后，并将游戏画面投影至白板；所述平面镜置于投影平面的前方，游戏系统参与用户被要求正对平面镜，通过镜子看背后白板上的游戏场景；所述道具置于白板旁边，游戏系统参与用户游戏时使用。
[0014]本专利技术的另一目的在于提供一种应用所述的历史与民族文化互动式体验游戏系统的历史与民族文化互动式体验游戏系统的控制方法，所述历史与民族文化互动式体验游戏系统的控制方法包括以下步骤：
[0015]步骤一，采用专门的仪器设备采集相关的数据；
[0016]步骤二，进行Kinect动作检测程序执行；
[0017]步骤三，进行信息采集与中断程序执行；
[0018]步骤四，进行程序内置互动动作执行。
[0019]进一步，所述步骤一中，识别并生成图案，包括启动开始程序，游戏运行，游戏场景初始化，窗口生成程序运行，场景资源加载，场景中生成碰撞体壁；待游戏场景初始化后开始持续在随机位置生成生存期为若干秒的若干目标，包括生成程序通过随机函数选取窗口的随机位置，确定位置后，在所述位置生成对象，并对对象赋予碰撞体与数值在给定范围内的随机大小与方向的加速度矢量；赋予加速度矢量后，函数开始执行凋亡程序，通过随机函数选取给定范围内随机大小的时间，时间结束后消灭相应对象。
[0020]所述步骤二中，生成目标函数开始执行后，开始启动动作检测程序，检测玩家是否有开发人员设计的对应动作骨传导数据；当玩家动作对应的骨传导数据与待检测的对应动作骨传导数据匹配后，函数向中断程序返回参数。
[0021]进一步，所述步骤三中的信息采集与中断程序执行包括：
[0022]检测返回参数是否为特定参数，当为特定参数时，则中断程序执行，中断程序开始
执行时，向中断程序状态检测函数发出信息，并开始执行程序；中断程序执行时，对象的凋亡程序、速度矢量参数传向数组，凋亡程序进程中断，速度矢量参数置为零，信号检测函数检测是否有物理碰撞和语音频段传入，中断程序开始计时，时长为工作人员填入参数；当没有特定信号传入且计时结束后，中断程序读取数组，将对象速度矢量参数还原，凋亡程序进程继续，中断程序执行结束；特定信号传入且计时未结束时，转入步骤四。
[0023]进一步，所述步骤四中的程序内置互动动作执行包括：
[0024]中断程序处于执行状态中，红外检测框检测到物理碰撞，语音识别程序匹配到相似语音频段后，开始执行消亡程序，并向计分程序返回参数；计分程序将分数加一并显示在屏幕上，重复执行游戏系统步骤二和步骤三，直到计分程序分数不小本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种历史与民族文化互动式体验游戏系统，其特征在于，所述历史与民族文化互动式体验游戏系统包括信号接收模块、信号处理模块、游戏终端和游戏场景呈现装置；所述信号接收模块，用于通过信号接收装置捕捉游戏者躯体的运动信号、语音输入和触控信号后，将所述信号输入至信号处理模块中；所述信号处理模块，用于通过信号处理程序处理信号接收模块中游戏者的运动、语言以及触控信号，然后生成对游戏程序的控制信号；所述游戏终端，用于通过游戏终端程序根据信号处理模块的控制信号输出，执行相应的游戏流程；所述游戏场景呈现装置，游戏场景是从程序终端投影到白板上的实机运行画面，在白板的对面设置有平面镜，用于进行游戏场景呈现。2.如权利要求1所述的历史与民族文化互动式体验游戏系统，其特征在于，所述信号接收装置包括运动信号接收装置、语音信号接收装置和触控信号接收装置；所述运动信号接收装置通过红外线深度探测对游戏者的骨骼位置进行捕捉；所述语音信号接收装置为无线麦克风；所述触控信号接收装置通过红外线距离检测判断游戏者的触控点位，接收其触控信号。3.如权利要求1所述的历史与民族文化互动式体验游戏系统，其特征在于，所述信号接收装置还包括Kinect2.0传感器、麦克风和红外触控框；所述Kinect置于平面镜的下方，正对游戏系统参与用户；所述红外触控框布置在投影白板的一周；所述Kinect和红外触控框通过USB2.0与计算机控制终端进行连接；所述麦克风通过无线蓝牙与计算机控制终端连接；所述投影仪通过HDMI连接线与计算机控制终端连接。4.如权利要求1所述的历史与民族文化互动式体验游戏系统，其特征在于，所述信号处理程序包括运动信号处理程序和语音信号处理程序；所述运动信号处理程序通过将运动信号接收装置采集的骨骼位置信息与某一特定预定义人体姿势的骨骼位置进行对比，从而判断游戏者是否做出某一特定姿势，进而控制游戏终端程序的进行；所述语音信号处理程序通过深度学习模型对接收到语音信号进行识别，并将识别结果与预先定义的文字进行对比，对比的结果作为游戏程序的控制信号。5.如权利要求1所述的历史与民族文化互动式体验游戏系统，其特征在于，所述游戏终端程序是基于Unity3D引擎开发的具有历史背景与民族文化的游戏；所述游戏场景呈现装置包括平面镜、投影白板、投影仪以及游玩所需的实体交互道具；所述交互道具外形与中外民族文化传说中的提及的人物或者动物形象相似，所述投影面白板置于游戏系统参与用户背后，并将游戏画面投影至白板；所述平面镜置于投影平面的前方，游戏系统参与用户被要求正对平面镜，通过镜子看背后白板上的游戏场景；所述道具置于白板旁边，游戏系统参与用户游戏时使用。6.一种应用如权利要求1～5任意一项所述的历史与民族文化互...
【专利技术属性】
技术研发人员：吴琴，杨琰，陈子翔，宇文泰然，
申请(专利权)人：北京大学，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。