The embodiment of the present invention discloses an animation scene construction method and device combining virtual and reality. After capturing the user's action video, the user's motion posture is reconstructed in real time according to the user's action video, and then the user's motion posture is combined with the model data of the image substitute to generate the virtual user image, and the virtual user image is superimposed with the virtual animation scene to make the user's motion posture reconstruct in real time. The virtual user image in amusement game console can complete the same action as the user's action video in the virtual animation scene, improve the user's game experience, solve the lack of real-time integration of user's action into the game scene function, the existing user's experience is poor, integration is not high technical problems.
【技术实现步骤摘要】
一种结合虚拟与现实的动画场景构建方法及装置
本专利技术涉及游艺设备
,尤其涉及一种结合虚拟与现实的动画场景构建方法及装置。
技术介绍
随着人们生活水平的提高,越来越多的人选择游戏游艺机这一娱乐方式。游戏游艺机声、光、图像内容的结合玩家操作器械亲身体验而获得独特的娱乐体验,倍受人们喜爱。现有游戏游艺机主要分为两类,一类是纯机械电子设备,这类没有游戏内容和显示内容的显示屏,如抓娃娃机、推币机、儿童摇摆机等;另一类是有显示屏显示游戏内容,有操作控制端,如跳舞机、枪机、打斗机、VR游戏机、Xbox、PS等。现有的游戏游艺机中,在一些用户体感游戏的体验过程中,用户只能看到自己操控手柄后,在显示屏中显示的游戏的结果,缺乏将用户的动作实时融入游戏场景的功能,存在用户的体验性差,融入性不高的技术问题。
技术实现思路
本专利技术实施例提供了一种结合虚拟与现实的动画场景构建方法及装置,解决了缺乏将用户的动作实时融入游戏场景的功能,存在的用户的体验性差,融入性不高的技术问题。本专利技术实施例提供了一种结合虚拟与现实的动画场景构建方法,包括:获取采集的用户的动作视频;根据用户的动作视频 ...
【技术保护点】
1.一种结合虚拟与现实的动画场景构建方法,其特征在于,包括:获取采集的用户的动作视频;根据用户的动作视频重建用户运动姿态,包括用户的轮廓以及用户的运动轨迹;调取形象替身的模型数据;将重建的用户运动姿态与形象替身结合,生成虚拟用户形象;调取虚拟动画场景;将虚拟用户形象与虚拟动画场景叠加合成视频流并推送至显示单元进行显示。
【技术特征摘要】
1.一种结合虚拟与现实的动画场景构建方法,其特征在于,包括:获取采集的用户的动作视频;根据用户的动作视频重建用户运动姿态,包括用户的轮廓以及用户的运动轨迹;调取形象替身的模型数据;将重建的用户运动姿态与形象替身结合,生成虚拟用户形象;调取虚拟动画场景;将虚拟用户形象与虚拟动画场景叠加合成视频流并推送至显示单元进行显示。2.根据权利要求1所述的结合虚拟与现实的动画场景构建方法,其特征在于,还包括:获取采集的用户的人声音频;调取形象替身的声音模型;将用户的人声音频通过预处理转换为形象替身的模拟音频,得到形象替身的音频流;将音频流与视频流结合并推送至显示单元进行显示,同时推送至音频单元进行播放。3.根据权利要求2所述的结合虚拟与现实的动画场景构建方法,其特征在于,将用户的人声音频通过预处理转换为形象替身的模拟音频具体包括:通过分离和补偿的方式将用户的人声音频中说话人的音高、音强、音质和音长进行独立调整,使得人声音频中说话人的音色、音调和语速转换为形象替身的声音模型中的音色、音调和语速,得到形象替身的模拟音频。4.根据权利要求3所述的结合虚拟与现实的动画场景构建方法,其特征在于,将用户的人声音频通过预处理转换为形象替身的模拟音频还包括:通过时域上的插值和抽剪改变形象替身的模拟音频的长度;通过短时傅立叶变换将时域信号转化到频域上,调整相位谱、幅度谱以及幅度谱的谱包络形状,达到将形象替身的模拟音频的基频和共振峰位置分离,并分别进行调整。5.根据权利要求1所述的结合虚拟与现实的动画场景构建方法,其特征在于,获取采集的用户的动作视频之前还包括:获取用户触发的指令信息,指令信息携带有用户选择的形象替身。6.一种结合虚拟与现实的动画场景构建装置,...
【专利技术属性】
技术研发人员:龚南彬,
申请(专利权)人:中山市嘉游动漫科技有限公司,
类型:发明
国别省市:广东,44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。