This application discloses an AR-enhanced live game broadcasting method, which includes: before live broadcasting, the client receives and stores the static model data of the game beforehand; the acquisition module collects the audio and video data in live game broadcasting, encodes them, and collects the dynamic model data in live game broadcasting at the same time; the acquisition module packages and compresses the dynamic model data and audio and video data, and transmits them through the network. The client loads the pre-stored static model data, renders AR with the received dynamic model data, displays the game video in real time, and plays the corresponding audio. The application also discloses a corresponding AR enhanced live game broadcasting system. Applying the technology scheme disclosed in this application can improve the existing live broadcasting technology, especially in the aspect of 3D game live broadcasting. By introducing the advanced AR technology, the audience can get a new experience and better feeling when watching live broadcasting. At the same time, it provides a new way of thinking and way for the development of AR application.
【技术实现步骤摘要】
一种AR增强的游戏直播方法和系统
本申请涉及智能终端应用
，特别涉及一种AR增强的游戏直播方法和系统。
技术介绍
当今的网络直播技术随着自媒体的广泛深入日趋成熟，网络直播平台也成为了一种崭新的社交媒体。网络直播技术主要分为实时直播游戏、电影或电视剧等。在中国，网络直播平台不下百余家，其中最有名气的也有数十家，可谓是百花齐放。直播平台也催生出了网红经济，依托网红庞大的粉丝群，创造了一个又一个的营销奇迹。网络直播主要涉及流媒体技术，主要分为三大部分：音视频采集处理、视频网络传输协议和客户端播放器。本申请主要关注点在3D游戏直播，因为游戏直播是网络直播中最重要的一块，且占比超过50％。增强现实(AugmentedReality，简称AR)，是一种实时地计算摄影机影像的位置及角度并加上相应图像的技术，这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。增强现实技术不仅展现了真实世界的信息,而且将虚拟的信息同时显示出来，两种信息相互补充、叠加。把真实世界与电脑图形多重合成在一起，便可以看到真实的世界围绕着它。AR技术主要包含计算机视觉、三维配准、识别跟踪等技术。...
【技术保护点】
1.一种AR增强的游戏直播方法，其特征在于，包括：在直播前，客户端预先接收并存储游戏的静态模型数据；采集模块收集游戏直播中的音视频数据，并进行编码，同时采集游戏直播中的动态模型数据；采集模块将动态模型数据和音视频数据打包压缩后，通过网络传输给客户端；客户端加载预先存储的静态模型数据，并结合接收到的动态模型数据进行AR渲染，实时显示游戏视频，并播放相应的音频。
【技术特征摘要】
1.一种AR增强的游戏直播方法，其特征在于，包括：在直播前，客户端预先接收并存储游戏的静态模型数据；采集模块收集游戏直播中的音视频数据，并进行编码，同时采集游戏直播中的动态模型数据；采集模块将动态模型数据和音视频数据打包压缩后，通过网络传输给客户端；客户端加载预先存储的静态模型数据，并结合接收到的动态模型数据进行AR渲染，实时显示游戏视频，并播放相应的音频。2.根据权利要求1所述的方法，其特征在于，该方法还包括：预先对直播的3D游戏场景进行模型重构，转变为适宜通过AR显示的模型，所述静态模型数据和动态模型数据构成AR模型数据。3.根据权利要求2所述的方法，其特征在于：所述动态模型数据包括：模型动态行为数据、坐标数据、状态数据；所述静态模型数据包括：3D场景数据、人物模型数据。4.根据权利要求1至3任一项所述的方法，其特征在于，所述采集模块将动态模型数据和音视频数据打包压缩后，通过网络传输给客户端包括：采集模块将动态模型数据和音视频数据打包压缩后，向服务器推送信息；服务器收到采集模块的信息推送后，推送给CDN节点，并继续推送到各个客户端，或者，服务器对接收到的信息进行动态编码以适应不同的客户端需要，同时将数据存储在云端数据库中，供客户端请求回看时调用播放。5.根据权利要求1至3任一项所述的方法，其特征在于，客户端进行AR渲染包括：客户端对接收自服务器的信息进行解码，同时利用客户端的摄像头获得现实场景，对现实场景进行分析，确定AR显示区域方向，建立三维坐标系，将解码后的3D场景信息在指定AR显示区域显示，同时播放直播视频和音频。6.根据权利要求5所述的方法，其特征在于：信息的解码分为音视频信息的解码和3D场景信息的解码，其中，3D场景信息的解码分为静态模型数据和动态模型数据的解码；在进行AR显示时，先渲染静态模型数据，再将动态模型数据叠加在静态模型数据上进行渲染显示。7.根据权利要求1至3任一项所述的方法，其特征在于，该方法还包括：进行用户交互操作，具体包括：调整客户端摄像头的拍摄位置，以调整AR模型的显示位置、角度，调整摄像头焦距，以调整AR模型的大小，利用客户端向服务器发出回看请求，调取存放在云端数据库中的数据进行回看。8.一种AR增强的游戏直播系统，其特征在于，包括：采集模块、传输模块和客户端模块，其中：采集模块用于收集游戏直播中的音视频数据，并进行编码，同时采集游戏直播中的动态模型数据，将动态模型数据和音视频数据打包压缩后，推送给传输模块；传输模块用于通过网络将采集模块所...
【专利技术属性】
技术研发人员：汤宇超，
申请(专利权)人：三星电子中国研发中心，三星电子株式会社，
类型：发明
国别省市：江苏,32
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。