一种基于三维虚拟技术的网络实时互动直播方法及装置制造方法及图纸

本发明专利技术公开了一种基于三维虚拟技术的网络实时互动直播方法及装置，该方法包括：服务器实时获取视频；服务器去除视频的背景色，然后将去除背景色的视频与实时获取的动态三维虚拟场景进行混叠及渲染处理，生成动态三维视频；服务器对动态三维视频进行编码，然后发送给CDN，以便于CDN将编码后的动态三维视频发送给至少一个客户端，从而使至少一个客户端的用户收看直播；服务器实时监控并响应至少一个客户端返回的信息，根据该信息，修改或重新生成动态三维视频中的动态三维虚拟场景，从而使至少一个客户端的用户在收看直播时，与所播放的动态三维视频中的动态三维虚拟场景进行互动。

A method and device for real-time live interaction of network based on 3D virtual technology

The invention discloses a method and apparatus for live real-time interactive 3D network based on virtual technology, the method comprises: acquiring real-time video server; video server background color removal, and the removal of the background color of the video and real-time dynamic 3D virtual scene for aliasing and rendering, 3D video to generate dynamic; dynamic three-dimensional video encoding server, and then sent to CDN, so that CDN will send the dynamic 3D video encoding for at least one client, so that at least one client users to watch live; the server real-time monitoring and response to at least one client information returned, according to the information, modify or re generate dynamic a 3D video dynamic 3D virtual scene, so that at least one of the users in the client to watch the live broadcast, and dynamic The dynamic 3D virtual scene in 3D video is interactive.

【技术实现步骤摘要】
一种基于三维虚拟技术的网络实时互动直播方法及装置
本专利技术涉及视频播放和处理
，具体涉及一种基于三维虚拟技术的网络实时互动直播方法及装置。
技术介绍
目前，在视频播放和处理
，广泛应用的视频直播主要有两种方式：传统电视直播以及网络视频的流媒体直播。在传统电视直播中，可以对内容进行编排，使用专业设备建立处理链路，从摄像机采集，到使用色键器进行原始视频画面的处理，再通过在线图文系统完成内容叠加，然后将内容叠加后的视频通过光纤进行分发。但是由于在上述传统电视直播方式中，对专业设备要求非常高，因此针对一般用户无法具备此类拍摄条件，而且一旦电视直播的内容编排完毕，就无法更改，观众只能被动接收观看，更无法与直播中的主持人以及直播中的场景进行实时互动。在网络视频的流媒体直播中，应用比较成熟的技术是通过视频摄像头采集数据，采集之后，通过网页的动画插件进行编码输出到内容分发网络(CDN)节点，用户通过页面向CDN节点发送观看请求，页面通过动画插件接收CDN节点发送的视频流并播放给用户。而网络视频的流媒体直播在视频内容提供时，由于仅仅以单人视频拍摄的实景或多人连线的简单视频区域分割展示方式本文档来自技高网...

【技术保护点】
一种基于三维虚拟技术的网络实时互动直播方法，其特征在于，该方法包括：服务器实时获取视频；所述服务器去除所述视频的背景色，然后将去除背景色的视频与实时获取的动态三维虚拟场景进行混叠及渲染处理，生成动态三维视频，所述动态三维虚拟场景包括三维物件和/或物件的动画；所述服务器对所述动态三维视频进行编码，然后发送给内容分发网络CDN，以便于所述CDN将编码后的所述动态三维视频发送给至少一个客户端，从而使所述至少一个客户端的用户收看直播；该方法还包括：所述服务器实时监控并响应从所述至少一个客户端返回的信息，根据返回的信息，实时调整所述动态三维视频，从而使所述至少一个客户端的用户在收看直播的同时，与用户在所...

【技术特征摘要】
1.一种基于三维虚拟技术的网络实时互动直播方法，其特征在于，该方法包括：服务器实时获取视频；所述服务器去除所述视频的背景色，然后将去除背景色的视频与实时获取的动态三维虚拟场景进行混叠及渲染处理，生成动态三维视频，所述动态三维虚拟场景包括三维物件和/或物件的动画；所述服务器对所述动态三维视频进行编码，然后发送给内容分发网络CDN，以便于所述CDN将编码后的所述动态三维视频发送给至少一个客户端，从而使所述至少一个客户端的用户收看直播；该方法还包括：所述服务器实时监控并响应从所述至少一个客户端返回的信息，根据返回的信息，实时调整所述动态三维视频，从而使所述至少一个客户端的用户在收看直播的同时，与用户在所播放的所述动态三维视频中进行实时互动。2.如权利要求1所述的方法，其特征在于，实时调整所述动态三维视频包括：根据所述至少一个客户端的用户针对当前播放的所述动态三维视频中的所述动态三维虚拟场景执行修改操作所产生的视频互动指令信息，对所述动态三维虚拟场景进行修改或生成新的动态三维虚拟场景；或所述服务器对获取的视频进行实时监控，并从实时获取的视频中提取要素特征信息，根据所提取的要素特征信息，对所述动态三维虚拟场景进行修改或生成新的动态三维虚拟场景。3.如权利要求2所述的方法，其特征在于，所述要素特征信息包括以下至少一种：图案信息、色彩信息、音频信息以及文字特征信息。4.如权利要求1～3任一项所述的方法，其特征在于，对所述动态三维虚拟场景修改包括：更换或添加所述动态三维虚拟场景中的三维物件、更改或者添加所述动态三维虚拟场景中的三维物件的内容、或更改或添加三维物件动画。5.如权利要求1所述的方法，其特征在于，所述服务器在将去除背景色的视频与实时获取到的动态三维虚拟场景进行混叠及渲染处理之前，还包括：将去除背景色的视频进行三维虚拟化处理。6.如权利要求5所述的方法，其特征在于，所述服务器将去除背景色的视频进行三维虚拟化处理，包括：提取所述去除背景色的视频中的一个或多个视频内容特征；对所述一个或多个视频内容特征进行三维建模，从而对所述去除背景色的视频进行三维虚拟化。7.如权利要求1～3和5～6中任意一项所述的方法，其特征在于，所述服务器实时获取的视频包括以下至少一种：由视频采集设备的一路或多路本地摄像头实时获取的视频；从网络实时获取的一路或多路视频；实时从本地视频文件中获取的视频。8.如权利要求7所述的方法，其特征在于，所述服务器实时获取的视频包括至少两路视频时，所述方法还包括：所述...

【专利技术属性】
技术研发人员：魏小帆，包晟，
申请(专利权)人：星播网深圳信息有限公司，
类型：发明
国别省市：广东,44