一种视频处理方法及装置制造方法及图纸

本发明专利技术提供了一种视频处理方法及装置，其中，该方法包括：接收选中待浏览的一路或多路视频流或视频流的关键帧的选择指令；根据所述选择指令将所述视频流生成的视频流缩略图或所述关键帧生成的关键帧缩略图设置到场景缩略图中生成画面布局流，其中，所述场景缩略图是根据虚拟现实/增强现实AR/VR界面中显示的场景生成；在所述VR/AR界面中呈现所述画面布局流，通过提供虚拟的多路视频流画面的布局界面，解决了相关技术中用户不能灵活便捷的浏览视频的问题，用户可以通过手柄或手势控制对整个布局界面内多路视频流画面进行操作。

A Video Processing Method and Device

The present invention provides a video processing method and device, which includes receiving a selection instruction for key frames of one or more selected video streams or video streams to be browsed, setting video stream thumbnails generated by the video stream or key frame thumbnails generated by the key frame to scene thumbnails to generate picture layout streams according to the selection instruction. The scene thumbnail is generated according to the scene displayed in the virtual reality/augmented reality AR/VR interface; the picture layout flow is presented in the VR/AR interface, and the problem that the user can not browse the video flexibly and conveniently in the related technology is solved by providing the virtual multi-channel video flow picture layout interface. The user can control the multi-channel in the entire layout interface through the handle or gesture. The video stream picture is operated.

【技术实现步骤摘要】
一种视频处理方法及装置
本专利技术涉及通信领域，具体而言，涉及一种视频处理方法及装置。
技术介绍
传统视频会议或监控等视频应用系统受到显示屏幕分辨率和尺寸、会议室物理空间、系统成本等的限制，只能同时实现两路或三路视频流画面。如果系统要支持更多路视频流，要么需要分辨率和尺寸非常大的屏幕或多个显示屏，要么需要缩小画面才能同时显示多路视频流。前者成本较高，后者清晰度下降，都不能让用户灵活便捷的对视频进行浏览。针对相关技术中用户不能灵活便捷的浏览视频的问题，尚未提出解决方案。
技术实现思路
本专利技术实施例提供了一种视频处理方法及装置，以至少解决相关技术中用户不能灵活便捷的浏览视频的问题。根据本专利技术的一个实施例，提供了一种视频处理方法，包括：接收选中待浏览的一路或多路视频流或视频流的关键帧的选择指令，其中，所述视频流为一路或多路，来自一个或多个终端；根据所述选择指令将所述视频流生成的视频流缩略图或所述关键帧生成的关键帧缩略图设置到场景缩略图中生成画面布局流，其中，所述场景缩略图是根据虚拟现实/增强现实AR/VR界面中显示的场景生成的；在所述VR/AR界面中呈现所述画面布局流。可选地，在接收选中待浏览的一路或多路视频流或视频流的关键帧的选择指令之前，所述方法还包括：根据一路或多路视频流生成视频流缩略图，其中，一路视频流生成一个视频流缩略图；或者，获取一路或多路视频流的关键帧，根据所述一路或多路视频流的关键帧生成关键帧缩略图，其中，一路视频流的关键帧生成一个关键帧缩略图。可选地，所述获取一路或多路视频流的关键帧包括：从服务器中预先设置的关键帧队列中获取所述一路或多路视频流的关键帧，其中，所述一路或多路视频流的关键帧是所述服务器在解码所述一路或多路视频流过程中根据收集的码字信息和量化参数信息生成并保存的关键帧。可选地，在根据所述选择指令将所述视频流生成的视频流缩略图或所述关键帧生成的关键帧缩略图设置到场景缩略图中生成画面布局流之前，所述方法还包括：接收选中所述场景缩略图的选中指令；根据所述选中指令将所述场景缩略图放大预定倍数，并显示在所述AR/VR界面中。可选地，根据所述选择指令将所述视频流生成的视频流缩略图或所述关键帧生成的关键帧缩略图设置到场景缩略图中生成画面布局流包括：根据所述选择指令调整所述视频流缩略图或所述关键帧缩略图的大小；选择虚拟电视的类型，将所述虚拟电视渲染到所述场景缩略图中；根据所述场景缩略图在所述AR/V界面的坐标，将一路或多路视频流、以及所述虚拟电视渲染到所述AR/VR界面，更新所述场景缩略图。可选地，在根据所述选择指令将所述视频流生成的视频流缩略图或所述关键帧生成的关键帧缩略图设置到场景缩略图中生成画面布局流之前，所述方法还包括：通过AR/VR摄像头采集通过手势沿预定方向形成的虚拟框；通过计算得到所述虚拟框在所述AR/VR界面中的坐标和尺寸；在所述AR/VR界面中渲染所述虚拟框标示的虚拟电视。可选地，所述方法还包括：接收AR/VR摄像头反馈的用户当前注视方向和实时画面的布局信息；根据所述布局信息调整所述一路或多路视频流中的每路视频流的以下至少参数之一：分辨率、帧率、码率。根据本专利技术的另一个实施例，还提供了一种视频处理装置，应用于虚拟现实/增强现实AR/VR设备，包括：第一接收模块，用于接收选中待浏览的视频流或视频流的关键帧的选择指令，其中，所述视频流为一路或多路，来自一个或多个终端；第一生成模块，用于根据所述选择指令将所述视频流生成的视频流缩略图或所述关键帧生成的关键帧缩略图设置到场景缩略图中生成画面布局流，其中，所述场景缩略图是根据AR/VR界面中显示的场景生成的；呈现模块，用于在所述VR/AR界面中呈现所述画面布局流。可选地，所述装置还包括：第二生成模块，用于根据一路或多路视频流生成视频流缩略图，其中，一路视频流生成一个视频流缩略图；或者，获取模块，用于获取一路或多路视频流的关键帧，根据所述一路或多路视频流的关键帧生成关键帧缩略图，其中，一路视频流的关键帧生成一个关键帧缩略图。可选地，所述获取模块，还用于从服务器中预先设置的关键帧队列中获取所述一路或多路视频流的关键帧，其中，所述一路或多路视频流的关键帧是所述服务器在解码所述一路或多路视频流过程中根据收集的码字信息和量化参数信息生成并保存的关键帧。可选地，所述装置还包括：第二接收模块，用于接收选中所述场景缩略图的选中指令；放大模块，用于根据所述选中指令将所述场景缩略图放大预定倍数，并显示在所述AR/VR界面中。可选地，所述第一生成模块，还用于根据所述选择指令调整所述视频流缩略图或所述关键帧缩略图的大小；选择虚拟电视的类型，将所述虚拟电视渲染到所述场景缩略图中；根据所述场景缩略图在所述AR/V界面的坐标，将一路或多路视频流、以及所述虚拟电视渲染到所述AR/VR界面，更新所述场景缩略图。可选地，所述装置还包括：采集模块，用于通过AR/VR摄像头采集通过手势沿预定方向形成的虚拟框；计算模块，用于通过计算得到所述虚拟框在所述AR/VR界面中的坐标和尺寸；渲染模块，用于在所述AR/VR界面中渲染所述虚拟框标示的虚拟电视。可选地，所述装置还包括：第三接收模块，用于接收AR/VR摄像头反馈的用户当前注视方向和实时画面的布局信息；调整模块，用于根据所述布局信息调整所述一路或多路视频流中的每路视频流的以下至少参数之一：分辨率、帧率、码率。根据本专利技术的又一个实施例，还提供了一种存储介质，所述存储介质包括存储的程序，其中，所述程序运行时执行上述任一项所述的方法。根据本专利技术的又一个实施例，还提供了一种处理器，所述处理器用于运行程序，其中，所述程序运行时执行上述任一项所述的方法。通过本专利技术，接收选中待浏览的一路或多路视频流或视频流的关键帧的选择指令；根据所述选择指令将所述视频流生成的视频流缩略图或所述关键帧生成的关键帧缩略图设置到场景缩略图中生成画面布局流，其中，所述场景缩略图是根据虚拟现实/增强现实AR/VR界面中显示的场景生成；在所述VR/AR界面中呈现所述画面布局流，通过提供虚拟的多路视频流画面的布局界面，解决了相关技术中用户不能灵活便捷的浏览视频的问题，用户可以通过手柄或手势控制对整个布局界面内多路视频流画面进行操作。附图说明此处所说明的附图用来提供对本专利技术的进一步理解，构成本申请的一部分，本专利技术的示意性实施例及其说明用于解释本专利技术，并不构成对本专利技术的不当限定。在附图中：图1是根据本专利技术实施例的视频处理方法的流程图；图2是根据本专利技术实施例的视频处理的系统架构图；图3是根据本专利技术实施例的终端自由选择视频流的示意图；图4是根据本专利技术实施例的从服务端获取所有终端的视频流缩略图的流程图；图5是根据本专利技术实施例的从本地获取当前接收的视频流缩略图的流程图；图6是根据本专利技术实施例的从本地获取某一路接收的视频流的关键帧的流程图；图7是根据本专利技术实施例的从本地获取多路接收的视频流的关键帧的流程图；图8是根据本专利技术实施例的在虚拟现实中多路视频流呈现和布局方式的流程图；图9是根据本专利技术实施例的在增强现实中多路视频流呈现和布局方式的流程图；图10是根据本专利技术实施例虚拟现实界面中虚拟电视的示意图；图11是根据本专利技术实施例的视频处理装置的结构框图。具体实施方式下文中将参考附图并结合本文档来自技高网...

【技术保护点】
1.一种视频处理方法，其特征在于，包括：接收选中待浏览的一路或多路视频流或视频流的关键帧的选择指令，其中，所述视频流为一路或多路，来自一个或多个终端；根据所述选择指令将所述视频流生成的视频流缩略图或所述关键帧生成的关键帧缩略图设置到场景缩略图中生成画面布局流，其中，所述场景缩略图是根据虚拟现实/增强现实AR/VR界面中显示的场景生成的；在所述VR/AR界面中呈现所述画面布局流。

【技术特征摘要】
1.一种视频处理方法，其特征在于，包括：接收选中待浏览的一路或多路视频流或视频流的关键帧的选择指令，其中，所述视频流为一路或多路，来自一个或多个终端；根据所述选择指令将所述视频流生成的视频流缩略图或所述关键帧生成的关键帧缩略图设置到场景缩略图中生成画面布局流，其中，所述场景缩略图是根据虚拟现实/增强现实AR/VR界面中显示的场景生成的；在所述VR/AR界面中呈现所述画面布局流。2.根据权利要求1所述的方法，其特征在于，在接收选中待浏览的一路或多路视频流或视频流的关键帧的选择指令之前，所述方法还包括：根据一路或多路视频流生成视频流缩略图，其中，一路视频流生成一个视频流缩略图；或者，获取一路或多路视频流的关键帧，根据所述一路或多路视频流的关键帧生成关键帧缩略图，其中，一路视频流的关键帧生成一个关键帧缩略图。3.根据权利要求2所述的方法，其特征在于，所述获取一路或多路视频流的关键帧包括：从服务器中预先设置的关键帧队列中获取所述一路或多路视频流的关键帧，其中，所述一路或多路视频流的关键帧是所述服务器在解码所述一路或多路视频流过程中根据收集的码字信息和量化参数信息生成并保存的关键帧。4.根据权利要求1所述的方法，其特征在于，在根据所述选择指令将所述视频流生成的视频流缩略图或所述关键帧生成的关键帧缩略图设置到场景缩略图中生成画面布局流之前，所述方法还包括：接收选中所述场景缩略图的选中指令；根据所述选中指令将所述场景缩略图放大预定倍数，并显示在所述AR/VR界面中。5.根据权利要求4所述的方法，其特征在于，根据所述选择指令将所述视频流生成的视频流缩略图或所述关键帧生成的关键帧缩略图设置到场景缩略图中生成画面布局流包括：根据所述选择指令调整所述视频...

【专利技术属性】
技术研发人员：冯斌，
申请(专利权)人：中兴通讯股份有限公司，
类型：发明
国别省市：广东,44