处理视频流的方法、多媒体播控系统和存储介质技术方案

本申请涉及多媒体播控技术领域，具体涉及处理视频流的方法、多媒体播控系统和存储介质，其中的方法包括：显示系统控制持续显示申请到的内存队列，并将所述内存队列递交至视频解码器以存储解码后视频流；当显示系统接收到对应所述内存队列中第一个内存块的完成状态反馈信号后，通过调整VSYNC相位，刷新显示所述第一个内存块。本申请能够实现快速启播和视频帧快速切换显示的效果。帧快速切换显示的效果。帧快速切换显示的效果。

【技术实现步骤摘要】
处理视频流的方法、多媒体播控系统和存储介质


[0001]本申请涉及播控系统
，特别涉及处理视频流的方法、多媒体播控系统和存储介质。

技术介绍

[0002]多媒体播控系统存在快速启播和快速切换视频画面的用户需求，快速启播和快速切换是直接影响用户体验的关键因素。
[0003]现有技术中智能设备的异构多核处理器和显示控制器之间，存在接口混乱的问题，没有统一高效的接口实现低时延快速播放和快速切换的接口。另外，影响快速启动和快速切换时间的客观因素还包括：视频分辨率、网络性能、解码速度、渲染架构等。

技术实现思路

[0004]本申请提供了处理视频流的方法、多媒体播控系统和存储介质，其能够实现快速启播和视频帧快速切换显示的效果。
[0005]在第一方面，提供一种处理视频流的方法。该方法包括：获取来自视频输入设备的辅助视频流，并对来自所述视频输入设备的主视频流进行缓冲；对所述辅助视频流进行解码以生成辅助视频数据流，并按照目标布局对所述辅助视频数据流进行渲染；以及响应于所述主视频流的缓冲完成，对所述主视频流进行解码以生成主视频数据流，并对所述主视频数据流进行渲染以替换所述目标布局中的所述辅助视频数据流。
[0006]区别于传统的视频流处理方式，上述方法基于辅助视频流实现快速显示，并能够在主视频流缓冲完成后快速切换显示，从而克服网络性能的约束。
[0007]在一些实施例中，对所述辅助视频流进行解码以生成辅助视频数据流、并按照目标布局对所述辅助视频数据流进行渲染包括：将连续内存队列提交到视频解码器；根据垂直同步VSYNC信号触发所述视频解码器对所述辅助视频流进行解码，并将所述视频解码器生成的所述辅助视频数据流存入所述连续内存队列；通过调整所述VSYNC信号的相位，对所述连续内存队列进行刷新显示。
[0008]通过上述实施例，针对辅助视频流采用显示和解码同步处理的方式，做到了视频零秒启播或切换效果，并能够在存储辅助视频流的第一个内存块完成解码后立刻切换显示图像，从而有效缩短显示完整图像的时间。
[0009]在一些实施例中，对所述主视频流进行解码以生成主视频数据流、并对所述主视频数据流进行渲染以替换所述目标布局中的所述辅助视频数据流包括：将连续内存队列提交到视频解码器；根据垂直同步VSYNC信号触发所述视频解码器对所述主视频数据流进行解码，并将所述视频解码器生成的所述主视频数据流存入所述连续内存队列；通过调整所述VSYNC信号的相位，对所述连续内存队列进行刷新显示。
[0010]通过上述实施例，针对主视频流采用显示和解码同步处理的方式，做到了在存储主视频流的第一个内存块完成解码后立刻切换辅助视频流而显示主视频流图像。由此，实
现了快速切换显示主视频流，优化了用户的观影体验。
[0011]在一些实施例中，该方法还包括：申请所述连续内存队列，并持续对所述连续内存队列进行显示，其中通过调整所述VSYNC信号的相位、对所述连续内存队列进行刷新显示包括：响应于所述连续内存队列中的第一个内存块的解码完成状态反馈信号，通过调整VSYNC相位，刷新显示所述第一个内存块。
[0012]在第二方面，提供一种处理视频流的方法。该方法包括：控制持续显示申请到的内存队列，并将所述内存队列递交至视频解码器；根据VSYNC信号触发所述视频解码器对视频流进行解码，并将解码后的视频流存入所述内存队列；以及响应于对应所述内存队列中第一个内存块的解码完成状态反馈信号，通过调整所述VSYNC信号的相位，刷新显示所述第一个内存块。
[0013]区别于传统的解码和显示顺序处理方式，上述方法采用显示和解码同步处理的方式，做到了视频零秒启播或切换效果，并能够在第一个内存块完成解码后立刻切换显示图像。由此，不仅提高了启播速度，而且有效缩短显示完整图像的耗时；从而实现了快速启播和快速切换，优化了用户体验。
[0014]在一些实施例中，控制持续显示申请到的内存队列，并将所述内存队列递交至视频解码器包括：申请与多个视频输入设备一一对应的多个解码内存队列、以及一合成内存队列；将所述多个解码内存队列递交至所述视频解码器以用于分别存储对应视频输入设备的解码后的视频流；以及将所述合成内存队列递交至帧处理引擎，并控制持续显示所述合成内存队列。
[0015]在一些实施例中，该方法还包括：所述帧处理引擎根据所述VSYNC信号从所述多个解码内存队列中读取解码后的视频流，以合成获取合成帧，并存储所述合成帧至所述合成内存队列，其中响应于对应所述内存队列中第一个内存块的解码完成状态反馈信号包括：响应于对应合成内存队列中第一个内存块的合成完成状态反馈信号。
[0016]在一些实施例中，刷新显示所述第一个内存块包括：将显示帧替换为所述第一个内存块中的第一个合成帧。
[0017]在一些实施例中，所述视频输入设备包括IPC设备、摄像头、HDMI
‑
IN设备、USB视频设备和/或虚拟显示设备。
[0018]上述实施例针对多视频输入设备场景，进一步采用显示、解码和合成同步处理的方式，以进一步克服合成帧的显示时延；做到了视频零秒启播或切换效果，并能够在第一次接收到合成完成状态反馈信号后立刻切换显示合成图像。不仅提高了启播速度，而且有效缩短显示合成图像的耗时；从而实现了多路输入场景下的快速启播和快速切换显示，大大优化了用户体验。
[0019]在一些实施例中，控制持续显示申请到的内存队列，并将所述内存队列递交至视频解码器包括：获取来自视频输入设备的辅助视频流，同时缓冲来自所述视频输入设备的主视频流；控制持续显示申请到的内存队列；由所述视频解码器解码所述辅助视频流，并将解码后的辅助视频流存入所述内存队列；以及响应于接收到对应所述内存队列中第一个内存块的解码完成状态反馈信号，通过调整VSYNC相位，刷新显示所述第一个内存块，并且所述方法还包括：响应于所述主视频流的缓冲完成，控制所述视频解码器解码所述主视频流，并将解码后的主视频流存入所述内存队列；以及响应于接收到存入所述解码后的主视频流
的首个内存块的解码完成状态反馈信号，通过调整VSYNC相位，刷新显示所述首个内存块。
[0020]上述实施例针对网络性能的约束而导致的时延问题，通过显示、解码辅助视频流与缓存主视频流三者同步处理的方式，实现了快速启播和快速显示画面(辅助视频流)，并能够在接收到存有解码后主视频流的首个内存块的完成状态反馈信号后，立刻切换显示主视频流，进一步实现快速切换高清画面。
[0021]在一些实施例中，所述内存队列为连续内存队列。以此实现节省内存，同时更方便管理。
[0022]在第三方面，提供一种多媒体播控系统。该系统包括：存储器，被配置为存储指令集；以及处理器，被配置为执行所述指令集以执行上述的一种快速启播和快速切换的方法。
[0023]在一些实施例中，所述多媒体播控系统还包括显示系统、视频解码器和帧处理引擎。
[0024]在第四方面，提供一种计算机可读存储介质，其上存储有计算机程本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种处理视频流的方法，其特征在于，包括：获取来自视频输入设备的辅助视频流，并对来自所述视频输入设备的主视频流进行缓冲；对所述辅助视频流进行解码以生成辅助视频数据流，并按照目标布局对所述辅助视频数据流进行渲染；以及响应于所述主视频流的缓冲完成，对所述主视频流进行解码以生成主视频数据流，并对所述主视频数据流进行渲染以替换所述目标布局中的所述辅助视频数据流。2.根据权利要求1所述的方法，其特征在于，对所述辅助视频流进行解码以生成辅助视频数据流、并按照目标布局对所述辅助视频数据流进行渲染包括：将连续内存队列提交到视频解码器；根据垂直同步VSYNC信号触发所述视频解码器对所述辅助视频流进行解码，并将所述视频解码器生成的所述辅助视频数据流存入所述连续内存队列；通过调整所述VSYNC信号的相位，对所述连续内存队列进行刷新显示。3.根据权利要求1所述的方法，其特征在于，对所述主视频流进行解码以生成主视频数据流、并对所述主视频数据流进行渲染以替换所述目标布局中的所述辅助视频数据流包括：将连续内存队列提交到视频解码器；根据垂直同步VSYNC信号触发所述视频解码器对所述主视频数据流进行解码，并将所述视频解码器生成的所述主视频数据流存入所述连续内存队列；通过调整所述VSYNC信号的相位，对所述连续内存队列进行刷新显示。4.根据权利要求2或3所述的方法，还包括：申请所述连续内存队列，并持续对所述连续内存队列进行显示，其中通过调整所述VSYNC信号的相位、对所述连续内存队列进行刷新显示包括：响应于所述连续内存队列中的第一个内存块的解码完成状态反馈信号，通过调整VSYNC相位，刷新显示所述第一个内存块。5.一种处理视频流的方法，其特征在于，包括：控制持续显示申请到的内存队列，并将所述内存队列递交至视频解码器；根据VSYNC信号触发所述视频解码器对视频流进行解码，并将解码后的视频流存入所述内存队列；以及响应于对应所述内存队列中第一个内存块的解码完成状态反馈信号，通过调整所述VSYNC信号的相位，刷新显示所述第一个内存块。6.根据权利要求5所述的方法，其特征在于，控制持续显示申请到的内存队列，并将所述内存队列递交至视频解码器包括：申请与多个视频输入设备一一对应的多个解码内存队列、以及一合成内存队列；将所述多个解码内...

【专利技术属性】
技术研发人员：杨文杰，许丽明，
申请(专利权)人：瑞芯微电子股份有限公司，
类型：发明
国别省市：