视频处理方法、装置、设备和存储介质制造方法及图纸

本发明专利技术实施例提供一种视频处理方法、装置、设备和存储介质，应用于播放设备，该方法包括：获取视频采集设备以目标时间间隔依次生产的多个视频帧，以及播放设备检测多个历史视频帧中的特效关键点对应的多个历史检测时长，目标时间间隔与视频采集设备的生产帧率匹配；检测多个视频帧分别对应的特效关键点；根据特效关键点，确定多个视频帧分别对应的待渲染特效。本方案中，根据多个历史检测时长和播放设备的渲染帧率，确定多个视频帧分别对应的目标渲染时间点，每一视频帧对应的目标渲染时间点晚于每一视频帧对应的特效关键点检测完成的时间点，从而确保在目标渲染时间点能够渲染多个视频帧以及多个视频帧分别对应的待渲染特效。效。效。

【技术实现步骤摘要】
视频处理方法、装置、设备和存储介质


[0001]本专利技术涉及互联网
，尤其涉及一种视频处理方法、装置、设备和存储介质。

技术介绍

[0002]在视频渲染的生产消费模型中，相机等视频采集设备按照自身的帧率生产视频帧，播放设备按照自身的帧率消费视频帧，也即渲染视频帧。
[0003]在直播等视频播放场景下，播放设备在获取到视频采集设备生产的视频帧之后，通常需要对视频帧中的所包含的对象进行关键点检测，比如：对视频帧中的人物进行面部关键点检测、肢体关键点检测等，以便为视频帧添加动画等渲染特效。
[0004]实际应用中，由于不同视频帧关键点检测所需要的时间不同，可能在到达播放设备渲染视频帧的时间点时，还未完成对当前待渲染视频帧的关键点检测，进而出现无法渲染当前待渲染视频帧对应的渲染特效，或者渲染出特效与渲染出的视频帧不匹配等问题，影响用户体验。

技术实现思路

[0005]本专利技术实施例提供一种视频处理方法、装置、设备和存储介质，用以提升渲染视频画面的质量。
[0006]第一方面，本专利技术实施例提供一种视频处理方法，应用于播放设备，所述方法包括：
[0007]获取视频采集设备以目标时间间隔依次生产的多个视频帧，以及播放设备检测多个历史视频帧中的特效关键点对应的多个历史检测时长，所述目标时间间隔与所述视频采集设备的生产帧率匹配；
[0008]检测所述多个视频帧分别对应的特效关键点；
[0009]根据所述特效关键点，确定所述多个视频帧分别对应的待渲染特效；r/>[0010]根据所述多个历史检测时长和所述播放设备的渲染帧率，确定所述多个视频帧分别对应的目标渲染时间点，每一视频帧对应的所述目标渲染时间点晚于每一视频帧对应的特效关键点检测完成的时间点；
[0011]在所述目标渲染时间点渲染所述多个视频帧以及所述多个视频帧分别对应的待渲染特效。
[0012]第二方面，本专利技术实施例提供一种视频处理装置，应用于播放设备，所述装置包括：
[0013]获取模块，用于获取视频采集设备以目标时间间隔依次生产的多个视频帧，以及播放设备检测多个历史视频帧中的特效关键点对应的多个历史检测时长，所述目标时间间隔与所述视频采集设备的生产帧率匹配；
[0014]检测模块，用于检测所述多个视频帧分别对应的特效关键点；根据所述特效关键
点，确定所述多个视频帧分别对应的待渲染特效；
[0015]处理模块，用于根据所述多个历史检测时长和所述播放设备的渲染帧率，确定所述多个视频帧分别对应的目标渲染时间点，每一视频帧对应的所述目标渲染时间点晚于每一视频帧对应的特效关键点检测完成的时间点；
[0016]渲染模块，用于在所述目标渲染时间点渲染所述多个视频帧以及所述多个视频帧分别对应的待渲染特效。
[0017]第三方面，本专利技术实施例提供一种电子设备，包括：存储器、处理器、通信接口；其中，所述存储器上存储有可执行代码，当所述可执行代码被所述处理器执行时，使所述处理器至少可以实现如第一方面所述的视频处理方法。
[0018]第四方面，本专利技术实施例提供了一种非暂时性机器可读存储介质，所述非暂时性机器可读存储介质上存储有可执行代码，当所述可执行代码被电子设备的处理器执行时，使所述处理器至少可以实现如第一方面所述的视频处理方法。
[0019]本专利技术实施例提供的方案，应用于视频特效渲染播放场景，在该场景下，视频采集设备以自身对应的生产帧率等时间间隔的连续生产多个视频帧，并传输给播放设备，以供播放设备进行关键点检测以及视频帧和视频帧中的关键点对应的特效的渲染。在具体实施过程中，播放设备在获取视频采集设备以目标时间间隔依次生产的多个视频帧后，首先，分别检测多个视频帧分别对应的特效关键点，并根据特效关键点，确定多个视频帧分别对应的待渲染特效。为了保证在渲染时，当前待渲染的视频帧对应的特效关键点检测已完成，本方案中，还获取了播放设备检测多个历史视频帧中的特效关键点对应的多个历史检测时长，并根据多个历史检测时长和播放设备的渲染帧率，确定多个视频帧分别对应的目标渲染时间点。其中，每一视频帧对应的目标渲染时间点晚于每一视频帧对应的特效关键点检测完成的时间点。最后，在目标渲染时间点渲染多个视频帧以及多个视频帧分别对应的待渲染特效。
[0020]本方案中，根据播放设备检测多个历史视频帧中的特效关键点对应的多个历史检测时长，重新确定了播放设备渲染获取到的多个视频帧的渲染时间点，从而保证在渲染视频帧的同时也能够渲染该视频帧中的特效关键点对应的待渲染特效，保证特效与视频帧之间的匹配性，提升视频画面渲染的质量。
附图说明
[0021]为了更清楚地说明本专利技术实施例中的技术方案，下面将对实施例描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0022]图1为本专利技术实施例提供的一种视频处理方法的流程图；
[0023]图2为本专利技术实施例提供的一种视频播放过程的场景示意图；
[0024]图3为本专利技术实施例提供的另一种视频播放过程的场景示意图；
[0025]图4为本专利技术实施例提供的又一种视频播放过程的场景示意图；
[0026]图5为本专利技术实施例提供的一种视频处理装置的结构示意图；
[0027]图6为与图5所示实施例提供的视频处理装置对应的电子设备的结构示意图。
具体实施方式
[0028]为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0029]需要说明的是，本专利技术实施例中所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等)，均为经用户授权或者经过各方充分授权的信息和数据，并且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准，并提供有相应的操作入口，供用户选择授权或者拒绝。
[0030]另外，下述各方法实施例中的步骤时序仅为一种举例，而非严格限定。
[0031]图1为本专利技术实施例提供的一种视频处理方法的流程图，应用于播放设备，如图1所示，可以包括如下步骤：
[0032]101、获取视频采集设备以目标时间间隔依次生产的多个视频帧，以及播放设备检测多个历史视频帧中的特效关键点对应的多个历史检测时长，目标时间间隔与视频采集设备的生产帧率匹配。
[0033]102、检测多个视频帧分别对应的特效关键点。
[0034]103、根据多个视频帧分别对应的特效关键点，确定多个视频帧分别对应的待渲染特效。
[0035]104、根本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频处理方法，其特征在于，应用于播放设备，包括：获取视频采集设备以目标时间间隔依次生产的多个视频帧，以及播放设备检测多个历史视频帧中的特效关键点对应的多个历史检测时长，所述目标时间间隔与所述视频采集设备的生产帧率匹配；检测所述多个视频帧分别对应的特效关键点；根据所述特效关键点，确定所述多个视频帧分别对应的待渲染特效；根据所述多个历史检测时长和所述播放设备的渲染帧率，确定所述多个视频帧分别对应的目标渲染时间点，每一视频帧对应的所述目标渲染时间点晚于每一视频帧对应的特效关键点检测完成的时间点；在所述目标渲染时间点渲染所述多个视频帧以及所述多个视频帧分别对应的待渲染特效。2.根据权利要求1所述的方法，其特征在于，所述渲染帧率与所述生产帧率相同，相邻的所述目标渲染时间点之间的时间间隔为所述目标时间间隔。3.根据权利要求2所述的方法，其特征在于，所述根据所述多个历史检测时长和所述播放设备的渲染帧率，确定所述多个视频帧分别对应的目标渲染时间点，包括：从所述多个历史检测时长中确定目标检测时长，所述目标检测时长对应的历史检测时长大于所述多个历史检测时长中的其他历史检测时长；根据所述目标检测时长和所述播放设备的渲染帧率，确定所述多个视频帧分别对应的目标渲染时间点。4.根据权利要求3所述的方法，其特征在于，所述根据所述目标检测时长和所述播放设备的渲染帧率，确定所述多个视频帧分别对应的目标渲染时间点，包括：若所述目标检测时长小于等于所述目标时间间隔，则保持所述播放设备根据所述渲染帧率确定的初始渲染时间点不变；若所述目标检测时长大于所述目标时间间隔，则确定所述初始渲染时间点延迟目标时长后对应的时间点为所述目标渲染时间点，所述目标时长与所述目标检测时长匹配。5.根据权利要求4所述的方法，其特征在于，所述目标时长通过如下方式确定：确定所述目标检测时长与所述目标时间间隔的比值；确定所述比值向上取整后的数值与所述目标时间间隔的乘积为所述目标时长。6.根据...

【专利技术属性】
技术研发人员：高上，李凤山，冷志勇，
申请(专利权)人：北京花房科技有限公司，
类型：发明
国别省市：