视频的处理方法、装置及系统制造方法及图纸

本申请公开了一种视频的处理方法、装置及系统。其中，该方法包括：获取直播视频中显示的不同类型的对象，其中，对象包括：推荐的前景对象，以及在直播视频中展现的除前景对象之外的备选对象；基于筛选条件，从不同类型的对象中识别出直播视频中展示的前景对象，其中，筛选条件由至少一个用于表征具有前景对象特点的特征参数构成；输出前景对象。本申请解决了相关技术中的图像识别方法对直播视频中主推产品的识别准确度较低的技术问题。品的识别准确度较低的技术问题。品的识别准确度较低的技术问题。

【技术实现步骤摘要】
视频的处理方法、装置及系统


[0001]本申请涉及互联网领域，具体而言，涉及一种视频的处理方法、装置及系统。

技术介绍

[0002]目前在直播过程中，主播往往会依次向观众展示多款商品，而且，在同一时刻主播仅推荐一个产品，其余产品虽然会显示在直播视频中，但属于直播间的背景商品，也即，在同一时刻直播视频中仅有一个产品作为显示对象进行展示。
[0003]为了能够从直播视频中识别出主播主推的商品，需要对直播视频进行目标检测。现有检测方法是基于对候选框进行分类实现的，对于同一类别的产品均可以检测出来，如图1所示的方框，均属于服饰类别。但是，在直播视频中，上述检测方法不仅仅可以识别出主播当前主推的产品(如图1中所示的第1类产品)，而且会识别出其他属于背景产品的产品(如图1中所示的第2类产品)，导致识别结果存在干扰，准确率较低。
[0004]针对上述的问题，目前尚未提出有效的解决方案。

技术实现思路

[0005]本申请实施例提供了一种视频的处理方法、装置及系统，以至少解决相关技术中的图像识别方法对直播视频中主推产品的识别准确度较低的技术问题。
[0006]根据本申请实施例的一个方面，提供了一种视频的处理方法，包括：获取直播视频中显示的不同类型的对象，其中，对象包括：推荐的前景对象，以及在直播视频中展现的除前景对象之外的备选对象；基于筛选条件，从不同类型的对象中识别出直播视频中展示的前景对象，其中，筛选条件由至少一个用于表征具有前景对象特点的特征参数构成；输出前景对象。
[0007]根据本申请实施例的另一方面，还提供了一种视频的处理方法，包括：在显示界面中播放直播视频；在显示界面中显示直播视频中播放的不同类型的对象，其中，对象包括：推荐的前景对象，以及在直播视频中展现的除前景对象之外的备选对象；在直播视频中标注出前景对象，其中，前景对象为直播视频播放的对象中满足筛选条件的对象，其中，筛选条件由至少一个用于表征具有前景对象特点的特征参数构成。
[0008]根据本申请实施例的另一方面，还提供了一种视频的处理装置，包括：获取模块，用于获取直播视频中显示的不同类型的对象，其中，对象包括：推荐的前景对象，以及在直播视频中展现的除前景对象之外的备选对象；识别模块，用于基于筛选条件，从不同类型的对象中识别出直播视频中展示的前景对象，其中，筛选条件由至少一个用于表征具有前景对象特点的特征参数构成；输出模块，用于输出前景对象。
[0009]根据本申请实施例的另一方面，还提供了一种视频的处理装置，包括：播放模块，用于在显示界面中播放直播视频；显示模块，用于在显示界面中显示直播视频中播放的不同类型的对象，其中，对象包括：推荐的前景对象，以及在直播视频中展现的除前景对象之外的备选对象；标注模块，用于在直播视频中标注出前景对象，其中，前景对象为直播视频
播放的对象中满足筛选条件的对象，其中，筛选条件由至少一个用于表征具有前景对象特点的特征参数构成。
[0010]根据本申请实施例的另一方面，还提供了一种计算机可读存储介质，计算机可读存储介质包括存储的程序，其中，在程序运行时控制计算机可读存储介质所在设备执行上述的视频的处理方法。
[0011]根据本申请实施例的另一方面，还提供了一种计算机终端，包括：存储器和处理器，处理器用于运行存储器中存储的程序，其中，程序运行时执行上述的视频的处理方法。
[0012]根据本申请实施例的另一方面，还提供了一种视频的处理系统，包括：处理器；以及存储器，与处理器连接，用于为处理器提供处理以下处理步骤的指令：获取直播视频中显示的不同类型的对象，其中，对象包括：推荐的前景对象，以及在直播视频中展现的除前景对象之外的备选对象；基于筛选条件，从不同类型的对象中识别出展示直播视频中展示的前景对象，其中，筛选条件由至少一个用于表征具有前景对象特点的特征参数构成；输出前景对象。
[0013]根据本申请实施例的另一方面，还提供了一种视频的处理方法，包括：通过调用第一接口获取直播视频，其中，第一接口包括：第一参数，第一参数的参数值为直播视频；确定直播视频中显示的不同类型的对象，其中，对象包括：推荐的前景对象，以及在直播视频中展现的除前景对象之外的备选对象；基于筛选条件，从不同类型的对象中识别出直播视频中展示的前景对象，其中，筛选条件由至少一个用于表征具有前景对象特点的特征参数构成；通过调用第二接口输出前景对象，其中，第二接口包括：第二参数，第二参数的参数值为前景对象。
[0014]根据本申请实施例的另一方面，还提供了一种视频的处理方法，包括：获取视频中显示的多个对象，其中，对象包括：前景对象和备选对象；基于筛选条件，从多个对象中识别出视频的前景对象，其中，筛选条件由至少一个用于表征具有前景对象特点的特征参数构成；输出前景对象。
[0015]在本申请实施例中，在获取到直播视频中显示的不同类型的对象之后，通过筛选条件对不同类型的对象进行筛选，识别出直播视频中展示的前景对象并进行输出，从而实现检测主播主推的产品的目的。容易注意到的是，由于筛选条件由至少一个用于表征具有前景对象特点的特征参数构成，因此，通过筛选条件筛选出的对象是主播主推的产品，并不会包含其他背景产品，从而避免了其他背景产品的干扰，达到了提高主推产品的识别准确度，提升用户体验感和好感度的技术效果，进而解决了相关技术中的图像识别方法对直播视频中主推产品的识别准确度较低的技术问题。
附图说明
[0016]此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：
[0017]图1是根据现有技术的一种目标检测结果的示意图；
[0018]图2是根据现有技术的一种对图像中手表进行定位的示意图；
[0019]图3是根据本申请实施例的一种用于实现视频的处理方法的计算机终端(或移动设备)的硬件结构框图；
[0020]图4是根据本申请实施例的一种视频的处理方法的流程图；
[0021]图5a是根据本申请实施例的一种可选的视频帧的示意图；
[0022]图5b是根据本申请实施例的一种可选的视频帧对应的运动历史图的示意图；
[0023]图5c是根据本申请实施例的一种可选的视频帧中每个像素对应的坐标的示意图；
[0024]图6是根据本申请实施例的一种可选的视频的处理方法的流程图；
[0025]图7是根据本申请实施例的另一种视频的处理方法的流程图；
[0026]图8是根据本申请实施例的一种视频的处理装置的示意图；
[0027]图9是根据本申请实施例的另一种视频的处理装置的示意图；
[0028]图10是根据本申请实施例的又一种视频的处理方法的流程图；
[0029]图11是根据本申请实施例的又一种视频的处理装置的示意图；
[0030]图12是根据本申请实施例的一种计算机终端的结构框图。
具体实施方式
[003本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频的处理方法，其特征在于，包括：获取直播视频中显示的不同类型的对象，其中，所述对象包括：推荐的前景对象，以及在所述直播视频中展现的除所述前景对象之外的备选对象；基于筛选条件，从所述不同类型的对象中识别出所述直播视频中展示的所述前景对象，其中，所述筛选条件由至少一个用于表征具有所述前景对象特点的特征参数构成；输出所述前景对象。2.根据权利要求1所述的方法，其特征在于，所述特征参数包括如下至少之一：所述对象在所述直播视频中的显示位置、显示时长、运动信息和与推荐信息的匹配结果，其中，所述推荐信息包括所述直播视频中同步输出的文字信息和主播输出的语音信息。3.根据权利要求2所述的方法，其特征在于，所述筛选条件由如下至少一个特征参数确定的条件构成：在所述直播视频中的显示位置位于关键位置，其中，所述关键位置包括：所述直播视频的中心位置、与主播间距最小的位置和预定的固定位置；在所述直播视频中的显示时长超过预定时长；在所述直播视频中的预定时间段内产生的移动频率最高；在所述直播视频中展示的所有对象中发生移动的时间最长；与所述直播视频中显示的对象特征与所述推荐信息匹配度最高。4.根据权利要求3所述的方法，其特征在于，所述方法还包括：解析所述推荐信息，生成关键特征信息，其中，所述关键特征信息包括如下至少之一：从所述文字信息中解析到的关键词句和从所述语音信息中解析到的关键词句；将所述直播视频中显示的每个对象的对象特征分别与所述关键特征信息比对，获取比对结果，其中，所述比对结果用于表征每个对象分别与所述推荐信息的匹配度。5.根据权利要求1至4中任意一项所述的方法，其特征在于，获取直播视频中显示的不同类型的对象，包括：获取待检测的所述直播视频；采用预测模型识别所述待检测的直播视频，从所述直播视频的直播画面中检测出不同类型的对象，其中，采用检测框来标识识别到的对象。6.根据权利要求5所述的方法，其特征在于，在采用预测模型识别所述待检测的直播视频之前，所述方法还包括：获取历史直播视频中的多帧历史图片；对每帧历史图片进行标注，标注出所述历史图片中的前景对象和备选对象，其中，所述历史图片中的前景对象和备选对象采用不同的检测框进行标识；基于标注了前景对象和备选对象的历史图片来训练神经网络模型，生成所述预测模型。7.根据权利要求6所述的方法，其特征在于，获取历史直播视频中的多帧历史图片，包括：获取待识别的所述历史直播视频，获取每帧视频帧对应的运动历史图，以及所述视频帧中每个像素对应的坐标；基于所述视频帧中每个像素对应的坐标，沿通道维度进行图像拼接，得到所述多帧历
史图片。8.一种视频的处理方法，其特征在于，包括：在显示界面中播放直播视频；在所述显示界面中显示所述直播视频中播放的不同类型的对象，其中，所述对象包括：推荐的前景对象，以及在所述直播视频中展现的除所述前景对象之外的备选对象；在所述直播视频中标注出所述前景对象，其中，所述前景对象为所述直播视频播放的对象中满足筛选条件的对象，其中，所述筛选条件由至少一个用于表征具有所述前景对象特点的特征参数构成。9.根据权利要求8所述的方法，其特征在于，所述特征参数包括如下至少之一：所述对象在所述直播视频中的显示位置、显示时长、运动信息和与推荐信息的匹配结果，其中，所述推荐信息包括所述直播视频中同步输出的文字信息和主播输出的语音信息。10.根据权...

【专利技术属性】
技术研发人员：谢晨伟，张严浩，熊雄，郑赟，潘攀，徐盈辉，
申请(专利权)人：阿里巴巴集团控股有限公司，
类型：发明
国别省市：