基于属性分类和多视角特征融合的微视频流行度预测方法技术

本发明专利技术公开了一种基于属性分类和多视角特征融合的微视频流行度预测方法，所述方法包括以下步骤：利用社会属性特征对微视频进行分类，将微视频分配到不同的流行度等级层次中，获取微视频的初级流行度范围；计算每一个流行度等级层次中不同模态视角下的微视频的相似关系，并用拉普拉斯矩阵的形式表述；利用不同模态的拉普拉斯矩阵的线性组合作为公共子空间的拉普拉斯矩阵；基于拉普拉斯矩阵，利用半监督的方法对微视频的流行度进行预测。本发明专利技术利用属性分类和多视角特征融合的方式进行学习，消除了单一视角特征对于流行度预测的限制，同时强调了社会属性特征对于流行度预测的决定性作用。

Micro video popularity prediction method based on attribute classification and multi view feature fusion

The invention discloses a fusion attribute classification and multi view feature of micro video popularity prediction method based on the method comprises the following steps: classifying the micro video features by the social attributes, micro video distribution to different levels of popularity, access to micro frequency primary popular range; calculation of similarity relation from the perspective of different modes of micro video every popularity in the hierarchy, and using Laplasse matrix form; linear combination of the Laplasse matrix of different modes as the Laplasse matrix of public space; based on the Laplasse matrix, to predict the popularity of micro video using a semi supervised method. The invention uses attribute classification and multi view feature fusion to learn, eliminates the limitation of single view features for popularity prediction, and emphasizes the decisive role of social attribute characteristics for popularity prediction.

【技术实现步骤摘要】
基于属性分类和多视角特征融合的微视频流行度预测方法
本专利技术涉及微视频流行度领域，尤其涉及一种基于属性分类和多视角特征融合的微视频流行度预测方法。
技术介绍
随着网络技术与社交平台的普及，微视频已经作为一种新的用户内容，受到了越来越多的关注。微视频是指短则30秒，长则不超过20分钟的视频短片。微视频的出现，不仅符合现代社会快节奏生活方式下的网络观看习惯和移动终端特色，也可满足娱乐爆炸、注意力稀缺时代消费者的自主参与感和注意力回报率的需求，可以预见“微视频”带给大众的将是随时随地随意的视频享受。而微视频流行度的预测在广告推送，视频推荐以及预留带宽方面均具有指导作用，因此，对于微视频流行度的预测具有重要的意义。在现实生活中，每一个对象均可以用多种不同的视角特征进行表示，例如微视频的表示可以存在声学特征、视觉特征、社会属性特征以及文本特征等多种形式，其中社会属性特征属于人工标注的高级特征，对流行度的预测起到了决定性的作用。其他不同视角的特征可以为微视频流行度的预测起到不同的辅助作用，因此特征融合以及特征选择也是目前比较流行的处理多视角特征的方法。专利技术人在实现本专利技术的过程中，发现现有技术至少存在以下缺点和不足：在实际的应用以及经验中，社会属性特征为人为标注的特征，并不能通过机器学习得到，因此区别于其他机器学习特征。但是目前的方法，如TMALL[1]等，不能充分理解特征之间的不对等性，将所有的特征同等对待，无法满足实际应用中多种需要。
技术实现思路
本专利技术提供了一种基于属性分类和多视角特征融合的微视频流行度预测方法，本专利技术利用属性分类和多视角特征融合的方式进行学习，消除了单一视角特征对于流行度预测的限制，同时强调了社会属性特征对于流行度预测的决定性作用，详见下文描述：一种基于属性分类和多视角特征融合的微视频流行度预测方法，所述方法包括以下步骤：利用社会属性特征对微视频进行分类，将微视频分配到不同的流行度等级层次中，获取微视频的初级流行度范围；计算每一个流行度等级层次中不同模态视角下的微视频的相似关系，并用拉普拉斯矩阵的形式表述；利用不同模态的拉普拉斯矩阵的线性组合作为公共子空间的拉普拉斯矩阵；基于拉普拉斯矩阵，利用半监督的方法对微视频的流行度进行预测。其中，所述方法还包括：对给定的微视频提取4种视角模态特征。进一步地，所述4种视角模态特征具体为：视觉特征、声学特征、文本特征以及社会属性特征。其中，所述利用社会属性特征对微视频进行分类，将微视频分配到不同的流行度等级层次中具体为：利用支持向量机的方法处理社会属性特征，将微视频分为不同的流行度等级；所述支持向量机所用的核函数为高斯核。其中，所述计算每一个流行度等级层次中不同模态视角下的微视频的相似关系，并用拉普拉斯矩阵的形式表述具体为：其中，L(Skl)为在第k个模态特征空间中的处于流行度等级l的微视频的归一化拉普拉斯矩阵，Dkl为对角矩阵，其值为Skl各列的数值之和，Skl为第k个特征空间的处于流行度等级l的微视频之间的径向基距离，以此来表征微视频之间的相似度关系。本专利技术提供的技术方案的有益效果是：1、利用社会属性特征对微视频进行流行度档次的划分，有利于发挥社会属性的决定性指导作用，维持微视频流行度的排序；2、对3种视角信息进行学习，达到特征融合的目的，学习得到公共子空间，以此来消除单一特征空间对于预测结果的局限；3、利用拉普拉斯矩阵表示各微视频特征之间的图关系，以此来提高流行度预测的精度。附图说明图1为一种基于属性分类和多视角特征融合的微视频流行度预测方法的流程图；图2为本方法与其他流行度预测算法的对比结果示意图。具体实施方式为使本专利技术的目的、技术方案和优点更加清楚，下面对本专利技术实施方式作进一步地详细描述。实施例1为了达到较好的预测效果，需要能够全面、自动、准确进行微视频流行度预测的方法。研究表明：相近特征之间的微视频具有相似的流行度。本专利技术实施例提出了一种基于属性分类和多视角特征融合的微视频流行度预测方法，参见图1，详见下文描述：101：利用社会属性特征对微视频进行分类，将微视频分配到不同的流行度等级层次中，获取微视频的初级流行度范围；其中，流行度等级层次的划分与测试集中的微视频的流行度分数有关。将训练集的微视频的分数由高到低进行排列，然后从流行度分数从高到低将微视频平均分配到不同的等级中，将此作为训练集的流行度等级分类。测试集的微视频等级分类则由训练得到的分类器进行预测得到。102：计算每一个流行度等级层次中不同模态视角下的微视频的相似关系，并用拉普拉斯矩阵的形式表述；103：利用不同模态的拉普拉斯矩阵的线性组合作为公共子空间的拉普拉斯矩阵；104：基于拉普拉斯矩阵，利用半监督的方法对微视频的流行度进行预测。其中，在步骤101之前，该方法还包括：对给定的微视频提取4种视角模态特征。进一步地，上述4种视角模态特征具体为：视觉特征、声学特征、文本特征以及社会属性特征。其中，在步骤101中利用社会属性特征对微视频进行流行度等级的分类具体为：利用支持向量机的方法处理社会属性特征，将微视频分为不同的流行度等级。其中，支持向量机所用的核函数为高斯核。其中，在步骤102中计算每一个流行度等级层次中不同模态视角下的微视频的相似关系，并用拉普拉斯矩阵的形式表述具体为：其中，L(Skl)为在第k个模态特征空间中的处于流行度等级l的微视频的归一化拉普拉斯矩阵，Dkl为对角矩阵，其值为Skl各列的数值之和。综上所述，本专利技术实施例通过上述步骤101-步骤104避免了单一视角的特征对于流行度预测的局限性。利用社会属性特征进行特殊的分类处理，强调了社会属性特征对于流行度预测的决定性的指导作用，有利于维持流行度分数之间的排序。实施例2下面结合具体的计算公式、实例对实施例1中的方案进行进一步地介绍，详见下文描述：201：对给定的微视频提取4种视角模态特征，即：视觉特征、声学特征、文本特征以及社会属性特征；本专利技术实施例首先对给定的微视频提取4种微视频研究的常用特征，包括：视觉特征、声学特征、文本特征以及社会属性特征。1、视觉特征包括：颜色直方图信息、微视频中的物体信息(可以用卷积神经网络的方法得到，也可以采用其他方法获取，本专利技术实施例对此不做限制)和美学特征。2、声学特征包括：微视频中的音乐以及其他主要背景音的特征。3、文本特征包括：微视频中的文本标注等，可以用word2vec[2]方法直接得到。4、社会属性特征是指用户账号的信息，包括：账号是否通过验证，粉丝数等信息。这4种模态的特征均能对流行度的预测起到影响，而且互为补充。其中，上述视觉特征、声学特征、文本特征以及社会属性特征为微视频领域公知的技术术语，本专利技术实施例对此仅做简单的介绍，在此不做赘述。202：利用社会属性特征将微视频分配到不同的流行度等级；在实际提取的4种视角模态特征中，社会属性特征为人为标注的高级特征，对流行度的预测具有重要的决定性作用，因此利用社会属性特征对微视频进行分类处理，划分不同的流行度档次，对微视频的流行度进行粗略的预测。由于支持向量机在进行低维度特征的分类时，具有显著的优势，因此利用支持向量机进行流行度等级的分类。为了提升分类的性能，需要解决社会属性维度低的限制，将社会属性特征通过高斯核函数从低维空间映射本文档来自技高网...

【技术保护点】
一种基于属性分类和多视角特征融合的微视频流行度预测方法，其特征在于，所述方法包括以下步骤：利用社会属性特征对微视频进行分类，将微视频分配到不同的流行度等级层次中，获取微视频的初级流行度范围；计算每一个流行度等级层次中不同模态视角下的微视频的相似关系，并用拉普拉斯矩阵的形式表述；利用不同模态的拉普拉斯矩阵的线性组合作为公共子空间的拉普拉斯矩阵；基于拉普拉斯矩阵，利用半监督的方法对微视频的流行度进行预测。

【技术特征摘要】
1.一种基于属性分类和多视角特征融合的微视频流行度预测方法，其特征在于，所述方法包括以下步骤：利用社会属性特征对微视频进行分类，将微视频分配到不同的流行度等级层次中，获取微视频的初级流行度范围；计算每一个流行度等级层次中不同模态视角下的微视频的相似关系，并用拉普拉斯矩阵的形式表述；利用不同模态的拉普拉斯矩阵的线性组合作为公共子空间的拉普拉斯矩阵；基于拉普拉斯矩阵，利用半监督的方法对微视频的流行度进行预测。2.根据权利要求1所述的一种基于属性分类和多视角特征融合的微视频流行度预测方法，其特征在于，所述方法还包括：对给定的微视频提取4种视角模态特征。3.根据权利要求2所述的一种基于属性分类和多视角特征融合的微视频流行度预测方法，其特征在于，所述4种视角模态特征具体为：视觉特征、声学特征、文本特征以及社会属性特征。4.根据权利要求1所述的一种...

【专利技术属性】
技术研发人员：苏育挺，白须，张静，
申请(专利权)人：天津大学，
类型：发明
国别省市：天津,12