一种视频情感片段的识别方法及装置制造方法及图纸

本发明专利技术公开了一种视频情感片段的识别方法，包括：确定待分析视频中各个情感弹幕的弹幕情感标签；对所述待分析视频进行分割，得到各个待分析视频片段；依据每一个待分析视频片段中的各个弹幕情感标签，计算各个待分析视频片段的片段情感向量和情感熵；依据所述片段情感向量和所述情感熵识别所述各个待分析视频片段中的情感片段。上述的识别方法中，将待分析视频分割成多个待分析视频片段，计算各个待分析视频片段的片段情感向量和情感熵；依据弹幕得到的所述片段的片段情感向量和所述情感熵识别所述各个待分析视频片段中的情感片段，缩短了情感片段的识别周期，避免了由于人工标识情感标签标注时间长，导致情感片段识别周期长的问题。

【技术实现步骤摘要】
一种视频情感片段的识别方法及装置
本专利技术涉及人工智能
，尤其涉及一种视频情感片段的识别方法及装置。
技术介绍
随着多媒体技术的发展，多媒体视频的数据量爆发增长，吸引了大量用户，人们倾向于看视频来缓解压力和无聊，看视频已成为满足人们情感需求的一种新方式，而视频巨大的规模和用户有限的时间之间存在矛盾，观众有时只想看视频的部分情感片段，而非整个视频。因此有必要对视频进行与时间同步的情感标签(五类情感：喜、惊、不喜、悲、惧)，识别视频中的情感片段，更好地满足观众的个性化情感需求。该工作的首要挑战是视频缺乏时序情感标签，目前主要通过人工对视频中的每一帧标注情感标签，基于标注的情感标签对情感片段进行识别，由于人工标注情感标签标注时间长，导致情感片段识别周期长。
技术实现思路
有鉴于此，本专利技术提供了一种视频情感片段的识别方法及装置，用以解决现有技术中目前主要通过人工对视频中的每一帧标注情感标签，基于标注的情感标签对情感片段进行识别，由于人工标注情感标签标注时间长，导致情感片段识别周期长的问题，具体方案如下：一本文档来自技高网...

【技术保护点】
1.一种视频情感片段的识别方法，其特征在于，包括：/n确定待分析视频中各个情感弹幕的弹幕情感标签；/n对所述待分析视频进行分割，得到各个待分析视频片段；/n依据每一个待分析视频片段中的各个弹幕情感标签，计算各个待分析视频片段的片段情感向量和情感熵；/n依据所述片段情感向量和所述情感熵识别所述各个待分析视频片段中的情感片段。/n

【技术特征摘要】
1.一种视频情感片段的识别方法，其特征在于，包括：
确定待分析视频中各个情感弹幕的弹幕情感标签；
对所述待分析视频进行分割，得到各个待分析视频片段；
依据每一个待分析视频片段中的各个弹幕情感标签，计算各个待分析视频片段的片段情感向量和情感熵；
依据所述片段情感向量和所述情感熵识别所述各个待分析视频片段中的情感片段。


2.根据权利要求1所述的方法，其特征在于，确定待分析视频中各个情感弹幕的弹幕情感标签，包括：
获取所述待分析视频的各个弹幕；
对所述各个弹幕进行筛选，得到各个情感弹幕；
依据预设的神经网络模型确定每个情感弹幕的弹幕情感标签。


3.根据权利要求2所述的方法，其特征在于，依据预设的神经网络模型确定每个情感弹幕的弹幕情感标签，包括：
确定每个情感弹幕的目标语义表示，其中，所述目标语义表示由对应情感弹幕的细粒度语义表示和粗粒度语义表示进行拼接得到；
确定每个情感弹幕产生时刻的场景图像数据的视觉向量表征；
将所述目标语义表示和所述视觉向量表征传递给所述预设的弹幕情感识别神经网络模型，得到对应情感弹幕的情感标签。


4.根据权利要求1所述的方法，其特征在于，对所述待分析视频进行分割，得到各个待分析视频片段，包括：
确定所述待分析视频中各个帧的视觉语义；
依次比较相邻帧的视觉语义，判断所述相邻帧的视觉语义的差异度是否大于预设的差异度阈值；
若是，将所述相邻帧作为切分点进行切分，得到各个待分析视频片段。


5.根据权利要求4所述的方法，其特征在于，还包括：
获取所述相邻帧弹幕语义；
依据所述弹幕语义对所述切分点进行修正。


6.根据权利要求1所述的方法，其特征在于，依据所述片段情感向量和所述情感熵识别所述各个待分析视频片段中的情感片段，包括：
判断所述情感熵是否小于预设的情感熵阈值；
若是，判...

【专利技术属性】
技术研发人员：陈恩红，徐童，曹卫，张琨，吕广弈，何明，武晗，
申请(专利权)人：中国科学技术大学，
类型：发明
国别省市：安徽;34