一种基于隐喻地图的视频情感分析与可视化方法与系统技术方案

本发明专利技术公开一种基于隐喻地图的视频情感分析与可视化方法与系统。本发明专利技术包括：基于Ekman情感表示模型的视频情感采集工具以及情感建模，可以同时采集到较为准确的情绪类别和情绪数值两种类型的情感数据；利用隐喻地图表达视频中的情感和关系信息，在表达层次、关系信息时具有优势，同时地图的形状、色彩的搭配使其具有一定的美感；通过地图，用户可以快速直观地了解到视频的情绪变化趋势、各情感种类的占比以及视频各事件和情绪之间的关系。本发明专利技术可用于视频内容探索、查询、理解的交互式可视化分析，允许用户根据情感信息对视频进行快速地浏览，并能够直观地展现将要到来的情绪转折点或高潮，同时支持对视频中人物情绪和关系的探索。

A method and system of video emotion analysis and visualization based on metaphor map

【技术实现步骤摘要】
一种基于隐喻地图的视频情感分析与可视化方法与系统
本专利技术属于可视化领域，具体涉及一种基于隐喻地图的视频情感分析与可视化方法与系统。
技术介绍
视频中包含多种类型的信息，情感信息是其中一个非常重要的方面。情感信息的重要性主要体现在以下几个方面：首先，视频中隐含的情感的起伏波动推动着视频的进展同时也影响着观众的情绪，以影视作品为例，影片所包含的情感越丰富就越能给观众留下深刻的印象。其次，由于情感的变化一定程度上对应着情节的起伏和视频中的精彩部分，视频进展到故事的高潮部分时，观众的情感往往是比较激烈的。借助于这一点，视频中的情感信息可以帮助观众快速地找到视频中的精彩部分，把握视频的大致内容，有需要地对视频内容进行挑选观看。另一方面，用户在选择视频进行观看时，可能想要不仅基于视频类型、演员、导演和故事内容进行视频的选择，更想根据视频中所传达出的主要情绪来选择观看。本专利技术借助于隐喻地图对视频情感内容进行分析，隐喻地图是对不具有空间排布信息的类似于地图的可视化表达形式，在人为构造的虚拟空间中，按照信息的语义、层次等多种关系映射到该空间中，从本文档来自技高网...

【技术保护点】
1.一种基于隐喻地图的视频情感分析与可视化方法，其步骤包括：/n采集观众观看视频时的情感数据，包括情绪类别和情绪数值两种类型的数据；/n构建情感数据和地图元素之间的映射关系，根据映射关系生成隐喻地图；/n利用隐喻地图对视频的情感进行分析，辅助用户对视频内容进行探索、理解及查询。/n

【技术特征摘要】
1.一种基于隐喻地图的视频情感分析与可视化方法，其步骤包括：
采集观众观看视频时的情感数据，包括情绪类别和情绪数值两种类型的数据；
构建情感数据和地图元素之间的映射关系，根据映射关系生成隐喻地图；
利用隐喻地图对视频的情感进行分析，辅助用户对视频内容进行探索、理解及查询。


2.如权利要求1所述的方法，其特征在于，所述采集观众观看视频时的情感数据，是利用基于Ekman情感理论的情感采集工具采集观众观看视频时的情绪类别和情绪数值两种类型的数据，并通过投票和回归两种方式建立情感模型，得到按时间序列排布的情感数据。


3.如权利要求2所述的方法，其特征在于，采用以下公式，通过投票选择的机制计算视频中每一秒的情感类别：






其中，F和P分别表示每位被试的熟悉程度和喜爱程度，C代表被试选择的情感类型，Cne代表某一秒第n名用户选择了情感类型e；(F/P)n代表第n名用户的投票比重；Ei代表每一秒中每种情感的投票得分，Ts代表了最终投票得出的该秒的代表情感。


4.如权利要求1所述的方法，其特征在于，所述构建情感数据和地图元素之间的映射关系，根据映射关系生成隐喻地图，包括：将按时间序列排布的情感数据，通过所归属的属性进行重新排序，生成类似树结构的情感数据，并利用Gosper曲线的特性将其放置在隐喻地图上，将相同情感类别的数据聚类展示，地图块的大小表征对应视频片段的持续时间。


5.如权利要求4所述的方法，其特征在于，所述通过所归属的属性进行重新排序，生成类似树结构的情感数据，是将整个视频的情感数据划分为层次结构：将整个视频划分为多个事件；每个事件中包括至少一个情感种类，每个情感种类对应一个情感节点；每个情感节点中包含...

【专利技术属性】
技术研发人员：马翠霞，朱倩，宋建成，王宏安，
申请(专利权)人：中国科学院软件研究所，
类型：发明
国别省市：北京;11