一种基于全景视频的观众反应评估方法及系统技术方案

本发明专利技术提供的一种基于全景视频的观众反应评估方法及系统，分别采集目标观众的各个反应数据，并记录每个反应数据的采集时间；将同一时间采集的所有反应数据和对应的采集时间组合成一个反应数据结构；对于任意一个反应数据结构，根据该反应数据结构中的所有反应数据获得该反应数据结构对应的观众情感反应值和观众动作反应值，根据该反应数据结构对应的采集时间在目标视频中提取该反应数据结构对应的视频内容；按照时间顺序将所有反应数据结构对应的观众情感反应值、观众动作反应值和视频内容进行同步展示，有利于根据同步展示的内容分析观众对目标视频的观看体验，进而有利于根据分析结果改进全景视频播放方式，为观众提供更好的观赏体验。

【技术实现步骤摘要】
一种基于全景视频的观众反应评估方法及系统
本专利技术涉及数字媒体
，更具体地，涉及一种基于全景视频的观众反应评估方法及系统。
技术介绍
随着数字媒体技术的发展，人们的观看表演的方式已经不再限制于现场表演、电视电影或者网络视频。虚拟现实头戴式显示设备以及全景视频拍摄等技术给人们带来了全新的观看体验。全景视频可以将360°的角色、场景、声光效果等表演环境中的所有视觉和听觉信息客观记录并通过头戴式显示设备再现给观众，使得即便是没有机会到现场的观众，也可以获得亲临现场的沉浸式体验。目前利用全景视频技术和头戴式显示设备录制并回放表演内容的应用逐渐普及，这种方式也开始成为新的表演观赏形式。在这样的观看条件下，需要一种系统性的测量与分析的方法可以用于测量观众反应和观看体验。媒体观众反应的测量和分析存在不少已有的方法和系统，例如，Latulipe等首先提出了现场表演环境下观众反应测量的方法，结合传统心理学方法和观众流电皮肤反应(GSR)进行测量，研究了GSR与表演内容的相关性；埃姆申塞公司提出了多项对媒体内容的观众反应进行采集和分析的方法与系统。可以看出，现有的观众反应测量与分析方法和系统大多针对于传统播放设备和传统视频，而头戴式显示设备具有远远超过传统视频播放设备的沉浸感和交互性，因此现有的观众反应测量与分析方法和系统并不适用于使用头戴式显示设备观看全景视频的观众。
技术实现思路
本专利技术为了克服现有的观众反应测量与分析方法和系统并不适用于使用头戴式显示设备观看全景视频的观众，导致难以对观看全景视频的观众观看体验进行评估的问题，提供一种基于全景视频的观众反应评估方法及系统。一方面，本专利技术提供一种基于全景视频的观众反应评估方法，包括：分别采集目标观众的各个反应数据，并记录每个所述反应数据的采集时间，所述反应数据至少包括生理心理信号数据和动作捕捉数据；将同一时间采集的所有反应数据和对应的采集时间组合成一个反应数据结构，得到多个反应数据结构；对于任意一个反应数据结构，根据该反应数据结构中的所有反应数据获得该反应数据结构对应的观众情感反应值和观众动作反应值，并根据该反应数据结构对应的采集时间在目标视频中提取该反应数据结构对应的视频内容；按照所有所述反应数据结构对应的采集时间的先后顺序，将所有所述反应数据结构对应的观众情感反应值、观众动作反应值和视频内容进行同步展示；其中，所述观众情感反应值包括参与度、唤起度、效价和优势度；所述观众动作反应值包括头部动作、眼部动作和身体动作。优选地，所述根据该反应数据结构中的所有反应数据获得该反应数据结构对应的观众情感反应值和观众动作反应值，具体为：利用预设分类器根据该反应数据结构中的所有反应数据获得该反应数据结构对应的观众情感反应值；根据该反应数据结构中的动作捕捉数据获得该反应数据结构对应的观众动作反应值。优选地，所述分别采集目标观众的各个反应数据，之前还包括：预先设置多个不同类型的传感器，用于采集所述目标观众的各个反应数据，所述传感器至少包括生理心理信号测量传感器和动作捕捉传感器。优选地，所述分别采集目标观众的各个反应数据，之后还包括：对每个所述反应数据进行降噪处理；对应地，所述将同一时间采集的所有反应数据和对应的采集时间组合成一个反应数据结构，具体为：将同一时间采集的所有降噪处理后的反应数据和对应的采集时间组合成一个反应数据结构。优选地，所述利用预设分类器根据该反应数据结构中的所有反应数据获得该反应数据结构对应的观众情感反应值，之前还包括：获取多个反应数据结构样本，并对每个所述反应数据结构样本对应的观众情感反应值进行标注，获得多个带标记的训练样本；利用所述带标记的训练样本对所述预设分类器进行训练。优选地，所述根据该反应数据结构中的所有反应数据获得该反应数据结构对应的观众情感反应值和观众动作反应值，之后还包括：将该反应数据结构与该反应数据结构对应的观众情感反应值和观众动作反应值关联存储在观众反应数据库中。优选地，所述将所有所述反应数据结构对应的观众情感反应值、观众动作反应值和视频内容进行同步展示，具体为：将所有所述反应数据结构对应的观众情感反应值和观众动作反应值分别进行可视化，获得至少两条变化曲线；将所有所述反应数据结构对应的视频内容进行顺序排列，获得视频图像序列；将所有所述变化曲线和所述视频图像序列进行同步展示。一方面，本专利技术提供一种基于全景视频的观众反应评估系统，包括：数据采集模块，用于分别采集目标观众的各个反应数据，并记录每个所述反应数据的采集时间，所述反应数据至少包括生理心理信号数据和动作捕捉数据；数据组合模块，用于将同一时间采集的所有反应数据和对应的采集时间组合成一个反应数据结构，得到多个反应数据结构；反应评估模块，用于对于任意一个反应数据结构，根据该反应数据结构中的所有反应数据获得该反应数据结构对应的观众情感反应值和观众动作反应值，并根据该反应数据结构对应的采集时间在目标视频中提取该反应数据结构对应的视频内容；同步展示模块，用于按照所有所述反应数据结构对应的采集时间的先后顺序，将所有所述反应数据结构对应的观众情感反应值、观众动作反应值和视频内容进行同步展示；其中，所述观众情感反应值包括参与度、唤起度、效价和优势度；所述观众动作反应值包括头部动作、眼部动作和身体动作。一方面，本专利技术提供一种电子设备，包括：至少一个处理器；以及与所述处理器通信连接的至少一个存储器，其中：所述存储器存储有可被所述处理器执行的程序指令，所述处理器调用所述程序指令能够执行上述任一所述的方法。一方面，本专利技术提供一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行上述任一所述的方法。本专利技术提供的一种基于全景视频的观众反应评估方法及系统，分别采集目标观众的各个反应数据，并记录每个反应数据的采集时间，反应数据至少包括生理心理信号数据和动作捕捉数据；将同一时间采集的所有反应数据和对应的采集时间组合成一个反应数据结构，得到多个反应数据结构；对于任意一个反应数据结构，根据该反应数据结构中的所有反应数据获得该反应数据结构对应的观众情感反应值和观众动作反应值，并根据该反应数据结构对应的采集时间在目标视频中提取该反应数据结构对应的视频内容；按照所有反应数据结构对应的采集时间的先后顺序，将所有反应数据结构对应的观众情感反应值、观众动作反应值和视频内容进行同步展示，有利于根据同步展示的内容分析观众对目标视频的观看体验，进而有利于根据分析结果改进全景视频播放方式，增强全景视频表演和观众的交互，同时加强全景视频观看引导，增强观众的关注度，为观众提供更好的观赏体验。附图说明图1为本专利技术实施例的一种基于全景视频的观众反应评估方法的整体流程示意图；图2为本专利技术实施例的一种基于全景视频的观众反应评估系统的整体结构示意图；图3为本专利技术实施例的一种电子设备的结构框架示意图。具体实施方式下面结合附图和实施例，对本专利技术的具体实施方式作进一步详细描述。以下实施例用于说明本专利技术，但不用来限制本专利技术的范围。图1为本专利技术实施例的一种基于全景视频的观众反应评估方法的整体流程示意图，如图1所示，本专利技术提供一种基于全景视频的观众反应评估方法，包括：S1，分别采集目标观众的各个反应数据，并记录每个反应本文档来自技高网...

【技术保护点】
1.一种基于全景视频的观众反应评估方法，其特征在于，包括：分别采集目标观众的各个反应数据，并记录每个所述反应数据的采集时间，所述反应数据至少包括生理心理信号数据和动作捕捉数据；将同一时间采集的所有反应数据和对应的采集时间组合成一个反应数据结构，得到多个反应数据结构；对于任意一个反应数据结构，根据该反应数据结构中的所有反应数据获得该反应数据结构对应的观众情感反应值和观众动作反应值，并根据该反应数据结构对应的采集时间在目标视频中提取该反应数据结构对应的视频内容；按照所有所述反应数据结构对应的采集时间的先后顺序，将所有所述反应数据结构对应的观众情感反应值、观众动作反应值和视频内容进行同步展示；其中，所述观众情感反应值包括参与度、唤起度、效价和优势度；所述观众动作反应值包括头部动作、眼部动作和身体动作。

【技术特征摘要】
1.一种基于全景视频的观众反应评估方法，其特征在于，包括：分别采集目标观众的各个反应数据，并记录每个所述反应数据的采集时间，所述反应数据至少包括生理心理信号数据和动作捕捉数据；将同一时间采集的所有反应数据和对应的采集时间组合成一个反应数据结构，得到多个反应数据结构；对于任意一个反应数据结构，根据该反应数据结构中的所有反应数据获得该反应数据结构对应的观众情感反应值和观众动作反应值，并根据该反应数据结构对应的采集时间在目标视频中提取该反应数据结构对应的视频内容；按照所有所述反应数据结构对应的采集时间的先后顺序，将所有所述反应数据结构对应的观众情感反应值、观众动作反应值和视频内容进行同步展示；其中，所述观众情感反应值包括参与度、唤起度、效价和优势度；所述观众动作反应值包括头部动作、眼部动作和身体动作。2.根据权利要求1所述的方法，其特征在于，所述根据该反应数据结构中的所有反应数据获得该反应数据结构对应的观众情感反应值和观众动作反应值，具体为：利用预设分类器根据该反应数据结构中的所有反应数据获得该反应数据结构对应的观众情感反应值；根据该反应数据结构中的动作捕捉数据获得该反应数据结构对应的观众动作反应值。3.根据权利要求1所述的方法，其特征在于，所述分别采集目标观众的各个反应数据，之前还包括：预先设置多个不同类型的传感器，用于采集所述目标观众的各个反应数据，所述传感器至少包括生理心理信号测量传感器和动作捕捉传感器。4.根据权利要求1所述的方法，其特征在于，所述分别采集目标观众的各个反应数据，之后还包括：对每个所述反应数据进行降噪处理；对应地，所述将同一时间采集的所有反应数据和对应的采集时间组合成一个反应数据结构，具体为：将同一时间采集的所有降噪处理后的反应数据和对应的采集时间组合成一个反应数据结构。5.根据权利要求2所述的方法，其特征在于，所述利用预设分类器根据该反应数据结构中的所有反应数据获得该反应数据结构对应的观众情感反应值，之前还包括：获取多个反应数据结构样本，并对每个所述反应数据结构样本对应的观众情感反应值进行标注，获得多个带标记的训练样本；利用所述...

【专利技术属性】
技术研发人员：李红松，何林家，薛彤，饶植，段才童，丁刚毅，
申请(专利权)人：北京理工大学，
类型：发明
国别省市：北京,11