融合触觉的多模态微动效广告情境构建方法技术

本发明专利技术公开了一种融合触觉的多模态微动效广告情境构建方法，包括以下步骤：对原微动效广告中的视听要素进行情感计算，得到视听情感参数；采用振动的方式对用户进行触觉反馈，根据所述视听情感参数，计算对应的触觉情感参数；获取原微动效广告中的动作参数，所述动作参数由动作指标组成；将所述原微动效广告的动作指标与触觉指标进行对应，得到触觉动作参数；融合所述触觉情感参数和触觉动作参数，得到用于振动反馈的触觉参数。本发明专利技术提高了用户在观看广告时的感官体验多样性和沉浸体验，更高效地传递商品信息和打造“情境”，让用户更真切地感受广告。切地感受广告。切地感受广告。

【技术实现步骤摘要】
融合触觉的多模态微动效广告情境构建方法


[0001]本专利技术涉及微动效
，特别是涉及一种融合触觉的多模态微动效广告情境构建方法。

技术介绍

[0002]广告一直是商家获取流量和盈利的有效手段。近年来，广告不仅需要传达商品的实用功能和使用方法，而是更需要注重和强调“情”和“境”。“情”指的是用户心理上的即时心境和情绪变化，即情感属性；“境”指的是用户对周围环境的感知和沉浸体验，即动感属性。在广告中营造出用户更容易沉浸的氛围并调动用户的情感，可以促进感性消费。
[0003]目前，由语言、图像、声音、颜色等多种符号共同创建意义的多模态广告已成为广告流行趋势。多模态广告不仅有丰富的形式和设计可能性，更能打造“情”和“境”。
[0004]作为多模态广告的一种，微动效是介于图片和视频间的一种媒体形式。其解决了图片广告能传递的信息有限，及视频广告因时长问题不能很快地将准确的信息传达给用户的问题。微动效广告融合了图片广告和视频广告的优点，能够在极短的时间里将最关键的信息通过动效的形式灵动地传递给用户。
[0005]现阶段的多模态广告利用触觉的方法大多是基于原视听内容，加强了原本想表达的内容或提高人机交互的真实感，即“境”，并没有涉及到“情”。
[0006]现阶段已有融合触觉的音乐、游戏、视频等，如腾讯开发的4D震动音效技术，该技术对音乐音频数据的分析，提取出节奏信息，然后利用在移动设备里内置的触觉反馈技术，在这些节奏点产生合适震动模式。同步的听觉和触觉感受，增强音乐的律动感，为用户提供了一种全新的音乐娱乐体验。然而在微动效广告领域，尚未有结合触觉的研究。
[0007]公开号为CN105320267A的专利技术公开了一种用于拟音风格的触觉内容创建的系统和方法，其中一个示例性系统包括音频输入设备，该音频输入设备被配置为检测音频输入并且传送与音频输入相关的音频信号。该示例性系统还包括触觉触发设备，该触觉触发设备包括传感器，其中传感器被配置为传送与事件相关的传感器信号。此外，示例性系统包括与音频输入设备和触觉触发设备通信的处理器，该处理器被配置为：接收音频信号；与接收音频信号基本同时地接收传感器信号；把音频信号记录到音频轨道；并且部分地基于传感器信号把触觉效果标记插入到触觉轨道中，其中触觉轨道和音频轨道与视频相关联。该专利技术解决了如何将听觉内容一字不差地转化为触觉内容。
[0008]公开号为CN105739688A的专利技术公开了一种基于情感体系的人机交互方法、装置和交互系统。该方法包括以下步骤：采集语音情感参数、表情情感参数和肢体情感参数；根据所述语音情感参数计算获得待定语音情感，从预设语音情感中选择与待定语音情感最接近的作为语音情感分量；根据所述表情情感参数计算获得待定表情情感，从预设表情情感中选择与待定表情情感最接近的作为表情情感分量；根据所述肢体情感参数计算获得待定肢体情感，从预设肢体情感中选择与待定肢体情感最接近的作为肢体情感分量；对所述语音情感分量、表情情感分量和肢体情感分量进行融合确定情感识别结果；该专利技术针对所述情
感识别结果输出多模态的反馈信息，以使得人机交互过程更加顺畅、自然。

技术实现思路

[0009]本专利技术的目的在于提出一种融合触觉的用于微动效广告的多模态情境构建方法，通过强化微动效广告中的触觉体验，为用户带来更具沉浸感的多模态的微动效广告。
[0010]一种融合触觉的多模态微动效广告情境构建方法，包括以下步骤：
[0011](1)对原微动效广告中的视听要素进行情感计算，得到视听情感参数，所述视听情感参数包括瞬时关键情绪数组和长时情感体验函数；
[0012](2)采用振动的方式对用户进行触觉反馈，根据所述视听情感参数，计算对应的触觉情感参数；
[0013](3)获取原微动效广告中的动作参数，所述动作参数由动作指标组成；
[0014](4)将所述原微动效广告的动作指标与触觉指标进行对应，得到触觉动作参数；
[0015](5)融合所述触觉情感参数和触觉动作参数，得到用于振动反馈的触觉参数。
[0016]融合触觉的多模态微动效广告情境构建方法通过对原微动效广告的视听元素进行情感计算从而生成触觉情感参数，同时将原微动效广告的动作参数抽象为触觉动作参数；再依据原微动效广告的情感属性和动感属性，将触觉情感参数和触觉动作参数通过一定计算方法进行融合，最终形成一个可应用于振动反馈的触觉参数。
[0017]所述瞬时关键情绪数组用于表示用户在观看原微动效广告的某一瞬间流露出的显著情绪，所述瞬时关键情绪数组包括以下情绪指标：时间点、情绪名称、情绪正负、情绪强度、维持时长。
[0018]所述长时情感体验函数用于表达用户在观看原微动效广告的全过程中情感强度与时间之间的关系，采用为以时间为横轴，以情感强度为纵轴的函数图表示。
[0019]所述步骤(1)中，对原微动效广告中的视听要素进行情感计算的具体步骤如下：
[0020](1
‑
1)采用视频类情感计算算法，对原微动效广告的画面进行情感计算，得到微动效画面情感参数；
[0021](1
‑
2)识别用户针对视听要素的长时情感体验函数和多组瞬时关键情绪数组，得到用户情感参数；
[0022](1
‑
3)通过整合所述微动效画面情感参数和用户情感参数得到原微动效广告的视听情感参数。
[0023]所述触觉情感参数包括短时振动数组和振动函数，所述振动函数包括时间
‑
振动频率函数、时间
‑
振动加速度函数和时间
‑
振幅函数；所述短时振动数组包括以下振动指标：振动时间点、振动时长、振幅、振动频率和振动加速度。
[0024]所述步骤(2)中，计算所述振动参数的具体方法如下：
[0025](2
‑
1)将所述瞬时关键情绪数组与所述振动指标进行对应，获得对应的短时振动数组；
[0026](2
‑
2)将所述长时情感体验函数与所述振动函数进行对应；
[0027](2
‑
3)整合短时振动数组和振动函数，得到用于贴近用户真实情感的触觉情感参数。
[0028]所述步骤(3)中，获取原微动效广告中的动作参数的具体方法为：对所述原微动效
广告中的每帧画面进行分析，提取原微动效广告的动作指标，得到动作参数；所述动作指标包括动作主体数、动作方位、动作时长、动作幅度、动作速度、动作加速度。
[0029]所述触觉指标包括：振动点数、振动位置、振动时长、振幅、振动频率、振动加速度；由于采用振动的方式对用户进行触觉反馈，故触觉指标源于相关的振动指标。
[0030]所述步骤(5)中，融合所述触觉情感参数和触觉动作参数，其具体融合方法为：按比例结合所述触觉动作参数和触觉情感参数的数值得到所述触觉参数，所述比例根据用户需求通过编辑进行调试。
[0031]本专利技术相比现有技术，其优点在于：本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种融合触觉的多模态微动效广告情境构建方法，其特征在于，包括以下步骤：(1)对原微动效广告中的视听要素进行情感计算，得到视听情感参数，所述视听情感参数包括瞬时关键情绪数组和长时情感体验函数；(2)采用振动的方式对用户进行触觉反馈，根据所述视听情感参数，计算对应的触觉情感参数；(3)获取原微动效广告中的动作参数，所述动作参数由动作指标组成；(4)将所述原微动效广告的动作指标与触觉指标进行对应，得到触觉动作参数；(5)融合所述触觉情感参数和触觉动作参数，得到用于振动反馈的触觉参数。2.如权利要求1所述的融合触觉的多模态微动效广告情境构建方法，其特征在于，所述瞬时关键情绪数组用于表示用户在观看原微动效广告的某一瞬间流露出的显著情绪，所述瞬时关键情绪数组包括以下情绪指标：时间点、情绪名称、情绪正负、情绪强度、维持时长。3.如权利要求1所述的融合触觉的多模态微动效广告情境构建方法，其特征在于，所述长时情感体验函数用于表达用户在观看原微动效广告的全过程中情感强度与时间之间的关系，其采用以时间为横轴，以情感强度为纵轴的函数图表示。4.如权利要求1所述的融合触觉的多模态微动效广告情境构建方法，其特征在于，所述步骤(1)中，对原微动效广告中的视听要素进行情感计算的具体步骤如下：(1
‑
1)采用视频类情感计算算法，对原微动效广告的画面进行情感计算，得到微动效画面情感参数；(1
‑
2)识别用户针对视听要素的长时情感体验函数和多组瞬时关键情绪数组，得到用户情感参数；(1
‑
3)通过整合所述微动效画面情感参数和用户情感参数得到原微动效广告的视听情感参数。5.如权利要求1所述的融合触觉的多...

【专利技术属性】
技术研发人员：向为，王雪悠，高暐玥，郭天惠，刘宣慧，
申请(专利权)人：浙江大学，
类型：发明
国别省市：