【技术实现步骤摘要】
多通道融合的声色联觉测评方法及系统
本专利技术属于认知心理学与神经科学交叉领域,具体涉及一种多通道融合的声色联觉测评方法及系统。
技术介绍
多通道的人机交互模式和技术在迅速发展,但对人体的感知过程和认知机理却较少关注,随着直觉化交互的多通道情景体验模式的兴起,人体直觉化交互特性与多感知通道间的响应规律有着密不可分的联系,因此对人的多通道感知关联的响应规律进行研究,是研究人的直觉化交互的重要依据。人的多通道感知关联性主要是指对人的视觉、听觉、触觉、味觉等通道之间,一种感觉通道特征与另一感觉通道之间的相互作用与影响。人对外部信息的接收主要依靠6种基本通道:视觉、听觉、味觉、触觉、嗅觉和本体觉等,而这6种通道也是人类自身发展进化最本质、最直觉化的信息获取方式。研究表明,83%依赖视觉通道、11%依赖听觉通道、3.15%嗅觉通道、1.15%依赖触觉通道、1%依赖味觉通道;融合2种或多种通道会使认知效率和认知可靠度提高约50%,而视觉和听觉是人接收信息的两大主要通道,因此,对视听觉的通道研究在多通道感知研究中最为重要。目前,很多研究机构都对通道的感知关联性研究上进行 ...
【技术保护点】
一种多通道融合的声色联觉测评方法,其特征在于,包括以下步骤:1)、对声音与色彩的属性特征分解与提取,以及对每个属性分级处理;2)、应用内隐联想法,被试者对步骤1)中提取后的单属性的声音与色彩进行主观匹配,得到匹配规律;3)、对步骤2)的结果进行分析与再提取,提取匹配度最高、最稳定的声色属性搭配,进行额区与顶区的脑电信号采集与处理分析;4)、将脑电信号的频段活跃度变化表征认知过程中的舒适性与愉悦性,为多通道界面的视听觉融合设计提供参考与指导。
【技术特征摘要】
1.一种多通道融合的声色联觉测评方法,其特征在于,包括以下步骤:1)、对声音与色彩的属性特征分解与提取,以及对每个属性分级处理;2)、应用内隐联想法,被试者对步骤1)中提取后的单属性的声音与色彩进行主观匹配,得到匹配规律;3)、对步骤2)的结果进行分析与再提取,提取匹配度最高、最稳定的声色属性搭配,进行额区与顶区的脑电信号采集与处理分析;4)、将脑电信号的频段活跃度变化表征认知过程中的舒适性与愉悦性,为多通道界面的视听觉融合设计提供参考与指导。2.根据权利要求1所述的一种多通道融合的声色联觉测评方法,其特征在于,步骤1)中,分解声音属性得到5个声音单属性特征,同时对每个单属性特征进行4个等级处理,5个声音单属性特征包括声音的音高、音强、音速、粗糙度和尖锐度;分解声音属性,得到色彩的3个单属性特征及并对其分级处理,包括:色相、明度、纯度。3.根据权利要求2所述的一种多通道融合的声色联觉测评方法,其特征在于,分级处理具体为:①音高,以C大调为基音的和弦作为基础,通过以八度音程为基准改变音阶,从C2到中选取较为适中的C3、C4、C5、C6;②音强,通过改变音乐中所有的音符序列的起始时间从4.2到99毫秒,选取4.2毫秒、30毫秒、60毫秒、99毫秒四个等级;③音速,通过改变节奏的大小,选取65BPM~200BPM之间段的四个等级:65BPM、120BPM、150BPM、200BPM;④粗糙度,通过一个70赫兹恒定调职频率的颤音效果应用在不同的调制振幅,选取范围为0-100%,选取0%、45%、75%、100%四个等级;⑤尖锐度,通过应用频率滤波器衰减或提振低于或高于1000HZ。4.根据权利要求2所述的一种多通道融合的声色联觉测评方法,其特征在于,色彩的色相选取ff0000、ffa500、ff00ff、ffff00、00ff00、0000ff、00ffff;明度,在色相选取的基础上,分别依次选取每一个色彩的饱和度值为80%、60%、40%的对应颜色;纯度,在色相选取的基础上,分别依次选取明度值为10%、30%、50%的对应颜色;最终得到,7×7的色彩基本模块。5.根据权利要求1所述的一种多通道融合的声色联觉测评方法,其特征在于,步骤2)中,将色彩设定为一级和二级选项,一级选项包含色相的7类,二级选项在一级的选择结果影响下显示对应的纯度、明度进行二次选择。6.根据权利要求1所述的一种多通道融合的声色联觉测评方法,其特征在于,步骤4)中的脑电波数据通过40个国际10-20标准放置电极进行采集,采样频率为1KHz;标准放置电极采集的脑...
【专利技术属性】
技术研发人员:李晓玲,孙秀雯,刘洋,韩枫,纪凌雨,
申请(专利权)人:西安交通大学,
类型:发明
国别省市:陕西,61
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。