利用用于检测神经状态的传感器数据进行内容生成和控制制造技术

技术编号:27306490 阅读:11 留言:0更新日期:2021-02-10 09:19
内容参与能力(CEP)值的应用包括生成脚本、文本或其他通信内容,或者用于基于神经生理数据控制通信内容的播出、采集与通信内容的消费相关的神经生理数据,或对个人通信的有效性进行评级。基于处理的神经生理传感器数据计算CEP,以沿诸如评价度、唤起度和优势度等多个维度来表达对内容的参与。一种装置被配置为使用硬件、固件和/或软件来执行该方法。固件和/或软件来执行该方法。固件和/或软件来执行该方法。

【技术实现步骤摘要】
【国外来华专利技术】利用用于检测神经状态的传感器数据进行内容生成和控制
[0001]相关申请的交叉引用
[0002]本申请要求于2018年1月8日提交的美国临时专利申请序列号62/614,811、于2018年4月23日提交的美国临时专利申请序列号62/661,556和于2018年8月7日提交的美国临时专利申请序列号62/715,766的优先权,其全部内容通过引用整体并入本文。


[0003]本公开涉及在用于生成或控制语言内容和其他形式的通信内容的应用中用于对来自用户神经状态的检测的传感器数据进行信号处理的应用、方法和装置。

技术实现思路

[0004]本
技术实现思路
和以下具体实施方式应被解释为整体公开的补充部分,这些部分可以包括冗余的主题和/或补充的主题。任何节段中的省略均不指示该整体申请中描述的任何要素的优先级或相对重要性。这些节段之间的差异可以包括替代实施例的补充公开、附加细节或使用不同术语的相同实施例的替代描述,其根据相应的公开内容是明显的。2018年4月23日提交的序列号为62/661,556的在先申请为数字地表示用户参与音频-视频内容打下了基础,包括但不限于基于传感器数据的内容参与能力(CEP)的数字表示。如在较早申请中更充分描述的,计算机处理基于来自至少一个传感器的传感器数据来开发针对内容的CEP,该至少一个传感器被定位成感测一个或多个用户在参与音频-视频输出时的非自愿响应。例如,传感器数据可以包括从相应传感器接收到的以下一项或多项:脑电图(EEG)数据、皮肤电响应(GSR)数据、面部肌电图(fEMG)数据、心电图(EKG)数据、视频面部动作单元(FAU)数据、脑机接口(BMI)数据、视频脉冲检测(VPD)数据、瞳孔扩张数据、功能磁共振成像(fMRI)数据和身体化学感测数据和功能近红外数据(fNIR)。“用户”是指受众成员、出于娱乐目的作为消费者而体验通信内容的人。本申请建立在此基础上,在以下总结的各种应用中使用CEP。
[0005]CEP是用户的神经生理状态的客观、算法和数字电子量度,其与用户对刺激(例如分支内容)的参与相关。CEP表达至少两个正交量度,例如唤起度(arousal)和评价度(valence)。如本文所用,“唤起度”是指根据其心理学含义而处于生理机敏、清醒和注意的状态或状况。高唤起度指示感兴趣和关心,而低唤起度指示无聊和不感兴趣。“评价度”在这里也以其吸引力或美学的心理意义来使用。正评价度指示吸引,而负评价度指示厌恶。如本文所用,“神经生理”是指指示或源自人的生理状态、神经状态或这两种状态。“生物特征”是指生物状态的量度,其涵盖“神经生理”并且可以涵盖其他信息,例如身份信息。某些数据(例如人的脸或其他身体部位的图像)可以既指示身份又指示神经生理状态。
[0006]在本公开的一方面,在用于生成脚本的方法中使用CEP或类似量度。该方法可以包括由至少一个处理器针对角色交互中的参与者将认知鉴别模型的一个或多个参数随机化。该方法还可以包括由至少一个处理器至少部分地通过对角色交互进行建模同时在多个脚本中的不同脚本之间改变参数来生成脚本。该方法还可以包括对于多个脚本中的每一个,
针对神经生理响应,基于认知鉴别模型来估计基于多个目标故事情节中的一个的有效性的量度。该方法可以包括将有效性的量度记录在计算机存储器中。
[0007]在一方面,估计有效性的量度可以包括基于认知鉴别模型来运算内容参与能力(CEP)。运算CEP值还可以包括确定唤起度值,并且将刺激平均唤起度与期望平均唤起度进行比较。另外,运算CEP值还可以确定评价度值。在相关方面,估计有效性的量度还可以包括基于将预测的神经生理响应与目标故事情节进行比较来确定神经误差测量。目标故事情节可以是或可以包括一组目标神经值,每个目标神经值与连续时间序列的不同间隔唯一地相关联。
[0008]在另一方面,一种用于生成通信内容(其包括单独的语言内容或与非语言内容协调的语言内容)的方法包括由至少一个处理器从一个或多个传感器接收神经生理数据,该传感器耦合到消费通信内容的片段的至少一个用户,其中该片段是从替代片段的库中选择的。该方法还可以包括由至少一个处理器对于片段中的每一个,基于神经生理数据和用于评定神经生理数据的认知鉴别模型,运算至少一个用户的神经生理响应的量度。该方法还可以包括由至少一个处理器将对于片段中的每一个的至少一个用户的神经生理响应的量度记录在与片段中的每一个的标识符相关联的计算机存储器中,以用于下列项中的至少一个:制作包括片段中的所选片段的通信内容,或者为多参与者通信会话选择参与者。该方法还可以包括至少部分地通过基于每个片段的至少一个用户的神经生理响应的相关联量度从库中选择片段并组合由该选择而选择的片段来生成通信内容。在一个方面,处理器可以针对各自消费片段的多个不同用户执行收集、运算和记录。
[0009]在一些应用中,例如,当多参与者通信会话包括计算机游戏或社交聊天会话时,该方法可以包括至少部分地通过选择多个不同用户中的针对对应的片段具有互补的神经生理响应的量度的用户,对多参与者通信会话的用户进行匹配。在某些情况下,这些片段基本上由语言内容组成,例如文本的书面部分。在其他情况下,这些片段基本上由音频内容(包括音乐)组成。因此,除了音频-视频内容之外,该方法对于生成文本文档和纯音频内容也是有用的。
[0010]该运算可以包括针对片段中的每一个确定如本文所述的内容参与能力(CEP)值或等效量度。确定CEP值可以包括基于神经生理数据确定唤起度值,并且将基于神经生理数据的刺激平均唤起度与期望平均唤起度进行比较,并且如本文其他地方所述的从生物特征传感器接收数据。该方法还可以包括基于来自生物特征传感器的神经生理数据来确定评价度值。对于片段中的每一个的至少一个用户的神经生理响应的量度可以包括至少一个评价度的指示。该选择还可以包括基于至少一个用户的神经生理响应的相关联量度和目标值之间的差,将误差指示符分配给每个片段的相关联量度,以及最小化具有分配的误差指示符的片段。
[0011]在另一方面,一种用于控制通信内容(其包括单独的语言内容或与非语言内容协调的语言内容)的呈现的方法包括当至少一个用户正在消费客户端设备上的内容的片段时,由至少一个处理器从耦合到该用户的一个或多个传感器接收神经生理数据,其中内容包括片段链。该方法还包括由至少一个处理器对于片段中的每一个,基于神经生理数据和用于评定神经生理数据的认知鉴别模型运算至少一个用户的神经生理响应的量度。该方法还包括由至少一个处理器基于针对片段的至少一个用户的神经生理响应的量度来选择链
中的后续片段,并将该后续片段输出到客户端设备。这些片段可以包括内容语言内容、音频内容或音频-视频内容。
[0012]运算可以包括确定如本文中其他地方所述的对于片段中的每一个的内容参与能力(CEP)值。确定CEP值可以包括基于神经生理数据来确定唤起度值,并且将基于神经生理数据的刺激平均唤起度与期望平均唤起度进行比较,和/或基于神经生理数据来确定评价度值。本文其他地方描述了用于指示唤起度和评价度的传感器。该方法可以包括本文档来自技高网
...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种用于生成脚本的方法,所述方法包括:由至少一个处理器针对角色交互中的参与者将认知鉴别模型的一个或多个参数随机化;由所述至少一个处理器至少部分地通过对所述角色交互进行建模同时在多个脚本中的不同脚本之间改变所述参数来生成所述脚本;对于所述多个脚本中的每一个,针对神经生理响应,基于认知鉴别模型来估计与一个或多个目标故事情节相比的有效性的量度;以及记录所述有效性的量度。2.根据权利要求1所述的方法,其中估计所述有效性的量度包括:基于所述认知鉴别模型来运算内容参与能力即CEP。3.根据权利要求2所述的方法,其中运算所述CEP值还包括确定唤起度值,并且将刺激平均唤起度与期望平均唤起度进行比较。4.根据权利要求1所述的方法,其中运算所述CEP值还包括确定评价度值。5.根据权利要求1所述的方法,其中估计所述有效性的量度还包括基于将预测的神经生理响应与目标故事情节进行比较来确定神经误差测量。6.根据权利要求5所述的方法,其中所述目标故事情节包括一组目标神经值,每个所述目标神经值唯一地与连续时间序列的不同间隔相关联。7.一种用于生成脚本的装置,包括耦合到存储器的处理器,所述存储器保存程序指令,所述程序指令在由所述处理器执行时使所述装置执行:针对角色交互中的参与者将认知鉴别模型的一个或多个参数随机化;至少部分地通过对所述角色交互进行建模同时在多个脚本中的不同脚本之间改变所述参数来生成所述脚本;对于所述多个脚本中的每一个,针对神经生理响应,基于认知鉴别模型来估计基于多个目标故事情节中的一个的有效性的量度;以及记录所述有效性的量度。8.一种用于生成脚本的装置,包括:用于针对角色交互中的参与者将认知鉴别模型的一个或多个参数随机化的装置;用于至少部分地通过对所述角色交互进行建模同时在多个脚本中的不同脚本之间改变所述参数来生成所述脚本的装置;用于对于所述多个脚本中的每一个,针对神经生理响应,基于认知鉴别模型来估计基于多个目标故事情节中的一个的有效性的量度的装置;以及用于记录所述有效性的量度的装置。9.一种用于生成通信内容的方法,包括:由至少一个处理器从一个或多个传感器接收神经生理数据,所述传感器耦合到消费通信内容的片段的至少一个用户,其中所述片段是从替代片段的库中选择的;由所述至少一个处理器对于所述片段中的每一个,基于所述神经生理数据和用于评定所述神经生理数据的认知鉴别模型运算所述至少一个用户的神经生理响应的量度;和由所述至少一个处理器将对于所述片段中的每一个的所述至少一个用户的神经生理响应的所述量度记录在与所述片段中的每一个的标识符相关联的计算机存储器中,以用于
下列项中的至少一个:制作包括所述片段中的所选片段的通信内容,或者为多参与者通信会话选择参与者。10.根据权利要求9所述的方法,还包括至少部分地通过基于每个片段的所述至少一个用户的神经生理响应的相关联量度从所述库中选择片段,并组合由所述选择来选择的片段,来生成通信内容。11.根据权利要求9所述的方法,还包括针对各自消费所述片段的多个不同用户执行所述收集、所述运算和所述记录。12.根据权利要求11所述的方法,还包括至少部分地通过选择所述多个不同用户中的针对对应的片段具有互补的神经生理响应的量度的用户,对所述多参与者通信会话的用户进行匹配。13.根据权利要求12所述的方法,其中所述多参与者通信会话包括计算机游戏或社交聊天会话中的一个或多个。14.根据权利要求11所述的方法,其中所述片段基本上由语言内容组成。15.根据权利要求11所述的方法,其中所述片段基本上由音频内容组成。16.根据权利要求9所述的方法,其中所述运算包括确定对于所述片段中的每一个的内容参与能力值即CEP值。17.根据权利要求16所述的方法,其中确定所述CEP值还包括基于所述神经生理数据来确定唤起度值,并且将基于所述神经生理数据的刺激平均唤起度与期望平均唤起度进行比较。18.根据权利要求16所述的方法,其中所述神经生理数据包括以下一项或多项:脑电图EEG数据、皮肤电响应GSR数据、面部肌电图fEMG数据、心电图EKG数据、视频面部动作单元FAU数据、脑机接口BMI数据、视频脉冲检测VPD数据、瞳孔扩张数据、功能磁共振成像fMRI数据和功能近红外数据fNIR。19.根据权利要求9所述的方法,还包括基于所述神经生理数据确定评价度值。20.根据权利要求19所述的方法,其中所述神经生理数据包括以下一项或多项:脑电图EEG数据、面部肌电图fEMG数据、视频面部动作单元FAU数据、脑机接口BMI数据、功能磁共振成像fMRI数据和功能近红外数据fNIR。21.根据权利要求19所述的方法,还包括基于针对一组指定基线刺激而收集的对应值来标准化所述评价度值。22.根据权利要求9所述的方法,其中对于所述片段中的每一个的所述至少一个用户的神经生理响应的所述量度包括至少一个评价度的指示。23.根据权利要求9所述的方法,其中所述选择还包括基于所述至少一个用户的神经生理响应的相关联量度和目标值之间的差,将误差指示符分配给每个片段的所述相关联量度。24.根据权利要求23所述的方法,其中所述选择包括最小化具有分配的误差指示符的片段。25.一种用于生成通信内容的装置,包括耦合到存储器并且耦合到一个或多个神经生理传感器的输出的处理器,所述存储器保存程序指令,所述程序指令在由所述处理器执行时使所述装置执行:
从一个或多个传感器接收神经生理数据,所述传感器耦合到消费通信内容的片段的至少一个用户,其中所述片段是从替代片段的库中选择的;对于所述片段中的每一个,基于所述神经生理数据和用于评定所述神经生理数据的认知鉴别模型运算所述至少一个用户的神经生理响应的量度;和由所述至少一个处理器将对于所述片段中的每一个的所述至少一个用户的神经生理响应的所述量度记录在与所述片段中的每一个的标识符相关联的计算机存储器中,以用于下列项中的至少一个:制作包括所述片段中的所选片段的通信内容,或者为多参与者通信会话选择参与者。26.一种用于对生成通信内容进行评级的装置,包括:用于从一个或多个传感器接收神经生理数据的装置,所述传感器耦合到消费通信内容的片段的至少一个用户,其中所述片段是从替代片段的库中选择的;用于对于所述片段中的每一个,基于所述神经生理数据和用于评定所述神经生理数据的认知鉴别模型运算所述至少一个用户的神经生理响应的量度的装置;和用于由所述至少一个处理器将对于所述片段中的每一个的所述至少一个用户的神经生理响应的所述量度记录在与所述片段中的每一个的标识符相关联的计算机存储器中,以用于下列项中的至少一个的装置:制作包括所述片段中的所选片段的通信内容,或者为多参与者通信会话选择参与者。27.一种用于控制通信内容的呈现的方法,包括:当至少一个用户正在消费客户端设备上的内容的片段时,由至少一个处理器从耦合到所述用户的一个或多个传感器接收神经生理数据,其中所述内容包括片段链;由所述至少一个处理器对于所述片段中的每一个,基于所述神经生理数据和用于评定所述神经生理数据的认知鉴别模型运算所述至少一个用户的神经生理响应的量度;由所述至少一个处理器基于针对所述片段的所述至少一个用户的神经生理响应的所述量度来选择所述链中的后续片段;和将所述后续片段输出到所述客户端设备。28.根据权利要求27所述的方法,其中所述片段包括从由语言内容、音频内容和音频-视频内容组成的组中选择的内容。29.根据权利要求27所述的方法,其中所述运算包括确定对于所述片段中的每一个的内容参与能力值即CEP值。30.根据权利要求29所述的方法,其中确定所述CEP值还包括基于所述神经生理数据来确定唤起度值,并且将基于所述神经生理数据的刺激平均唤起度与期望平均唤起度进行比较。31.根据权利要求29所述的方法,其中所述神经生理数据包括以下一项或多项:脑电图EEG数据、皮肤电响应GSR数据、面部肌电图fEMG数据、心电图EKG数据、视频面部动作单元FAU数据、脑机接口BMI数据、视频脉冲检测VPD数据、瞳孔扩张数据、功能磁共振成像fMRI数据和功能近红外数据fNIR。32.根据权利要求27所述的方法,还包括基于所述神经生理数据确定评价度值。33.根据权利要求32所述的方法,其中所述神经生理数据包括以下一项或多项:脑电图EEG数据、面部肌电图fEMG数据、视频面部动作单元FAU数据、脑机接口BMI数据、功能磁共振
成像fMRI数据和功能近红外数据fNIR。34.根据权利要求33所述的方法,还包括基于针对一组指定基线刺激而收集的对应值来标准化所述评价度值。35.根据权利要求27所述的方法,其中对于所述片段中的每一个的所述至少一个用户的神经生理响应的所述量度包括至...

【专利技术属性】
技术研发人员:A
申请(专利权)人:华纳兄弟娱乐公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1
相关领域技术
  • 暂无相关专利