移动手持机设备及其方法技术

一种移动手持机设备收集关于手持机的用户的生理状态的传感器数据。移动手持机设备接收在移动手持上消费的多媒体内容。在部署阶段，传感器数据用于分类用户对在移动设备上消费的各个多媒体内容的情绪反应。在训练阶段建立的分类模型可以用于将传感器数据映射到指示用户对多媒体的情绪反应的分类标签。

【技术实现步骤摘要】

本专利技术总体上涉及评估提供给移动手持机设备的多媒体内容(例如，在移动手持机设备上接收和消费的文献、视频、音乐以及应用)的有效性。更具体地，本专利技术针对确定用户响应于在移动手持机设备上消费的多媒体内容的可能情绪状态。
技术介绍
移动手持机设备(或“智能电话”)的用户有机会在他们的智能电话上浏览多个不同文献、照片、视频、音乐、应用以及其它类型多媒体。对多媒体内容的创作者和发布者(例如，设计者、作者、艺术家以及编程者)而言，得到来自用户关于内容的反馈是非常重要的，这是因为可以令内容创作者和发布者改善他们的产品，并引导他们向新的机会做出努力。然而，从用户得到关于在移动手持机上使用的多媒体内容的品质的反馈是困难的。当前
方法包括但不限于:让用户通过定量度量系统浏览内容，例如，通过一到五星的分级标尺或者通过书写文本，可以在线或在实体商店中提供这两种方法中任意一个；通过测量相关产品的销售，或者测量对创作者或发布者的商店或网页的访问量，来测量所述媒体的间接提升。由于用户必须主动提供多媒体的评价，而这样的评价容易受到偏见或记忆的影响，所以所有这些传统方法均存在问题。另一种方法是对用户使用多媒体(通过阅读、观看或听)的次数进行计数。然而，这种计数不准确并且太粗糙。例如，由于多个多媒体文件仅消费一次(例如，通过电子邮件接收的多媒体)，所以根据访问计数的结论是不全面的。
技术实现思路
描述了一种装置、系统、方法和计算机程序产品，提供关于用户对在移动手持机设备上消费的多媒体的情绪反应的反馈。该反馈基于当用户浏览多媒体时由移动设备(例如，智能电话)所收集的用户的生理状态的传感器数据。传感器数据可以基于在移动手持机内的传感器，以及靠近手持机的传感器。传感器数据指示了用户对于多媒体的生理反应，因此传感器数据也与用户对于多媒体的情绪反应相关联。在示例性实施例中，系统分成训练阶段和部署(deployment)阶段。在训练阶段，对象提供他们对于测试多媒体的情绪反应的自我评估，该信息与传感器数据相结合来创建具有预选分类标签的分类模型。在部署阶段，移动设备可以使用分类模型来产生与移动设备的用户的情绪反应相对应的分类标签。之后将分类标签作为反馈发送给另一实体，例如中间件厂商。可以累积(aggregate)来自多个移动手持机设备用户的信息以便为多媒体内容的创作者和发布者产生信息。【附图说明】图1示出了根据本专利技术的一个实施例通过移动手持感官输入来收集多媒体反馈的示例性系统。图2示出了根据本专利技术的一个实施例形成分类标签和感官数据之间的关联的训练阶段。图3示出了根据本专利技术的一个实施例将感官数据的范围映射到两个示例性分类标签的示例性判决树。图4示出了根据本专利技术的一个实施例产生多媒体内容的实时反馈的部署阶段。【具体实施方式】图1是根据本专利技术的一个实施例的系统的高级框图，用于记录、解释及收集用户对于再现在移动通信设备(例如，智能电话)上的多媒体内容的反应。移动手持机设备100包括无线收发器115以及处理器和存储器130。移动手持机设备100能够无线接入因特网，其中这样的手持机也通常被称为智能电话。移动手持机设备100从多媒体创作者或发布者180 (例如，Google?)接收内容。例如，发布者180可以利用具有一个或多个处理器和存储器的服务器系统182服务于消费者下载到他们的移动手持机的内容。中间件厂商190还可以使用具有一个或多个处理器和存储器的服务器系统192。中间件厂商190可以是提供软件的任意组织，向移动手持机设备100提供多媒体内容，所述软件作为多媒体创作者或发布者180之间的媒介。例如，提供移动手持机设备100的软件操作系统(OS)的公司同样可以用作中间件厂商190。本领域技术人员应理解,利用无线运营商170的基础设施，内容可以用于移动手持机设备100。移动手持机设备100包括具有能够显示多媒体和音频输出的显示器的用户界面110。多媒体情绪响应模块105通过本地有线连接接口 ISO或无线连接接口 140，从靠近移动手持机设备100的传感器收集本地可用传感器数据，所述传感器包括在移动手持机设备100内的传感器120以及耦合到移动手持机设备100上的任何传感器122。传感器数据与用户对于在移动手持机设备100上接收并消费的多媒体160的生理反应102相对应。移动手持机设备100基于传感器数据产生对所使用的多媒体的情绪反应的指示符165。例如，如果用户通过在移动手持机设备100的用户界面110上浏览视频剪辑来消费该视频剪辑，则传感器120和122可以捕获生理改变，例如心率的改变，从中可推断出用户对该多媒体的情绪反应的指示。多媒体情绪响应模块105可以以软件或固件实现，并且包括驻留在存储器中的计算机代码。多媒体情绪响应模块105产生指示了对多媒体的情绪反应的反馈165。作为示例，反馈165可以包括相关传感器数据的概要，或者基于模型的传感器数据的解释。应理解，反馈165可以包括标记、时间戳、或者将反馈与特定多媒体内容相关联的其他方式。多媒体包括例如文件、图片、视频、音乐和例如音频旁白的非音乐音频(例如音频书)的媒体。此外，多媒体可以包括在移动手持机设备100上接收和消费的多媒体应用。在本应用中使用的多媒体可以不包括广告。在实施例中，多媒体情绪响应模块105基于用户的情绪状态的模型，相对于与来自传感器120和122的可用数据不同的触觉和生物统计学传感器测量，确定用户的情绪反应的类别。传感器数据的示例包括用户的心率、呼吸、摇晃、皮肤电反应、面部潮红反应、眨眼反应以及发音。情绪反应的类别基于分类模型可以根据广告商进行分类，例如用户的情绪状态是否指示了对一个多媒体喜欢或不喜欢的情绪反应。识别并收集用户对于多媒体的情绪反应，为发布者180提供信息的来源，以便评估多媒体160的有效性。此外，如果多媒体足够长，可以得到关于用户对多媒体的不同片段的反应的反馈。在移动手持机中能够用作移动手持机设备100的用户102的生理传感器的传感器120的示例包括高分辨率前置彩色视频摄像机、麦克风、全球定位系统(GPS)或者其它位置传感器、以及用于感测运动的加速计(加速度、摇晃和移动)。分析前置摄像数据，以便确定脸红反应、视线轨迹(注视位置及时间和眨眼行为)、面部表达、或者其它用户的情绪状态的视觉指示符。在用户环境与噪声条件的大范围内，存在传感器品质和检测有意义生理反应的能力之间的折中。对于注视检测，示例性最小摄像机要求400百万像素和每秒20帧。示例性加速计实现方式具有对以米/秒2为单位的真实加速度至少95%的准确性。运动传感器数据的分析可以提供关于用户是否摇晃和/或做出表示强烈情绪反应的突然移动。分析音频数据以便提供情绪反应的表示，例如可听的喘息。传感器120的其它示例可以包括其它类型的能够集成在移动手持机设备100内的紧凑型传感器，以便改善安全性并支持健康和舒适应用，例如心率监控器、温度传感器、压力传感器和湿度(皮肤湿度)传感器。此外，本地传感器122可以通过有线连接器150与移动手持机设备100通信。然而，更为通用地，本地传感器122可以与移动手持机设备100进行本地无线连接。例如，用户可以具有通过无线连接(例如，蓝牙⑧)与移动手持机设备100连接的便本文档来自技高网...

【技术保护点】
一种移动手持机设备，包括：至少一个处理器和存储器；具有显示器的用户接口；以及在移动手持机设备中的多媒体响应模块，配置为收集来自传感器集合的传感器数据，所述传感器数据对移动手持机设备的用户的生理反应加以指示；其中多媒体响应模块监控与用户对于在移动手持机设备上消费的多媒体的生理反应有关的传感器数据，并产生指示了用户对所述媒体的情绪反应的输出。

【技术特征摘要】
2012.12.04 KR 10-2012-0139811;2012.08.16 US 13/581.一种移动手持机设备，包括: 至少一个处理器和存储器； 具有显示器的用户接口；以及 在移动手持机设备中的多媒体响应模块，配置为收集来自传感器集合的传感器数据，所述传感器数据对移动手持机设备的用户的生理反应加以指示； 其中多媒体响应模块监控与用户对于在移动手持机设备上消费的多媒体的生理反应有关的传感器数据，并产生指示了用户对所述媒体的情绪反应的输出。2.根据权利要求1所述的移动手持机设备，其中多媒体响应模块配置为通过将感官输入与分类模型相关联来确定用户情绪状态的分类标签，并报告分类确定。3.根据权利要求2所述的移动手持机设备，其中所述报告用于产生针对媒体创作者或发布者的累积数据。4.根据权利要求1所述的移动手持机设备，其中多媒体响应模块包括训练阶段，用于确定感官数据和用户的情绪状态之间的关联。5.根据权利要求4所述的移动手持机设备，其中在所述训练阶段中，调查用户对于测试多媒体的情绪反应，以提供用户调查数据，并确定传感器输入和情绪反应的分类标签之间的关联。6.根据权利要求1所述的移动手持机设备，其中传感器输入包括直接或间接地表示心率、呼吸速率、皮肤电反应、温度、压力、加速度、运动反应、皮肤潮红反应、眨眼反应和声音反应中的至少一个的传感器输入。7.一种分析在移动手持机设备上显示的多...

【专利技术属性】
技术研发人员：托马斯·潘，全元钟，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：