一种基于视觉数据的多媒体数据交互平台及分析方法技术

本发明专利技术涉及人工智能的人机交互领域，公开了一种基于视觉数据的多媒体数据交互平台及分析方法，眼动轨迹数据可以反映出用户感兴趣的内容，用来分析用户个体及群体的行为和兴趣喜好，并可以帮助多媒体作品创作者和相关工作人员改善作品。该平台包括：眼动数据获取模块，用于获取待分析用户的眼动轨迹数据；注视点目标信息确定模块，用于根据眼动轨迹数据确定注视点目标信息，注视点目标信息用于指示待分析用户对多媒体的兴趣内容；信息反馈模块，用于基于注视点目标信息生成多媒体的反馈信息。

【技术实现步骤摘要】
一种基于视觉数据的多媒体数据交互平台及分析方法
本专利技术涉及人工智能的人机交互领域，尤其涉及一种基于视觉数据的多媒体数据交互平台及分析方法。
技术介绍
现在分享视频或者图的社交媒体很多，但是基本交流模式还是用文字或者表情包交流，无论是在直播还是上传类的平台，上传者也无法知道其他人在看自己的图或者视频等多媒体内容的时候究竟最关注点是什么位置或者什么内容。对于平面设计师，摄影师，视频制作者等多媒体创作者来说，最重要的是要知道该怎么抓住用户的关注点，并判断出作品的哪些元素是被用户喜欢，哪些元素被用户讨厌。如果能够量化用户的关注点，就对创作的改善和优化提供有效的参考，使得作品能够更清晰准确的传达作品的关键属性，吸引更多的用户。设计需要将用户的注意力转移到重要信息上，并提供有趣的用户体验。多媒体作品的创作者需要知道用户对其作品的一个量化的关注数据，而现在用户感兴趣的内容和关注点无法量化，只能够通过文字表达，或者通过鼠标或者光标在屏幕上的移动来主动描述。鼠标垫移动、点击、滚动的操作记录，可以汇总成量化的一个用户主动绘制的热度图。而眼动追踪技术，可以通过视觉成像系统和相对应的人工智能算法，获取用户的眼睛运动的轨迹和注视的位置和内容，从而获得观看这个视频或者图像素材的人究竟关注的是什么位置或者是什么内容。每个时刻用户具体眼睛在看哪里，还有关注的时长和顺序等等，都可以通过眼动追踪来实现。而且眼睛所停留的时长和顺序，更加可以给出用户感兴趣的内容和对这些内容的优先级的排序。现在分享视频或者图的社交媒体基本交流模式还是用文字或者表情包交流，上传者也无法知道观看者最感兴趣和最关注点是什么位置或者什么内容。一方面，设计或者摄影作品的好坏，往往难以用文字描述，或者是文字描述过于抽象而难以进行量化。现有平台往往只能对整个作品点赞，并不能明确作品吸引人的地方究竟是在哪里。另外，使用鼠标或者光标指示的位置并不是用户眼睛真正的关注点，它是用户表达出来的内容，仅仅是量化反应用户手部的操作数据。用户真正眼睛在看哪里和关注哪里，和他用手指示出来的位置，往往并不一致。并且关注时长和关注热度也难以量化。
技术实现思路
本专利技术目的在于提供一种基于视觉数据的多媒体数据交互平台及分析方法，以解决上述
技术介绍
中存在的问题。为实现上述目的，本专利技术提供了一种基于视觉数据的多媒体数据交互平台，包括：眼动数据获取模块，用于获取待分析用户的眼动轨迹数据；注视点目标信息确定模块，用于根据所述眼动轨迹数据确定注视点目标信息，所述注视点目标信息用于指示所述待分析用户对所述多媒体的兴趣内容；信息反馈模块，用于基于所述注视点目标信息生成所述多媒体的反馈信息。优选地，所述平台还包括：展示模块，用于将多媒体作者上传的多媒体眼动数据展示给用户进行观看。优选地，所述平台还包括：第一分析模块，用于获取单个用户的眼动轨迹数据，基于所述单个用户的眼动轨迹数据分析得到单个用户感兴趣的内容；第二分析模块，用于汇总多个用户的眼动轨迹数据的多个目标信息，基于所述多个用户的眼动轨迹数据的多个目标信息进行汇总分析处理得到多个用户感兴趣的内容。作为一个总的专利技术构思，本专利技术还提供一种应用于上述基于视觉数据的多媒体数据交互平台的分析方法，包括：获取待分析用户的眼动轨迹数据；根据所述眼动轨迹数据确定注视点目标信息，所述注视点目标信息用于指示所述待分析用户对所述多媒体的兴趣内容；基于所述目标信息生成所述多媒体的反馈信息。优选地，所述获取待分析用户的眼动轨迹数据之前，所述方法还包括：将多媒体对应的眼动数据以预设形式展示给多媒体作者及其他用户进行观看。优选地，所述根据所述眼动轨迹数据确定注视点目标信息，所述注视点目标信息用于指示所述待分析用户对所述多媒体的兴趣内容，所述方法还包括：汇总多个用户的眼动轨迹数据的多个注视点目标信息，基于所述多个用户的眼动轨迹数据的多个注视点目标信息进行汇总分析处理得到多个用户感兴趣的内容。优选地，所述根据所述眼动轨迹数据确定注视点目标信息包括：根据所述眼动轨迹数据确定注视点位置；基于所述注视点位置获取对应于每一个注视点位置的内容作为所述注视点目标信息。优选地，所述基于所述注视点目标信息生成所述多媒体的反馈信息包括：将所述注视点目标信息转换为预设格式的数据发送至相关人员，所述预设格式包括注视点分布散点图、热度图、轨迹图或评论。本专利技术具有以下有益效果：本专利技术提供的一种基于视觉数据的多媒体数据交互平台及方法，通过获取待分析用户的眼动轨迹数据；根据眼动轨迹数据确定注视点目标信息，注视点目标信息用于指示待分析用户对多媒体的兴趣内容；基于注视点目标信息生成多媒体的反馈信息。该方法可以利用用户的眼动轨迹数据帮助相关工作人员改善作品。下面将参照附图，对本专利技术作进一步详细的说明。附图说明构成本申请的一部分的附图用来提供对本专利技术的进一步理解，本专利技术的示意性实施例及其说明用于解释本专利技术，并不构成对本专利技术的不当限定。在附图中：图1是本专利技术优选实施例的基于视觉数据的多媒体数据交互平台的模块结构示意图；图2是本专利技术优选实施例的基于视觉数据的多媒体数据交互平台的网络结构示意图；图3是本专利技术优选实施例的基于视觉数据的多媒体数据交互平台的分析方法的信息交互情况示意图；图4是本专利技术优选实施例的基于视觉数据的多媒体数据交互平台的分析方法的获取眼动信息时锁定用户脸部的示意图；图5是本专利技术优选实施例的平台交互情况示意图；图6是本专利技术优选实施例的多媒体眼动追踪数据汇总整合后反馈的眼动数据注视点散点示意图；图7是本专利技术优选实施例的多媒体眼动追踪数据汇总整合后反馈的眼动追踪热度示意图；图8是本专利技术优选实施例的多媒体眼动追踪数据汇总整合后反馈的眼动轨迹示意图。具体实施方式以下结合附图对本专利技术的实施例进行详细说明，但是本专利技术可以由权利要求限定和覆盖的多种不同方式实施。实施例1如图1-图2所示，本实施例提供一种基于视觉数据的多媒体数据交互平台，包括：眼动数据获取模块，用于获取待分析用户的眼动轨迹数据；注视点目标信息确定模块，用于根据所述眼动轨迹数据确定注视点目标信息，所述注视点目标信息用于指示所述待分析用户对所述多媒体的兴趣内容；信息反馈模块，用于基于所述注视点目标信息生成所述多媒体的反馈信息。上述的基于视觉数据的多媒体数据交互平台，通过获取待分析用户的眼动轨迹数据；根据眼动轨迹数据确定注视点目标信息，注视点目标信息用于指示待分析用户对多媒体的兴趣内容；基于注视点目标信息生成多媒体的反馈信息。该方法可以利用用户的眼动轨迹数据帮助相关工作人员改善作品。可选地，所述平台还包括：展示模块，用于将多媒体作者上传的多媒体眼动数据展示给用户进行观看。可选地，所述平台还包括本文档来自技高网...

【技术保护点】
1.一种基于视觉数据的多媒体数据交互平台，其特征在于，包括：/n眼动数据获取模块，用于获取待分析用户的眼动轨迹数据；/n注视点目标信息确定模块，用于根据所述眼动轨迹数据确定注视点目标信息，所述注视点目标信息用于指示所述待分析用户对所述多媒体的兴趣内容；/n信息反馈模块，用于基于所述注视点目标信息生成所述多媒体的反馈信息。/n

【技术特征摘要】
1.一种基于视觉数据的多媒体数据交互平台，其特征在于，包括：
眼动数据获取模块，用于获取待分析用户的眼动轨迹数据；
注视点目标信息确定模块，用于根据所述眼动轨迹数据确定注视点目标信息，所述注视点目标信息用于指示所述待分析用户对所述多媒体的兴趣内容；
信息反馈模块，用于基于所述注视点目标信息生成所述多媒体的反馈信息。


2.根据权利要求1所述的基于视觉数据的多媒体数据交互平台，其特征在于，所述平台还包括：
展示模块，用于将多媒体作者上传的多媒体眼动数据展示给用户进行观看。


3.根据权利要求1所述的基于视觉数据的多媒体数据交互平台，其特征在于，所述平台还包括：
第一分析模块，用于获取单个用户的眼动轨迹数据，基于所述单个用户的眼动轨迹数据分析得到单个用户感兴趣的内容；
第二分析模块，用于汇总多个用户的眼动轨迹数据的多个目标信息，基于所述多个用户的眼动轨迹数据的多个目标信息进行汇总分析处理得到多个用户感兴趣的内容。


4.一种应用于上述权利要求1-3中任一项所述的基于视觉数据的多媒体数据交互平台的分析方法，其特征在于，包括：
获取待分析用户的眼动轨迹数据；
根据所述眼动轨迹数据确定注视点目标信息，所述注视点目标信...

【专利技术属性】
技术研发人员：王荃，
申请(专利权)人：东莞市东全智能科技有限公司，
类型：发明
国别省市：广东;44