一种数据处理方法及电子设备技术

本发明专利技术实施例提供了一种数据处理方法及电子设备，本发明专利技术实施例中，充分利用屏下摄像头进行用户图像数据采集，并基于采集到的用户图像数据，确定用户注视点信息和/或用户肢体行为信息，再基于该用户注视点信息和/或用户肢体行为信息，识别用户的目标操作对象和目标操作类型，并基于目标操作类型对目标操作对象执行对应的数据处理操作，这样能够采用非接触式触控方式准确定位用户注视点所针对的目标操作对象，来实现人机交互操作，无需用户在电子设备上执行接触式触控操作输入，简化了用户操作步骤，提升了用户人机交互使用体验。

A data processing method and electronic equipment

【技术实现步骤摘要】
一种数据处理方法及电子设备
本专利技术涉及电子设备
，尤其涉及一种数据处理方法及电子设备。
技术介绍
目前，随着移动通信技术的快速发展，电子设备(如智能手机等)已成为人们日常生活中必不可少的电子消费品，随着智能手机越来越普及化，同时，智能手机的功能不断升级、优化，智能手机已经融入生活的各个方面。现有技术中，用户和电子设备不接触且能够完成相应操作的新交互方式可代替传统触屏和语音交互方式，但新的交互方式受限于前置摄像头的功能局限，会遗漏许多用户发出的信息，无法精准控制电子设备完成相应的操作，用户人机交互使用体验不好。由此可见，现有的基于人机交互方式实现电子设备的控制操作，存在人机交互方式比较单一，无法满足用户的个性化需求，用户人机交互使用体验差。
技术实现思路
本专利技术实施例的目的是提供一种数据处理方法及电子设备，以解决现有的基于人机交互方式实现电子设备的控制操作，存在人机交互方式比较单一，主要是基于用户在触控屏上的触控输入等接触式触控方式，无法满足用户的个性化需求，用户人机交互使用体验差的问题。为了解决上述技术问题，本专利技术实施例是这样实现的：第一方面，本专利技术实施例提供了一种数据处理方法，应用于电子设备，所述电子设备包括多个屏下摄像头，包括：获取利用所述多个屏下摄像头采集到的用户图像数据；根据所述用户图像数据，确定用户交互信息，其中，所述用户交互信息包括：用户注视点信息和/或用户肢体行为信息；根据所述用户交互信息，确定目标操作对象和目标操作类型；基于所述目标操作类型，对所述目标操作对象执行对应的处理操作。第二方面，本专利技术实施例提供了一种电子设备，所述电子设备包括多个屏下摄像头，包括：图像数据获取模块，用于获取利用所述多个屏下摄像头采集到的用户图像数据；交互信息确定模块，用于根据所述用户图像数据，确定用户交互信息，其中，所述用户交互信息包括：用户注视点信息和/或用户肢体行为信息；目标信息确定模块，用于根据所述用户交互信息，确定目标操作对象和目标操作类型；数据操作控制模块，用于基于所述目标操作类型，对所述目标操作对象执行对应的处理操作。第三方面，本专利技术实施例提供了一种电子设备，包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如第一方面所述的数据处理方法的步骤。第四方面，本专利技术实施例提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如第一方面所述的数据处理方法的步骤。本专利技术实施例中的数据处理方法及电子设备，充分利用屏下摄像头进行用户图像数据采集，并基于采集到的用户图像数据，确定用户注视点信息和/或用户肢体行为信息，再基于该用户注视点信息和/或用户肢体行为信息，识别用户的目标操作对象和目标操作类型，并基于目标操作类型对目标操作对象执行对应的数据处理操作，这样能够采用非接触式触控方式准确定位用户注视点所针对的目标操作对象，来实现人机交互操作，无需用户在电子设备上执行接触式触控操作输入，简化了用户操作步骤，提升了用户人机交互使用体验。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术实施例提供的数据处理方法的第一种流程示意图；图2为本专利技术实施例提供的数据处理方法的第二种流程示意图；图3a为本专利技术实施例提供的数据处理方法中目标操作对象的确定过程的示意图；图3b为本专利技术实施例提供的数据处理方法中应用程序添加至文件夹的效果示意图；图4为本专利技术实施例提供的数据处理方法中目标操作类型为数据更新的实现原理示意图；图5为本专利技术实施例提供的数据处理方法中目标操作类型为截图的实现原理示意图；图6为本专利技术实施例提供的数据处理方法的第三种流程示意图；图7为本专利技术实施例提供的电子设备的模块组成示意图；图8为本专利技术实施例提供的电子设备的结构示意图。具体实施方式为了使本
的人员更好地理解本专利技术中的技术方案，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都应当属于本专利技术保护的范围。本专利技术实施例提供了一种数据处理方法及电子设备，充分利用屏下摄像头进行用户图像数据采集，并基于采集到的用户图像数据，确定用户注视点信息和/或用户肢体行为信息，再基于该用户注视点信息和/或用户肢体行为信息，识别用户的目标操作对象和目标操作类型，并基于目标操作类型对目标操作对象执行对应的数据处理操作，这样能够采用非接触式触控方式准确定位用户注视点所针对的目标操作对象，来实现人机交互操作，无需用户在电子设备上执行接触式触控操作输入，简化了用户操作步骤，提升了用户人机交互使用体验。图1为本专利技术实施例提供的数据处理方法的第一种流程示意图，图1中的方法能够由电子设备执行，特别由电子设备其中设置的程序模块执行，该电子设备包括多个屏下摄像头，如图1所示，该方法至少包括以下步骤：S101，获取利用多个屏下摄像头采集到的用户图像数据；其中，多个屏下摄像头可以是按照预设分布规则设置在电子设备的显示屏下的摄像头；具体的，屏下摄像头采集用户图像数据，并将该用户图像数据传输至电子设备中的程序模块(即处理器)。其中，可以预先设定屏下摄像头采集用户图像数据的触发条件，例如，该触发条件可以是检测到电子设备处于工作状态；又如，考虑到如果在用户不具有基于用户注视点信息进行人机交互操作需求的情况，屏下摄像头也进行用户图像数据的采集，则将会增加电子设备的处理器的处理量，因此，该触发条件可以是用于表征用户具有基于用户注视点信息进行人机交互操作需求的条件，如检测到用户针对预设人机交互触发控件的触控操作。S102，根据获取到的用户图像数据，确定用户交互信息，其中，该用户交互信息包括：用户注视点信息和/或用户肢体行为信息；具体的，由于用户的注视点是唯一的，且同一时刻多个屏下摄像头采集的用户图像数据是不同的，通过对获取到的用户图像数据进行图像识别，可以确定出用户在某一时间的注视点，获取该注视点对应的用户注视点信息；针对基于用户注视点信息进行人机交互的每个连续处理过程，若用户注视点随时间而发生变化，则可以基于某一时间段的多个用户图像数据，确定各时间节点的注视点，进而确定该时间段内注视点移动轨迹，并根据该注视点移动轨迹确定用户注视点信息；其中，该用户注视点信息包括：注视时间信息、注视点位置信息和注视点移动轨迹中至少一项本文档来自技高网...

【技术保护点】
1.一种数据处理方法，应用于电子设备，其特征在于，所述电子设备包括多个屏下摄像头，所述方法包括：/n获取利用所述多个屏下摄像头采集到的用户图像数据；/n根据所述用户图像数据，确定用户交互信息，其中，所述用户交互信息包括：用户注视点信息和/或用户肢体行为信息；/n根据所述用户交互信息，确定目标操作对象和目标操作类型；/n基于所述目标操作类型，对所述目标操作对象执行对应的处理操作。/n

【技术特征摘要】
1.一种数据处理方法，应用于电子设备，其特征在于，所述电子设备包括多个屏下摄像头，所述方法包括：
获取利用所述多个屏下摄像头采集到的用户图像数据；
根据所述用户图像数据，确定用户交互信息，其中，所述用户交互信息包括：用户注视点信息和/或用户肢体行为信息；
根据所述用户交互信息，确定目标操作对象和目标操作类型；
基于所述目标操作类型，对所述目标操作对象执行对应的处理操作。


2.根据权利要求1所述的方法，其特征在于，所述根据所述用户交互信息，确定目标操作对象和目标操作类型，包括：
根据所述用户注视点信息，确定目标操作对象；
根据所述用户注视点信息和/或用户肢体行为信息，确定目标操作类型。


3.根据权利要求2所述的方法，其特征在于，若所述用户注视点信息包括：在预设时间段内的注视点移动轨迹；
所述根据所述用户注视点信息，确定目标操作对象，包括：
确定与所述注视点移动轨迹对应的摄像头标识集合；
将所述摄像头标识集合包含的至少一个屏下摄像头所指示的操作对象，确定为目标操作对象。


4.根据权利要求2所述的方法，其特征在于，所述根据所述用户注视点信息和/或用户肢体行为信息，确定目标操作类型，包括以下确定过程中至少一项：
根据所述用户肢体行为信息对应的操作类型，确定目标操作类型；
若所述用户注视点信息中的至少一个注视点对应的屏下摄像头为预设屏下摄像头，则将与所述预设屏下摄像头对应的操作类型，确定为目标操作类型，其中，所述预设屏下摄像头包括：预先标记操作类型的屏下摄像头；
若确定所述用户注视点信息中的注视起点信息和注视终点信息相同，则将第一预设操作类型确定为目标操作类型；
若确定所述用户注视点信息中的注视时间大于预设时间阈值，则将第二预设操作确定为目标操作类型；
若确定所述用户注视点信息中的注视时间大于预设时间阈值，则根据所述用户肢体行为信息对应的操作类型，确定目标操作类型。


5.根据权利要求4所述的方法，其特征在于，所述用户肢体行为信息包括：用于表征预设时间段内的多个肢体动作的信息；
所述根据所述用户肢体行为信息对应的操作类型，确定目标操作类型，包括：
确定所述多个肢体动作对应的多个操作类型；
根据所述多个操作类型，确定目标操作类型，其中，所述目标操作类型的执行顺序是根据所述多个肢体动作的先后顺序确定的。


6...

【专利技术属性】
技术研发人员：孙宇，
申请(专利权)人：维沃移动通信有限公司，
类型：发明
国别省市：广东;44