一种信息交互方法及装置制造方法及图纸

本发明专利技术实施例提供了一种信息交互方法，该方法包括：获取针对用户采集的第一待识别图像；对所述第一待识别图像进行识别，得到所述第一待识别图像中的第一手势信息；确定并执行所述第一手势信息对应的触发事件，以与所述用户进行交互。这样，电子设备可以通过识别用户的手势，确定并执行相应的触发事件，也就是说，用户可以通过手势与电子设备进行信息交互，因此，用于本方案，电子设备可以为用户提供更丰富的交互体验。

A method and device of information exchange

【技术实现步骤摘要】
一种信息交互方法及装置
本专利技术涉及通信
，特别是涉及一种信息交互方法及装置。
技术介绍
一些场景中，电子设备需要与用户进行信息交互，比如，用户可以向智能音箱发送语音指令，智能音响在接收到用户的语音指令之后，可以播放相应的音频文件；或者，用户可以通过触控界面向机器人发送指令，机器人在接收到用户的指令之后，可以执行相应的动作，等等。通常，电子设备与用户的信息交互是基于用户发出的语音信号，或用户向电子设备发出的操作指令，应用场景比较单一，无法提供更丰富的交互体验。
技术实现思路
本专利技术实施例的目的在于提供一种信息交互方法，以提供更丰富的交互体验。具体技术方案如下：本专利技术实施例提供了一种信息交互方法，应用于电子设备，所述方法包括：获取针对用户采集的第一待识别图像；对所述第一待识别图像进行识别，得到所述第一待识别图像中的第一手势信息；确定并执行所述第一手势信息对应的触发事件，以与所述用户进行交互。可选的，所述对所述第一待识别图像进行识别，得到所述第一待识别图像中的第一手势信息，包括：将所述第一待识别图像与多个预设图像进行模板匹配，确定与所述待识别图像相匹配的预设图像，作为匹配图像；将所述匹配图像对应的手势信息作为所述第一待识别图像的第一手势信息。可选的，所述将所述第一待识别图像与多个预设图像进行模板匹配，确定与所述第一待识别图像相匹配的预设图像，作为匹配图像，包括：按照预设遍历规则，从所述第一待识别图像中确定多个待检测区域；针对每个预设图像，计算每个待检测区域与该预设图像之间的差异值，根据所述差异值，确定与该预设图像对应的待检测区域，作为目标区域；将所述目标区域的差异值最小的预设图像，作为与所述第一待识别图像相匹配的预设图像。可选的，在所述确定并执行所述第一手势信息对应的触发事件，以与所述用户进行交互之后，所述方法还包括：获取针对用户采集的第二待识别图像；对所述第二待识别图像进行识别，得到所述第二待识别图像中的第二手势信息；判断所述第二手势信息是否满足预设条件；若满足，确定并执行所述第二手势信息对应的触发事件；若不满足，则获取控制指令，确定并执行与所述控制指令对应的触发事件；返回所述获取针对用户采集的第二待识别图像的步骤。可选的，所述判断所述第二手势信息是否满足预设条件，包括：判断所述第二手势信息对应的触发事件的置信度是否大于预设阈值；若是，则判定所述第二手势信息满足预设条件；若否，则判定所述第二手势信息不满足预设条件。可选的，采用如下步骤，确定所述第二手势信息对应的触发事件的置信度：获取多个候选触发事件及初始置信度；其中，每个候选触发事件的初始置信度相等；从所述多个候选触发事件中随机选择目标触发事件，作为所述手势信息对应的触发事件，执行所述触发事件；若在执行所述触发事件后，接收到所述用户的交互指令，则按照预设的更新规则，增加所述目标触发事件的置信度；若在执行所述触发事件后，未接收到所述用户的交互指令，则按照所述预设的更新规则，减少所述目标触发事件的置信度。可选的，所述判断所述第二手势信息是否满足预设条件，包括：判断识别到所述第二手势信息的时刻与上一次执行任一触发事件的时刻之间的时间差值是否大于预设阈值；若否，则判定所述第二手势信息满足预设条件；若是，则判定所述第二手势信息不满足预设条件。本专利技术实施例还提供了一种信息交互装置，应用于电子设备，所述装置包括：图像采集模块，用于获取针对用户采集的第一待识别图像；处理器，用于对所述第一待识别图像进行识别，得到所述第一待识别图像中的第一手势信息，以及用于确定并执行所述第一手势信息对应的触发事件；通信模块，用于与所述用户进行交互。可选的，所述处理器，具体用于将所述第一待识别图像与多个预设图像进行模板匹配，确定与所述待识别图像相匹配的预设图像，作为匹配图像；将所述匹配图像对应的手势信息作为所述第一待识别图像的第一手势信息。可选的，所述处理器，具体用于：按照预设遍历规则，从所述第一待识别图像中确定多个待检测区域；针对每个预设图像，计算每个待检测区域与该预设图像之间的差异值，根据所述差异值，确定与该预设图像对应的待检测区域，作为目标区域；将所述目标区域的差异值最小的预设图像，作为与所述第一待识别图像相匹配的预设图像。可选的，所述图像采集模块，还用于获取针对用户采集的第二待识别图像；所述处理器，还用于对所述第二待识别图像进行识别，得到所述第二待识别图像中的第二手势信息；判断所述第二手势信息是否满足预设条件；若满足，则确定并执行所述第二手势信息对应的触发事件；若不满足，则触发所述通信模块；所述通信模块，用于获取控制指令；所述处理器，还用于确定并执行与所述控制指令对应的触发事件；触发所述图像采集模块。可选的，所述处理器，还用于判断所述第二手势信息对应的触发事件的置信度是否大于预设阈值；若是，则判定所述第二手势信息满足预设条件；若否，则判定所述第二手势信息不满足预设条件。可选的，采用如下步骤，确定所述第二手势信息对应的触发事件的置信度：获取多个候选触发事件及初始置信度；其中，每个候选触发事件的初始置信度相等；从所述多个候选触发事件中随机选择目标触发事件，作为所述手势信息对应的触发事件，执行所述触发事件；若在执行所述触发事件后，接收到所述用户的交互指令，则按照预设的更新规则，增加所述目标触发事件的置信度；若在执行所述触发事件后，未接收到所述用户的交互指令，则按照所述预设的更新规则，减少所述目标触发事件的置信度。可选的，所述处理器，还用于判断识别到所述第二手势信息的时刻与上一次执行任一触发事件的时刻之间的时间差值是否大于预设阈值；若否，则判定所述第二手势信息满足预设条件；若是，则判定所述第二手势信息不满足预设条件。本专利技术实施例还提供了一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；存储器，用于存放计算机程序；处理器，用于执行存储器上所存放的程序时，实现上述任一所述的信息交互方法。本专利技术实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述任一所述的信息交互方法。本专利技术实施例提供的信息交互方法及装置，通过获取针对用户采集的第一待识别图像，对第一待识别图像进行识别，得到第一待识别图像中的第一手势信息，然后，确定并执行第一手势信息对应的触发事件，以与用户进行交互；这样，电子设备可以通过识别用户的手势，确定并执行相应的触发事件，也就是说，用户可以通过手势与电子设备进行信息交互，因此，用于本方案，电子设备可以为用户提供更丰富的交互体验。当然，实施本专利技术的任一产品或方法并不本文档来自技高网...

【技术保护点】
1.一种信息交互方法，应用于电子设备，其特征在于，所述方法包括：/n获取针对用户采集的第一待识别图像；/n对所述第一待识别图像进行识别，得到所述第一待识别图像中的第一手势信息；/n确定并执行所述第一手势信息对应的触发事件，以与所述用户进行交互。/n

【技术特征摘要】
1.一种信息交互方法，应用于电子设备，其特征在于，所述方法包括：
获取针对用户采集的第一待识别图像；
对所述第一待识别图像进行识别，得到所述第一待识别图像中的第一手势信息；
确定并执行所述第一手势信息对应的触发事件，以与所述用户进行交互。


2.根据权利要求1所述的方法，其特征在于，所述对所述第一待识别图像进行识别，得到所述第一待识别图像中的第一手势信息，包括：
将所述第一待识别图像与多个预设图像进行模板匹配，确定与所述待识别图像相匹配的预设图像，作为匹配图像；
将所述匹配图像对应的手势信息作为所述第一待识别图像的第一手势信息。


3.根据权利要求2所述的方法，其特征在于，所述将所述第一待识别图像与多个预设图像进行模板匹配，确定与所述第一待识别图像相匹配的预设图像，作为匹配图像，包括：
按照预设遍历规则，从所述第一待识别图像中确定多个待检测区域；
针对每个预设图像，计算每个待检测区域与该预设图像之间的差异值，根据所述差异值，确定与该预设图像对应的待检测区域，作为目标区域；
将所述目标区域的差异值最小的预设图像，作为与所述第一待识别图像相匹配的预设图像。


4.根据权利要求1所述的方法，其特征在于，在所述确定并执行所述第一手势信息对应的触发事件，以与所述用户进行交互之后，所述方法还包括：
获取针对用户采集的第二待识别图像；
对所述第二待识别图像进行识别，得到所述第二待识别图像中的第二手势信息；
判断所述第二手势信息是否满足预设条件；
若满足，确定并执行所述第二手势信息对应的触发事件；若不满足，则获取控制指令，确定并执行与所述控制指令对应的触发事件；
返回所述获取针对用户采集的第二待识别图像的步骤。


5.根据权利要求4所述的方法，其特征在于，所述判断所述第二手势信息是否满足预设条件，包括：
判断所述第二手势信息对应的触发事件的置信度是否大于预设阈值；
若是，则判定所述第二手势信息满足预设条件；若否，则判定所述第二手势信息不满足预设条件。


6.根据权利要求5所述的方法，其特征在于，采用如下步骤，确定所述第二手势信息对应的触发事件的置信度：
获取多个候选触发事件及初始置信度；其中，每个候选触发事件的初始置信度相等；
从所述多个候选触发事件中随机选择目标触发事件，作为所述手势信息对应的触发事件，执行所述触发事件；
若在执行所述触发事件后，接收到所述用户的交互指令，则按照预设的更新规则，增加所述目标触发事件的置信度；
若在执行所述触发事件后，未接收到所述用户的交互指令，则按照所述预设的更新规则，减少所述目标触发事件的置信度。


7.根据权利要求4所述的方法，其特征在于，所述判断所述第二手势信息是否满足预设条件，包括：
判断识别到所述第二手势信息的时刻与上一次执行任一触发事件的时刻之间的时间差值是否大于预设阈值；
若否，则判定所述第二手势信息满足预设条件；若是，则判定所述第二手势信息不满足预设条件。


8.一种信息交互装置，应用于电子设备，其特征在于，所述装置包括：
图像采集模块，用于获取针对用户采集的第一待识...

【专利技术属性】
技术研发人员：苏辉，
申请(专利权)人：杭州萤石软件有限公司，
类型：发明
国别省市：浙江;33