【技术实现步骤摘要】
基于多模态交互的控制方法
[0001]本专利技术涉及交互领域,具体是一种基于多模态交互的控制方法。
技术介绍
[0002]目前的人工智能交互主要采用单一模态,如仅使用语音交互或仅使用图像交互,仅采用语音交互时存在被控区域识别困难或识别不准确等问题;采用图像交互也总会存在控制对象及控制指令识别困难或不准确的问题。
技术实现思路
[0003]为了提高交互控制准确性,本申请提供了一种基于多模态交互的控制方法。
[0004]本专利技术解决上述问题所采用的技术方案是:
[0005]基于多模态交互的控制方法,包括:
[0006]步骤1、设备注册,注册信息包括设备类型及位置;
[0007]步骤2、定义用户动作对应的被控区域;
[0008]步骤3、通过图像识别获取用户动作,基于用户动作确定被控区域,通过语音识别获取被控对象类型及控制指令;
[0009]步骤4、基于被控对象类型、控制指令及被控区域完成设备控制。
[0010]进一步地,所述步骤4中,若被控区域中没有对应的被控对象类型,则提示用户重新确定被控区域或对全域中的对应被控对象类型均实施控制指令。
[0011]本专利技术相比于现有技术具有的有益效果是:通过图像识别确定被控区域,通过语音识别确定被控对象类型及控制指令,二者结合实现交互控制,准确性更高;通过预定义用户动作对应的被控区域,使得被控区域识别模型更简单。
具体实施方式
[0012]为了使本专利技术的目的、技术方案及优点更加清楚明 ...
【技术保护点】
【技术特征摘要】
1.基于多模态交互的控制方法,其特征在于,包括:步骤1、设备注册,注册信息包括设备类型及位置;步骤2、定义用户动作对应的被控区域;步骤3、通过图像识别获取用户动作,基于用户动作确定被控区域;通过语音识别获取被控对象类型及控制指令;步骤4、基于...
【专利技术属性】
技术研发人员:雷伟,
申请(专利权)人:四川长虹电器股份有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。