一种操作指令确定方法、装置、机顶盒及介质制造方法及图纸

技术编号:34911408 阅读:36 留言:0更新日期:2022-09-15 07:00
本发明专利技术公开了一种操作指令确定方法、装置、机顶盒及介质。所述方法包括:获取视频数据流中的坐标对;获取语音数据流中至少一个音频数据;根据参考手势库对所述坐标对进行评估得到所述坐标对的目标手势识别概率;根据参考语音库对各所述音频数据进行评估得到各所述音频数据的目标语音识别概率;基于目标手势识别概率和目标语音识别概率确定操作指令。该方法根据参考手势库对获取的坐标对进行评估准确得到了目标手势识别概率,根据参考语音库对音频数据进行评估准确得到了目标语音识别概率,使得算法的复杂度降低;同时,通过目标手势识别概率和目标语音识别概率互为校准的方式来确定操作指令,提高了算法的鲁棒性,确保了操作指令的正确性。作指令的正确性。作指令的正确性。

【技术实现步骤摘要】
一种操作指令确定方法、装置、机顶盒及介质


[0001]本专利技术涉及视频语音识别
,尤其涉及一种操作指令确定方法、装置、机顶盒及介质。

技术介绍

[0002]近年来,智能导航成为人工智能领域的热门话题,智能导航主要通过语音或手势识别算法来识别操作指令,根据操作指令即可在一定距离内控制目标设备(如手机、电视机等)的动作,而无需遥控等设备。
[0003]现有技术方案采用的算法主要是基于隐马尔科夫模型(Hidden Markov Model,HMM)的算法。HMM算法运用状态序列描述观测向量的时间逻辑,通过多变量混合高斯分布表现观测向量序列的空间分布,需要大量的训练样本和存储量,因此训练的过程需要耗费较多时间。

技术实现思路

[0004]本专利技术提供了一种操作指令确定方法、装置、机顶盒及介质,以提高了识别算法的鲁棒性,降低算法的复杂度。
[0005]根据本专利技术的一方面,提供了一种操作指令确定方法,应用于机顶盒,包括:
[0006]获取视频数据流中的坐标对,所述坐标对为一帧图像由同一手臂上两个关节点的本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种操作指令确定方法,其特征在于,应用于机顶盒,所述方法包括:获取视频数据流中的坐标对,所述坐标对由一帧图像中同一手臂上两个关节点的坐标形成;获取语音数据流中至少一个音频数据;根据参考手势库对所述坐标对进行评估得到所述坐标对的目标手势识别概率,所述目标手势识别概率为目标手势所对应的识别概率,所述参考手势库包括至少一个标准手势指令;根据参考语音库对各所述音频数据进行评估得到各所述音频数据的目标语音识别概率,所述目标语音识别概率为目标语音所对应的识别概率,所述参考语音库包括至少一个标准语音指令;基于目标手势识别概率和目标语音识别概率确定操作指令。2.根据权利要求1所述的方法,其特征在于,所述根据参考手势库对所述坐标对进行评估得到所述坐标对的目标手势识别概率,包括:根据参考手势库确定所述坐标对对应的最小夹角,所述最小夹角为各向量夹角中的最小值,各向量夹角为所述坐标对对应的特征向量分别与所述参考手势库中各标准手势指令对应的标准向量间的夹角;根据各所述向量夹角的平均值和所述最小夹角的最小方差,确定所述坐标对的目标手势概率,所述最小夹角的最小方差基于所述最小夹角和第一设定数量的历史最小夹角确定;基于所述目标手势概率、所述最小夹角和设定阈值,确定所述坐标对的目标手势识别概率。3.根据权利要求2所述的方法,其特征在于,所述根据参考手势库确定所述坐标对对应的最小夹角,包括:基于坐标对确定特征向量,所述特征向量的起点为第一关节点,所述特征向量的终点为第二关节点,所述第一关节点和所述第二关节点基于所确定的目标手势确定;根据特征向量和参考手势库中各标准手势指令对应的标准向量,确定特征向量与各所述标准向量的最小夹角。4.根据权利要求2所述的方法,其特征在于,所述基于所述目标手势概率、所述最小夹角和设定阈值,确定所述坐标对的目标手势识别概率,包括:若所述目标手势概率小于零且所述最小夹角大于设定阈值,则所述目标手势识别概率等于零;否则,所述目标手势识别概率等于目标手势概率。5.根据权利要求1所述的方法,其特征在于,不同的手势指令对应有不同的坐标对。6.根据权利要...

【专利技术属性】
技术研发人员:周未程明胡睿
申请(专利权)人:日晷科技上海有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1