【技术实现步骤摘要】
一种智能音箱控制智能电视的手势交互方法及系统
[0001]本专利技术涉及手势识别
，具体涉及一种智能音箱控制智能电视的手势交互方法及系统。
技术介绍
[0002]近年来，物联网和5G通信技术的跨越式发展加速了智能家居时代的到来。智能家居系统涉及许多分布式设备，对应丰富的控制场景，它将所有家电设备联系在一起，统一远程控制，以减少人们的操作负担，促进家居生活品质的提升。智能音箱是集成智能家居控制系统的重要中枢，需要用户借助智能音箱跨设备间接控制其他家电产品，这意味着与传统家居场景的直接控制相比，这样的交互方式并不符合以往的使用经验，带来的体验也不直观自然。在这样的背景下，如何定义自然的跨智能音箱人机交互方式成为重要的问题。
[0003]当前，智能音箱逐渐发展到支持触屏、语音和手势交互的多通道交互阶段，但其中关于智能音箱的手势交互研究却较少在学术和商业领域涉及。手势源于人际交往中的日常操作行为，对人们来说最为直观，然而被应用于人机交互中却并不如人际交往中那样自然。手势的成功应用取决于自然手势的定义和识别。在手势定义方...
【技术保护点】
【技术特征摘要】
1.一种智能音箱控制智能电视的手势交互方法，其特征在于，包括以下步骤：通过智能音箱上的摄像头采集使用者手部的待测图像序列；对所述待测图像序列进行手势识别，获取手势识别结果；在预设手势表中选择与所述手势识别结果相对应的手势指令；将所述手势指令发送至智能电视接收端。2.根据权利要求1所述的一种智能音箱控制智能电视的手势交互方法，其特征在于，对所述待测图像序列进行手势识别的过程包括：对待测图像序列进行手势分割、手势跟踪和手势识别。3.根据权利要求2所述的一种智能音箱控制智能电视的手势交互方法，其特征在于，所述手势跟踪过程包括：在检测到手部轮廓之后进行特征选取，选取手势区别于背景的最优特征，并将所述最优特征构成图像特征空间；利用加权增量主成分分析方法对所述图像特征空间进行加权，将图像特征空间映射到特征子空间；利用粒子滤波对多个粒子框进行子空间匹配计算，选取最优粒子框；最优粒子框的中心即为下一帧的跟踪点。4.根据权利要求2所述的一种智能音箱控制智能电视的手势交互方法，其特征在于，在手势跟踪之后的手势识别过程包括获取手部轮廓的凸包与凹陷，根据凸包检测结果识别指尖和手掌位置，根据指尖位置识别手势类型。5.根据权利要求4所述的一种智能音箱控制智能电视的手势交互方法，其特征在于，根据凸包检测结果识别指尖和手掌位置的具体过程包括：遍历获取的所有凹陷，按照下述规则确定所有由两根手指形成的凹陷：凹陷深度大于手势轮廓外接矩形的长的五分之一，并且凹陷与相邻两个凸包连线形成的夹角小于90
°
，则该凹陷确定为由两根手指形成的凹陷；除第一根手指和最后一根手指以外，位于中间手指的指尖包含一个凹陷的起始点和另一个凹陷的结束点，并且两个凹陷顺序相邻，与满足以上条件的两个凹陷相连接的凸包确定为指尖；以满足上述条件的第一个凹陷的起始点和最后一个凹陷的结束点作为第一个指尖和最后一个指尖的图像坐标位置；以前一个凹陷的结束点和后一个凹陷的起始点连线的中点坐标作为中间指尖的图像坐标位置；以满足上述条件的凹陷的最远点为指尖凹槽位置点，以所述指尖凹槽位置点的平均位置作为手掌中心图像坐标位置。6.根据权利要求1或2所述的一种智能音箱控制智能电视的手势交互方法，其特征在于，预先设置如下映射列表来作为所述预设手势表：该映射列表中的每个映射的左端是一个手势识别结果，每个映射的右端是一个手势指令；其中，手势识别结果及对应的手势指令包括：手势识别结果为：张开手掌超过预设时间阈值，其对应的手势指令为：打开智能音箱；手势识别结果为：双手向两侧分开，其对应的手势指令为：打开智能电视；手势识别结果为：掌心朝前并向右移动，其对应的手势指令为：浏览节目单；手势识别结果为：掌心朝前并向前移动，其对应的手势指令为：选择播放某个节目；
手势识别结果为：双手向两侧分开，其对应的手势指令为：设为全屏模式；手势识别结果为：掌心朝上并向上移动，其对应的手势指令为：调高节目音量；手势识别结果为：掌心朝下并向下移动，其对应的手势指令为：调低节目音量；手势识别结果为：掌心朝前并向前移动，其对应的手势指令为：继续/暂停播放；手势识别结果为：双手朝前并向右移动，其对应的手势指令为：播放上一集；手势识别结果为：掌心朝前且向身体右前侧按压，其对应的手势指令为：播放下一集；手势识别结果为：拇指食指比心，其对应的手势指令为：收藏节目；手势识别结果为：掌心朝左...
【专利技术属性】
技术研发人员：成沛瑶，刘笑，贺艳明，
申请(专利权)人：哈尔滨工业大学深圳哈尔滨工业大学深圳科技创新研究院，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。