【技术实现步骤摘要】
基于音频的手势识别方法、装置、终端设备和存储介质
本申请属于人机交互
,尤其涉及一种基于音频的手势识别方法、装置、终端设备和存储介质。
技术介绍
随着智能设备的普及,智能设备所配备的传感器也越来越多,这使得利用现有的商业设备中内嵌的传感器进行手势识别变得越来越方便。现有的基于音频的手势识别方法,通常是基于连续波的多普勒效应进行手势识别。采用这种方式虽然能克服基于视觉、可穿戴设备的惯性传感器进行手势识别所带来的使用场景受限问题,但由于采用的连续波信号的分辨率较低,导致手势识别的准确率较低。
技术实现思路
有鉴于此,本申请实施例提供了一种基于音频的手势识别方法、装置、终端设备和存储介质,通过信道估计对原始音频信号和目标音频信号进行目标手势的特征数据提取,获得精确的信道估计的特征数据,以提高手势识别结果的准确率。第一方面,本申请实施例提供了一种基于音频的手势识别方法,包括:获取目标音频信号,所述目标音频信号为预设的原始音频信号在调制后,传播经过用户做出的目标手势后接收到的音频信号; ...
【技术保护点】
1.一种基于音频的手势识别方法,其特征在于,包括:/n获取目标音频信号,所述目标音频信号为预设的原始音频信号在调制后,传播经过用户做出的目标手势后接收到的音频信号;/n基于所述原始音频信号和所述目标音频信号进行信道估计,得到信道估计的特征数据;/n对所述信道估计的特征数据进行识别,得到所述目标手势的识别结果。/n
【技术特征摘要】
1.一种基于音频的手势识别方法,其特征在于,包括:
获取目标音频信号,所述目标音频信号为预设的原始音频信号在调制后,传播经过用户做出的目标手势后接收到的音频信号;
基于所述原始音频信号和所述目标音频信号进行信道估计,得到信道估计的特征数据;
对所述信道估计的特征数据进行识别,得到所述目标手势的识别结果。
2.如权利要求1所述的手势识别方法,其特征在于,所述原始音频信号为周期信号,所述基于所述原始音频信号和所述目标音频信号进行信道估计,得到信道估计的特征数据包括:
对所述目标音频信号进行解调处理,得到目标基频信号;
对所述目标基频信号进行分段,得到多个目标信号片段,每个所述目标信号片段的长度均和所述原始音频信号的周期相同;
对于每个所述目标信号片段,均分别与所述原始音频信号中一个周期的信号片段进行信道估计,得到各自的信道特征数据;
将各个所述目标信号片段的信道特征数据整合,得到所述信道估计的特征数据。
3.如权利要求2所述的手势识别方法,其特征在于,所述对所述目标音频信号进行解调处理,得到目标基频信号包括:
对所述目标音频信号进行降载波和IQ分解,得到降载波信号的实部信号和虚部信号;
使用低通滤波器对所述降载波信号的实部信号和虚部信号去噪,得到所述目标基频信号。
4.如权利要求2所述的手势识别方法,其特征在于,每个所述目标信号片段均带有时间戳,所述将各个所述目标信号片段的信道特征数据整合,得到所述信道估计的特征数据包括:
将各个所述目标信号片段的信道特征数据分别表示为向量的形式,得到各个所述目标信号片段的特征向量;
将各个所述目标信号片段的特征向量按照各自对应的时间戳大小进行排列,构成特征矩阵;
对于所述特征矩阵中的每一列,均将各自包含的各个元素值分别减去前一列包含的各个对应元素值,得到静态消除后的所述特征矩阵;
将静态消除后的所述特征矩阵确定为所述信道估计的特征数据。
5.如权利要求1所述的手势识别方法,其特征在于,所述对所述信道估计的特征数据进行识别,得到所述目标手势的识别结果包括:
采用预先构建的域自适应神经网络模型对所述信道估计的特征数据进行识别,得到所述目标手势的识别结果;
其中,所述域自适应神经网络模型通过以下步骤构建:
获取第一训练数据集和第二训练数据集,所述第一训练数据集包含多组已分配域标签和手势标签的信道估计样本数据,所述第二训练数据集包含多组已分配域标签但未分配手势标签的信道估计样本数据;
以所述第一训练数据集和所述第二训练数据集作为训练集,训练得到所述域自适应神经网络模型。
6...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。