一种手势动作分割方法、装置、设备和存储介质制造方法及图纸

技术编号:41871736 阅读:17 留言:0更新日期:2024-07-02 00:22
本发明专利技术实施例公开了一种手势动作分割方法、装置、设备和存储介质。该方法包括:获取用户手势视频;将用户手势视频逐帧添加到视频窗口中,获得视频窗口中的当前视频帧序列;基于目标时空卷积网络模型和当前视频帧序列,确定当前视频帧序列属于同一手势动作的当前置信度,其中,目标时空卷积网络模型是利用不同尺寸的三维卷积核对当前视频帧序列进行时空特征提取的;基于当前视频帧序列对应的当前置信度,确定用户手势视频中属于同一手势动作的目标视频帧序列。通过本发明专利技术实施例的技术方案,可以提高手势动作分割的准确性。

【技术实现步骤摘要】

本专利技术实施例涉及计算机技术,尤其涉及一种手势动作分割方法、装置、设备和存储介质


技术介绍

1、随着计算机技术的快速发展,需要对用户动态变化的手势进行识别。手势识别的最重要前置任务是手势动作分割,其目的是从动态手势视频中分割出属于同一手势动作的视频帧序列。

2、目前,通常是通过提取两个手势动作之间的手势过渡帧的方式实现手势动作分割。然而,在实现本专利技术过程中,专利技术人发现现有技术中至少存在如下问题:

3、由于手势过渡帧的噪声太大,从而会导致手势动作分割错误的情况,降低了手势动作分割的准确性。


技术实现思路

1、本专利技术实施例提供了一种手势动作分割方法、装置、设备和存储介质,以提高手势动作分割的准确性。

2、第一方面,本专利技术实施例提供了一种手势动作分割方法,包括:

3、获取用户手势视频;

4、将所述用户手势视频逐帧添加到视频窗口中,获得视频窗口中的当前视频帧序列;

5、基于目标时空卷积网络模型和当前视频帧序列,确定当前视频帧序本文档来自技高网...

【技术保护点】

1.一种手势动作分割方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述基于目标时空卷积网络模型和当前视频帧序列,确定当前视频帧序列属于同一手势动作的当前置信度,包括:

3.根据权利要求2所述的方法,其特征在于,所述基于当前视频帧序列对应的序列帧数和所述视频窗口对应的预设窗口帧数,确定目标视频帧序列,包括:

4.根据权利要求2所述的方法,其特征在于,所述目标时空卷积网络模型包括:第一特征提取子模型、第二特征提取子模型和融合子模型,其中,所述第一特征提取子模型和所述第二特征提取子模型中的三维卷积核尺寸不同;

5.根据权利要...

【技术特征摘要】

1.一种手势动作分割方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述基于目标时空卷积网络模型和当前视频帧序列,确定当前视频帧序列属于同一手势动作的当前置信度,包括:

3.根据权利要求2所述的方法,其特征在于,所述基于当前视频帧序列对应的序列帧数和所述视频窗口对应的预设窗口帧数,确定目标视频帧序列,包括:

4.根据权利要求2所述的方法,其特征在于,所述目标时空卷积网络模型包括:第一特征提取子模型、第二特征提取子模型和融合子模型,其中,所述第一特征提取子模型和所述第二特征提取子模型中的三维卷积核尺寸不同;

5.根据权利要求4所述的方法,其特征在于,所述第一特征提取子模型包括:第一三维卷积层和第一时序处理层;

6.根据权利要求4所述的方法,其特征在于,所述融合子模型包括:第一全连接层、第二全连接层和结果融合层;

7.根据权利要求1-6任一项...

【专利技术属性】
技术研发人员:陈云杰
申请(专利权)人:北京沃东天骏信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1