一种模型训练、信息确定方法、装置、设备及计算机可读存储介质制造方法及图纸

技术编号:43533563 阅读:18 留言:0更新日期:2024-12-03 12:17
本申请实施例公开了一种模型训练方法,该方法包括:获取针对样本对象的操作行为的样本视频数据;基于所述样本视频数据中的样本音频片段对初始音频特征提取模型进行模型训练,得到目标音频特征提取模型;基于所述样本视频数据中的样本视频片段对初始视频特征提取模型进行模型训练,得到目标视频特征提取模型;其中,所述样本音频片段和所述样本视频片段具有对应关系;基于多类样本待融合视频特征对初始特征融合模型进行模型训练,得到目标特征融合模型;其中,所述多类样本待融合视频特征是基于所述目标视频特征提取模型对所述样本视频片段进行特征提取得到的。本申请实施例还公开了一种信息确定方法、装置、设备及计算机可读存储介质。

【技术实现步骤摘要】

本申请涉及视频分类,尤其涉及一种模型训练、信息确定方法、装置、设备及计算机可读存储介质


技术介绍

1、包裹在京东的物流园区中扮演着至关重要的角色,在作业过程(如分拣、装卸货)中的人为暴力操作会造成包裹破损,且每年由此产生的赔付成本十分高昂,因此自动准确地检测出暴力操作是物流园区亟待解决的重要任务;目前,相关技术中仅使用三维深度神经网络对整个视频特征进行分类并基于三维深度神经网络输出的置信度来确定视频中发生了暴力分拣;然而,在实现的过程中,专利技术人发现现有技术中至少存在如下问题:仅采用整个视频特征这一参数来确定视频中是否发生了暴力分拣行为的识别准确率不高。


技术实现思路

1、为解决上述技术问题,本申请实施例期望提供一种模型训练、信息确定方法、装置、设备及计算机可读存储介质,可以解决相关技术中的确定视频中是否发生了暴力分拣行为的识别准确率不高的问题。

2、本申请的技术方案是这样实现的:

3、一种模型训练方法,所述方法包括:

4、获取针对样本对象的操作行为的样本视频数据;...

【技术保护点】

1.一种模型训练方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述基于所述样本视频数据中的样本音频片段对初始音频特征提取模型进行模型训练,得到目标音频特征提取模型,包括:

3.根据权利要求1所述的方法,其特征在于,基于多类样本待融合视频特征对初始特征融合模型进行模型训练,得到目标特征融合模型,包括:

4.一种信息确定方法,其特征在于,所述方法包括:

5.根据权利要求4所述的方法,其特征在于,所述采用所述目标视频特征提取模型对所述目标视频数据中的目标视频片段进行特征提取,得到多类目标待融合视频特征,包括:

...

【技术特征摘要】

1.一种模型训练方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述基于所述样本视频数据中的样本音频片段对初始音频特征提取模型进行模型训练,得到目标音频特征提取模型,包括:

3.根据权利要求1所述的方法,其特征在于,基于多类样本待融合视频特征对初始特征融合模型进行模型训练,得到目标特征融合模型,包括:

4.一种信息确定方法,其特征在于,所述方法包括:

5.根据权利要求4所述的方法,其特征在于,所述采用所述目标视频特征提取模型对所述目标视频数据中的目标视频片段进行特征提取,得到多类目标待融合视频特征,包括:

6.根据权利要求4所述的方法,其特征在于,所述采用目标特征融合模型对所述多类目标待融合视频特征进行特征融合,得到目标视频特征,包括:

7.根据权利要求6所述的方法,其特征在于,采用所述目标特征融合模型对所述第一类...

【专利技术属性】
技术研发人员:刘鲲
申请(专利权)人:北京京东远升科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1