数据处理方法、装置、设备、介质及计算机程序产品制造方法及图纸

技术编号:32970205 阅读:22 留言:0更新日期:2022-04-09 11:34
本公开关于一种数据处理方法、数据处理装置、电子设设、计算机可读存储介质及计算机程序产品,涉及深度学习技术领域,上述方法包括:提取到视频中的图像特征和文本特征,并融合图像特征和文本特征,进而基于融合结果计算视频与预设对象之间的第一损失函数和第二损失函数,根据上述函数可以学习到视频与预设对象之间的特征映射关系。实施上述方法可以基于视频中的图像特征和文本特征,更准确的提取到视频(如,直播带货视频)与商品之间的特征关系,现有技术一般只保存视频与商品之间的对应关系,并不涉及对于特征关系的确定,本公开相较于现有技术而言,可以确定出更为丰富的视频与商品之间的关系描述,提升视频与商品之间的关联度。度。度。

【技术实现步骤摘要】
数据处理方法、装置、设备、介质及计算机程序产品


[0001]本公开涉及深度学习
,尤其涉及一种数据处理方法、装置、设备、介质及计算机程序产品。

技术介绍

[0002]随着视频技术的发展,衍生出了视频带货的新兴带货方式。以视频直播为例,主播可以在直播间中展示各种对象,以实现与用户的分享。所展示的对象是与提前与视频直播帮预先绑定好的商品,基于商品与视频的预先绑定关系,用户在观看同一个视频时,只会接收到与该视频绑定的商品链接。可见,用于关联商品与视频的绑定关系,作为商品与视频之间的关系描述,较为单一。

技术实现思路

[0003]本公开提供一种数据处理方法、数据处理装置、电子设备、计算机可读存储介质及计算机程序产品,以至少解决相关技术中商品与视频之间的关系描述较为单一的问题。本公开的技术方案如下:
[0004]根据本公开实施例的第一方面,提供一种数据处理方法,包括:
[0005]提取样本视频对应的图像特征和文本特征,并对图像特征和文本特征进行融合,得到视频特征;
[0006]根据视频特征和预设对象的对象特征本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法,其特征在于,包括:提取样本视频对应的图像特征和文本特征,并对所述图像特征和所述文本特征进行融合,得到视频特征;根据所述视频特征和预设对象的对象特征计算第一损失函数;根据所述视频特征确定所述样本视频的分类指标数据,并根据所述分类指标数据和所述预设对象的预设分类指标数据计算第二损失函数;其中,所述分类指标数据用于表征所述样本视频归属于各预设类别的概率;根据所述第一损失函数和所述第二损失函数训练映射关系生成模型,并根据训练后的映射关系生成模型确定所述预设对象和所述样本视频之间的特征映射关系。2.根据权利要求1所述的数据处理方法,其特征在于,所述提取样本视频对应的图像特征步骤,包括:根据单位时长对所述样本视频进行抽帧,得到所述样本视频的各单位时长内的图像集合;提取各图像集合中每个图像的图像特征,得到所述各单位时长对应的图像特征集合。3.根据权利要求2所述的数据处理方法,其特征在于,所述提取样本视频对应的文本特征步骤,包括:获取所述各单位时长内的音频,并将所述各单位时长内的音频转换为文本;提取各文本的文本特征,得到所述各单位时长对应的文本特征。4.根据权利要求3所述的数据处理方法,其特征在于,所述对所述图像特征和所述文本特征进行融合,得到视频特征步骤,包括:将所述各图像特征集合内的图像特征进行拼接,得到所述各单位时长对应的拼接结果;将所述各单位时长内的拼接结果和文本特征进行融合,得到所述各单位时长对应的参考特征;融合所述各单位时长对应的参考特征,得到视频特征。5.根据权利要求1所述的数据处理方法,其特征在于,根据所述第一损失函数和所述第二损失函数训练映射关系生成模型,并根据训练后的映射关系生成模型确定所述预设对象和所述样本视频之间的特征映射关系步骤之后,所述方法还包括:获取用户浏览数据,并提取所述用户浏览数据的浏览特征;其中,所述用户...

【专利技术属性】
技术研发人员:林和政吴翔宇
申请(专利权)人:北京达佳互联信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1