表情符号预测方法、装置、设备及存储介质制造方法及图纸

本申请实施例提供了一种表情符号预测方法、装置、设备及存储介质，涉及人工智能技术领域，该方法包括：获取目标图像和目标文本信息，目标图像为具有标注信息的图像，标注信息包括目标文本信息和表情符号，根据目标图像、目标文本信息和预先训练的表情符号预测模型，确定标注信息的至少一个预测表情符号，表情符号预测模型根据多个训练样本训练得到，每个训练样本包括样本图像和样本图像的标注信息，样本图像的标注信息包括文本标注信息和标注表情符号，显示标注信息的至少一个预测表情符号。从而，可预测图像的标注信息中包含的表情符号，保证对图像的标注信息转录的完整性。保证对图像的标注信息转录的完整性。保证对图像的标注信息转录的完整性。

【技术实现步骤摘要】
表情符号预测方法、装置、设备及存储介质


[0001]本申请实施例涉及人工智能
，尤其涉及一种表情符号预测方法、装置、设备及存储介质。

技术介绍

[0002]网络改变的不仅仅是人类信息传播的速度和质量，还极大地丰富了人类表情传意的方式，形成了独特的网络语言，其中又以大量的非言语的表情符号(Emoji)为其特征。表情符号用来生动呈现和描摹日常面对面交际中的非言语信息，使双方如闻其声，如见其人。随着多媒体内容的逐渐丰富，社交媒体等场景的视频或图像中出现越来越多的表情符号，其可以进行更丰富的表意，不同的表情符号会影响语义和语境的表达。
[0003]目前，支持用户对图像进行编辑，例如对图像进行标注，添加的标注信息可以包括文本信息和表情符号。对于标注信息包括文本信息和表情符号的图像，在对该类图像进行标注信息转录时，由于表情符号丰富多样且版本较多，难以通过键盘输入法输出对应的表情符号，相关技术中仅对图像中的文本信息转录，忽略表情符号，转录的信息不完整。

技术实现思路

[0004]本申请实施例提供一种表情符号预测方法、装置、设备及本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种表情符号预测方法，其特征在于，包括：获取目标图像和目标文本信息，所述目标图像为具有标注信息的图像，所述标注信息包括所述目标文本信息和表情符号；根据所述目标图像、所述目标文本信息和预先训练的表情符号预测模型，确定所述标注信息的至少一个预测表情符号，其中，所述表情符号预测模型根据多个训练样本训练得到，每个所述训练样本包括样本图像和所述样本图像的标注信息，所述样本图像的标注信息包括文本标注信息和标注表情符号；显示所述标注信息的至少一个预测表情符号。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：响应于用户从所述标注信息的至少一个预测表情符号中选择目标表情符号的操作，将所述目标文本信息和所述目标表情符号按照所述标注信息的分布顺序合并，得到目标标注信息；显示所述目标标注信息。3.根据权利要求1所述的方法，其特征在于，所述获取目标图像和目标文本信息，包括：接收输入的所述目标图像和目标文本信息。4.根据权利要求1所述的方法，其特征在于，所述根据所述目标图像、所述目标文本信息和预先训练的表情符号预测模型，确定所述标注信息的至少一个预测表情符号，包括：将所述目标图像和所述目标文本信息组成prompt范式输入所述表情符号预测模型，输出所述标注信息的至少一个预测表情符号，所述prompt范式结构中待填充的内容为待预测的表情符号。5.根据权利要求3所述的方法，其特征在于，所述表情符号预测模型包括图像特征提取模型和文本特征提取模型，所述将所述目标图像和所述目标文本信息组成prompt范式输入所述表情符号预测模型，输出所述标注信息的至少一个预测表情符号，包括：将所述目标图像输入所述图像特征提取模型，输出所述目标图像的特征向量；依次将所述目标文本信息和表情库中的每一表情符号按照所述prompt范式结构合并得到候选信息；依次将每一所述候选信息输入所述文本特征提取模型，输出所述候选信息的特征向量；分别计算所述目标图像的特征向量和所述候选信息的特征向量之间的余弦相似度，按照所述余弦相似度从大到小的顺序，选取前K个余弦相似度对应的候选信息，将所述K个候选信息中的表情符号作为所述标注信息的至少一个预测表情符号输出，所述K为正整...

【专利技术属性】
技术研发人员：游京翰，郭明宇，冉蛟，
申请(专利权)人：北京字跳网络技术有限公司，
类型：发明
国别省市：