一种智能化图片配文方法及系统技术方案

本申请的实施例提供了一种智能化图片配文方法和系统。所述方法包括通过接收用户端发送的图片配文请求，图片配文请求携带待配文的目标图片；通过预设的正面标签词组模型生成目标图片的目标正面标签词组；基于目标正面标签词组生成目标图片的多个匹配文本；根据多个匹配文本确定最终智能化图片配文结果；向用户端发送图片配文请求响应，所述图片配文请求响应携带所述最终智能化图片配文结果。正面标签词组模型通过采用双向自注意力掩码策略、单模态自注意力掩码策略和因果自注意力掩码策略，联合训练图文匹配、图文对比和图文生成任务，每一次输入图像生成的正面标签词组都具有一定的差异化，有利于增加图片配文内容的丰富性和多样性。

【技术实现步骤摘要】

本申请的实施例涉及图像处理，尤其涉及智能化图片配文方法及系统。

技术介绍

1、在运营推广场景中，经常会对宣传推广、分享、广告海报等图片进行配文，以提高运营推广的效果。尤其对于一个每日更新文章篇数上万级的资讯类网站而言，运营人员每天会发布大量的图文资讯。因此，如何准确且高效地为这些用于推广的图片匹配文字，对于企业运营推广至关重要。

2、现有技术中，通过预设配文关系库，配文关系库存储有大量与待配文图片相对应的特征信息及关联的文字配文；通过获取待配文图片的特征信息，比对配文关系库提取与待配文图片特征信息相关联的文字配文反馈给用户，从而实现对图片匹配适当文字内容的目的。根据照片内容自动给照片配上优雅的文字衬托照片的意境，让人们的社交网络分享照片或保存照片时，让照片看上去更耐人寻味，使照片更显精致、特别，则更能增加大家分享、保存照片的乐趣。其中，通过获取大量影视作品和其对应的字幕文件，对影片抽取多个关键帧，对应每个关键帧图像根据播放时间从字幕文件中获取对应图像所配的字幕文字，将每个关键帧图像比对预设的图像识别模型获取场景、主体及主体特征信息，并将每个关键本文档来自技高网...

【技术保护点】

1.一种智能化图片配文方法，其特征在于，包括：

2.根据权利要求1所述方法，其特征在于，采用双向自注意力掩码策略训练所述正面标签词组模型的图文匹配任务，包括：

3.根据权利要求1所述的方法，其特征在于，采用单模态自注意力掩码策略训练所述正面标签词组模型的图文对比任务，包括：

4.根据权利要求1所述方法，其特征在于，采用因果自注意力掩码策略训练所述正面标签词组模型的图文生成任务，包括：

5.根据权利要求1所述方法，其特征在于，基于所述目标正面标签词组生成所述目标图片的多个匹配文本，包括：

6.根据权利要求5所述方法，其特征在于，所...

【技术特征摘要】

1.一种智能化图片配文方法，其特征在于，包括：

2.根据权利要求1所述方法，其特征在于，采用双向自注意力掩码策略训练所述正面标签词组模型的图文匹配任务，包括：

3.根据权利要求1所述的方法，其特征在于，采用单模态自注意力掩码策略训练所述正面标签词组模型的图文对比任务，包括：

4.根据权利要求1所述方法，其特征在于，采用因果自注意力掩码策略训练所述正面标签词组模型的图文生成任务，包括：

5.根据权利要求1所述方法，其特征在于，...

【专利技术属性】
技术研发人员：杨良志，白琳，汪志新，李海涛，张润璞，李自然，周学友，
申请(专利权)人：彩讯科技股份有限公司，
类型：发明
国别省市：