图像编辑方法、装置、设备及可读存储介质制造方法及图纸

技术编号:40079025 阅读:20 留言:0更新日期:2024-01-17 02:11
本申请公开了一种图像编辑方法、装置、设备及可读存储介质,获取待编辑的图像和文本指令之后,先基于图像和文本指令,确定用于指示图像中的待编辑对象和文本指令的图像编辑表征,以及,用于指示待编辑对象中的待编辑区域的待编辑区域图;再基于图像编辑表征以及待编辑区域图对待编辑的图像的待编辑对象中的待编辑区域进行编辑,得到编辑后的图像。基于本方案,能够实现只对待编辑的图像中的局部进行编辑。

【技术实现步骤摘要】

本申请涉及图像处理,更具体的说,是涉及一种图像编辑方法、装置、设备及可读存储介质


技术介绍

1、目前,随着人工智能技术的不断发展,图像编辑在图像补全、内容删除、照片修复等场景得到广泛应用,具有编辑效率高、自动化程度高等优点。基于文本指令的图像编辑应该是一种根据指令对待编辑图像的局部进行编辑,生成与文本指令对应的目标图像的技术,例如,待编辑图像是一个人脸图像,文本指令可以是“加个口罩”,生成的目标图像应该是在待编辑图像中的人脸图像上添加一个口罩。

2、但是,现有的图像编辑方法,无法保证只对待编辑图像的局部进行编辑,而是对待编辑图像的整体进行编辑,生成的目标图像与待编辑图像的相差较大,无法满足用户需求。例如,待编辑图像是一个人脸图像,文本指令可以是“加个口罩”,采用现有的图像编辑方法,会生成一个新的戴口罩的人脸图像。

3、因此,如何提供一种图像编辑方法,以实现只对待编辑图像的局部进行编辑,成为本领域技术人员亟待解决的技术问题。


技术实现思路

1、鉴于上述问题,本申请提出了一种图像编辑方法本文档来自技高网...

【技术保护点】

1.一种图像编辑方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述基于所述图像和所述文本指令,确定用于指示所述图像中的待编辑对象和所述文本指令的图像编辑表征,以及,用于指示所述待编辑对象中的待编辑区域的待编辑区域图,包括:

3.根据权利要求2所述的方法,其特征在于,所述从所述图像中提取与所述图像中的待编辑对象相关的视觉特征,包括:

4.根据权利要求3所述的方法,其特征在于,所述特征提取模型为Q-Former类型的模型。

5.根据权利要求2所述的方法,其特征在于,所述基于所述用于指示所述待编辑对象中的待编辑区域的...

【技术特征摘要】

1.一种图像编辑方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述基于所述图像和所述文本指令,确定用于指示所述图像中的待编辑对象和所述文本指令的图像编辑表征,以及,用于指示所述待编辑对象中的待编辑区域的待编辑区域图,包括:

3.根据权利要求2所述的方法,其特征在于,所述从所述图像中提取与所述图像中的待编辑对象相关的视觉特征,包括:

4.根据权利要求3所述的方法,其特征在于,所述特征提取模型为q-former类型的模型。

5.根据权利要求2所述的方法,其特征在于,所述基于所述用于指示所述待编辑对象中的待编辑区域的表征,生成所述用于指示所述待编辑对象中的待...

【专利技术属性】
技术研发人员:杨硕赖泽强尚嘉慧何山周良殷兵高建清刘聪
申请(专利权)人:科大讯飞股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1