人体图像分割方法、装置、计算机设备及可读存储介质制造方法及图纸

技术编号:41130653 阅读:16 留言:0更新日期:2024-04-30 18:00
本申请公开了一种人体图像分割方法、装置、计算机设备及可读存储介质,涉及图像处理技术领域,利用一个模型同时预测人体关键点和人体遮罩图像,借助任务的联系提升预测效果和精度,同时降低开销,节约算力。所述方法包括:获取样本视频,利用样本视频标注人体关键点、人体遮罩图像序列,训练图像分割模型;响应于图像分割请求,确定待处理视频,采集待处理视频在当前时刻的视频图像帧;计算视频图像帧的背景遮罩和背景图像,将视频图像帧、背景遮罩和背景图像在通道维度进行拼接,得到图像拼接结果;将图像拼接结果输入至图像分割模型进行分割处理,得到视频图像帧的当前帧人体遮罩图像和当前帧人体关键点信息并作为分割得到的人体图像信息输出。

【技术实现步骤摘要】

本申请涉及图像处理,特别是涉及一种人体图像分割方法、装置、计算机设备及可读存储介质


技术介绍

1、近年来,图像处理技术飞速发展,视频会议、视频游戏等基于摄像头的应用普及程度越来越高。在这些应用场景下,用户一般处于室内等短时变化不大的环境中,使得在使用此类应用的时候,有些用户出于隐私保护或者希望展现更符合个人兴趣的场景的考虑,会存在将环境背景进行替换的需求,甚至希望只是将用户的肢体动作迁移到某一个虚拟场景内的虚拟人物身上。因此,很多应用中与视频相关的功能会从视频图像中自动识别并定位出人体的各个关键部位,将视频图像中的人体图像分割出来,再将原始背景剔除,替换为用户选择的固定样式、固定颜色或者有特殊效果的背景,满足用户的需求。

2、相关技术中,为了实现人体图像的分割,需要事先建立两个模型,分别为人体关键点定位模型和人像分割模型。其中,人体关键点定位模型是基于关键点定位算法训练得到的,关键点定位算法在输入维度上主要分为单帧输入、固定多帧输入和全序列输入三种,在输出维度上又分为二维关键点和三维关键点两种;而人像分割模型是基于人像分割算法训练得到的。...

【技术保护点】

1.一种人体图像分割方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述获取样本视频,利用所述样本视频中每个样本视频图像帧上标注人体关键点、所述样本视频对应的人体遮罩图像序列,训练图像分割模型,包括:

3.根据权利要求2所述的方法,其特征在于,所述对所述样本视频图像序列包括的每个样本视频图像帧进行标注处理,向所述每个样本视频图像帧标注人体关键点,以及得到所述人体遮罩图像序列,包括:

4.根据权利要求2所述的方法,其特征在于,所述利用所述人体遮罩图像序列,计算所述样本视频的样本背景遮罩和样本背景图像,包括:

5.根据权利要...

【技术特征摘要】

1.一种人体图像分割方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述获取样本视频,利用所述样本视频中每个样本视频图像帧上标注人体关键点、所述样本视频对应的人体遮罩图像序列,训练图像分割模型,包括:

3.根据权利要求2所述的方法,其特征在于,所述对所述样本视频图像序列包括的每个样本视频图像帧进行标注处理,向所述每个样本视频图像帧标注人体关键点,以及得到所述人体遮罩图像序列,包括:

4.根据权利要求2所述的方法,其特征在于,所述利用所述人体遮罩图像序列,计算所述样本视频的样本背景遮罩和样本背景图像,包括:

5.根据权利要求4所述的方法...

【专利技术属性】
技术研发人员:郭金马余浩鲁文斌
申请(专利权)人:洪恩完美北京教育科技发展有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1