视频图像编码、抠图方法和装置及直播系统制造方法及图纸

技术编号:39251611 阅读:30 留言:0更新日期:2023-10-30 12:03
本申请涉及一种视频图像编码、抠图方法和装置及直播系统,所述编码方法包括:获取视频图像的原始视频帧;分别对所述原始视频帧进行预抠图获得抠图描述信息,并根据所述抠图描述信息生成抠图信息图像;在所述原始视频帧上扩展一个图像区域,并将所述抠图信息图像绘制在所述图像区域上得到传输视频帧;对所述传输视频帧进行编码和压缩得到视频流数据,并发送到直播服务器,其中,所述直播服务器依据从所述传输视频帧中提取的抠图信息图像对所述原始视频帧进行抠图;该技术方案,减少了直播服务器上进行抠图时的数据处理量,减轻直播服务器的运算压力,提升直播过程中直播服务器的抠图处理效率。处理效率。处理效率。

【技术实现步骤摘要】
视频图像编码、抠图方法和装置及直播系统
[0001]本申请要求于2022年04月14日提交中国专利局、申请号为 202210387980.X、专利技术名称为“网络直播的连麦互动方法、装置及直播系统
”ꢀ
的中国专利申请的优先权,其申请文件内容通过引用结合在本申请中。


[0002]本申请涉及视频处理
,特别是一种视频图像编码方法和装置, 视频图像抠图方法和装置,以及直播系统。

技术介绍

[0003]目前,在视频直播场景中,经常都是需要对视频图像进行抠图,如绿幕 抠图,常用技术手段是通过AI算法对目标图像(如人像图像)进行识别,然 后通过抠图将目标图像从原图像上抠出,并进行各种途径的使用,例如,图 像合成、直播互动等等。
[0004]一般情况下,当视频图像数据从客户端采集传输到直播服务器端时,如 果是使用到抠图场景,一般方法是在客户端进行抠图处理得到抠图图像,然 后对图像数据进行编码传输到直播服务器进行解码后使用,该方案中,由于 在客户端就已经进行了抠图处理,因此在直播服务器无法对原始图像的其他 部分再进行其他本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频图像编码方法,其特征在于,包括:获取视频图像的原始视频帧;分别对所述原始视频帧进行预抠图获得抠图描述信息,并根据所述抠图描述信息生成抠图信息图像;在所述原始视频帧上扩展一个图像区域,并将所述抠图信息图像绘制在所述图像区域上得到传输视频帧;对所述传输视频帧进行编码和压缩得到视频流数据,并发送到直播服务器,其中,所述直播服务器依据从所述传输视频帧中提取的抠图信息图像对所述原始视频帧进行抠图。2.根据权利要求1所述的视频图像编码方法,其特征在于,所述分别对所述原始视频帧进行预抠图获得抠图描述信息,并根据所述抠图描述信息生成抠图信息图像,包括:分别对所述原始视频帧的人像进行AI识别得到人像区域;根据所述人像区域进行预抠图得到人像图像和背景图像;根据所述人像图像和背景图像生成透明通道图像,得到抠图信息图像。3.根据权利要求2所述的视频图像编码方法,其特征在于,所述在所述原始视频帧上扩展一个图像区域,并将所述抠图信息图像绘制在所述图像区域上得到传输视频帧,包括:在所述原始视频帧横向上扩展一个与所述原始视频帧大小一致的图像区域;将所述抠图信息图像绘制在所述图像区域上,合成所述原始视频帧和所述抠图信息图像得到传输视频帧。4.根据权利要求3所述的视频图像编码方法,其特征在于,所述对所述传输视频帧进行编码和压缩得到视频流数据,包括:基于YUV格式分别对所述原始视频帧和抠图信息图像的各个像素颜色值进行编码得到颜色编码数据;分别在所述原始视频帧和抠图信息图像的颜色编码数据中添加标记信息,得到原始视频帧对应的第一颜色编码数据组和所述抠图信息图像对应的第二颜色编码数据组;将所述第一颜色编码数据组和第二颜色编码数据组进行合成存储得到所述传输视频帧的YUV编码数据;对所述YUV编码数据进行压缩得到视频流数据。5.根据权利要求4所述的视频图像编码方法,其特征在于,所述将所述第一颜色编码数据组和第二颜色编码数据组进行合成存储得到所述传输视频帧的视频流数据,包括:创建一个宽度为2w、高度为h的YUV区域;其中,w为YUV图像的宽度值,h为YUV图像的高度值;在左侧w宽度放置原始视频帧的Y分量行数据以及在右侧w宽度放置抠图信息图像的Y分量行数据;依次在U、V分量的左侧w宽度上填充原始视频帧的行数据上;将YUV区域上的数据进行合并存储得到所述传输视频帧的视频流数据。6.一种视频图像编码装置,其特征在于,包括:视频帧获取模块,用于获取视频图像的原始视频帧;预抠图处理模块,用于分别对所述原始视频帧进行预抠图获得抠图描述信息,并根据所述抠图描述信息生成抠图信息图像;
图像合成模块,用于在所述原始视频帧上扩展一个图像区域,并将所述抠图信息图像绘制在所述图像区域上得到传输视频帧;图像编码模块,用于对所述传输视频帧进行编码得到视频流数据,并发送到直播服务器,其中,所述直播服务器依据从所述传输视频帧中提取的抠图信息图像对所述原始视频帧进行抠图。7.一种视频图像抠图方法,其特征在于,包括:接收多个客户端发送的视频流数据;其中,所述视频流数据依据权利要求1

【专利技术属性】
技术研发人员:闫理赵国庆李劲方周
申请(专利权)人:广州方硅信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1