【技术实现步骤摘要】
本申请实施例涉及视频处理，尤其涉及一种视频处理方法及装置。
技术介绍
1、传统的视频通信一般是由发送端将视频帧压缩后发送至接收端，接收端进行解压缩后恢复出视频内容。虽然压缩后的视频帧能够减少一定的数据量，但是对每个视频帧进行压缩再传输，仍然存在大量的冗余数据，传输性能不高。
技术实现思路
1、有鉴于此，本申请实施例的目的在于提出一种视频处理方法及装置，以解决视频传输性能不高的问题。
2、基于上述目的，本申请实施例提供了一种视频处理方法，应用于发送端，方法包括：
3、从视频帧中提取目标对象图像；
4、根据连续的视频帧的目标对象图像之间的空间相关性和时间相关性，提取包括空间相关特征和时间相关特征的语境信息；
5、基于所述目标对象图像和所述语境信息进行压缩处理，得到压缩后的目标对象图像。
6、可选的，所述的方法还包括：
7、从视频帧中提取背景图像；
8、计算所述背景图像的绝对偏差平均数指标；
9、根据所述背景图像的绝对偏差平均数指标与预设的偏差阈值之间的关系，确定背景图像的语义模式；
10、根据所述背景图像的语义模式，确定背景图像的传输模式。
11、可选的，所述从视频帧中提取目标对象图像，包括：
12、从所述视频帧中提取包括目标对象的前景图像和用于分割所述前景图像和背景图像的分割图像；
13、根据所述前景图像、分割图像和预设的空白图像，生成所述目
14、可选的，根据所述前景图像、分割图像和预设的空白图像，生成所述目标对象图像，方法为：
15、x＝fgr+(1-pha)⊙bgr (6)
16、其中，fgr为前景图像对应的向量，pha为分割图像对应的向量，bgr为预设的空白图像对应的向量，x为目标对象图像对应的向量。
17、可选的，根据连续的视频帧的目标对象图像之间的空间相关性和时间相关性，提取包括空间相关特征和时间相关特征的语境信息，包括：
18、根据上一视频帧的目标对象图像与当前视频帧的目标对象图像，确定当前视频帧中目标对象的动作向量；
19、提取上一视频帧的关键特征点；
20、根据所述关键特征点和所述动作向量，确定初始语境信息；
21、对所述初始语境信息进行精炼处理，得到所述语境信息。
22、可选的，对所述初始语境信息进行精炼处理，得到所述语境信息，方法为：
23、z＝frefine(fpredict(fextract(xt-1),m))) (7)
24、其中，m为当前视频帧中目标对象的动作向量，xt-1为上一视频帧，fextract(xt-1)为提取上一视频帧的关键特征点的提取函数；fpredict()为对于语境信息的初步预测函数，用于生成初始语境信息；frefine()为精炼初始语境信息，消除空间不连贯性的函数；z为语境信息。
25、可选的，基于所述目标对象图像和所述语境信息进行压缩处理，得到压缩后的目标对象图像，包括：
26、将所述目标对象图像和所述语境信息输入预设的语境压缩编码器进行压缩处理，由所述语境压缩编码器输出压缩后的目标对象图像。
27、本申请实施例还提供一种视频处理方法，应用于接收端，方法包括：
28、接收压缩后的背景图像和压缩后的目标对象图像；
29、对所述压缩后的背景图像进行解压缩处理，得到解压后的背景图像；
30、对所述压缩后的目标对象图像进行解压缩处理，得到解压后的目标对象图像；
31、基于所述解压后的目标对象图像和解压后的背景图像重建视频帧。
32、本申请实施例还提供一种视频处理装置，应用于发送端，装置包括：
33、图像提取模块，用于从视频帧中提取目标对象图像；
34、语境提取模块，用于根据连续的视频帧的目标对象图像之间的空间相关性和时间相关性，提取包括空间相关特征和时间相关特征的语境信息；
35、压缩模块，用于基于所述目标对象图像和所述语境信息进行压缩处理，得到压缩后的目标对象图像。
36、本申请实施例还提供一种视频处理装置，应用于接收端，装置包括：
37、接收模块，用于接收压缩后的背景图像和压缩后的目标对象图像；
38、解压缩模块，用于对所述压缩后的背景图像进行解压缩处理，得到解压后的背景图像；以及对所述压缩后的目标对象图像进行解压缩处理，得到解压后的目标对象图像；
39、重建模块，用于基于所述解压后的目标对象图像和解压后的背景图像重建视频帧。
40、从上面所述可以看出，本申请实施例提供的视频处理方法及装置，发送端从视频帧中提取目标对象图像，根据连续的视频帧的目标对象图像之间的空间相关性和时间相关性，提取语境信息，基于目标对象图像和语境信息进行压缩处理，得到压缩后的目标对象图像，将压缩后的目标对象发送至接收端，并将背景图像压缩后一次或有限次发送至接收端。接收端对接收的压缩后的背景图像和目标对象图像进行解压缩后，基于解压后的背景图像和目标对象图像重建视频帧。由于压缩传输的视频帧中最大程度的减少了冗余数据，能够大幅减少传输数据量，降低资源占用，提高抗噪声能力，提高视频传输性能。
本文档来自技高网...【技术保护点】
1.一种视频处理方法，应用于发送端，其特征在于，方法包括：
2.根据权利要求1所述的方法，其特征在于，还包括：
3.根据权利要求1所述的方法，其特征在于，所述从视频帧中提取目标对象图像，包括：
4.根据权利要求3所述的方法，其特征在于，根据所述前景图像、分割图像和预设的空白图像，生成所述目标对象图像，方法为：
5.根据权利要求1所述的方法，其特征在于，根据连续的视频帧的目标对象图像之间的空间相关性和时间相关性，提取包括空间相关特征和时间相关特征的语境信息，包括：
6.根据权利要求5所述的方法，其特征在于，对所述初始语境信息进行精炼处理，得到所述语境信息，方法为：
7.根据权利要求1所述的方法，其特征在于，基于所述目标对象图像和所述语境信息进行压缩处理，得到压缩后的目标对象图像，包括：
8.一种视频处理方法，应用于接收端，其特征在于，方法包括：
9.一种视频处理装置，应用于发送端，其特征在于，装置包括：
10.一种视频处理装置，应用于接收端，其特征在于，装置包括：
【技术特征摘要】
1.一种视频处理方法，应用于发送端，其特征在于，方法包括：
2.根据权利要求1所述的方法，其特征在于，还包括：
3.根据权利要求1所述的方法，其特征在于，所述从视频帧中提取目标对象图像，包括：
4.根据权利要求3所述的方法，其特征在于，根据所述前景图像、分割图像和预设的空白图像，生成所述目标对象图像，方法为：
5.根据权利要求1所述的方法，其特征在于，根据连续的视频帧的目标对象图像之间的空间相关性和时间相关性，提取包括空间相关特征和时间相关...
【专利技术属性】
技术研发人员：李昊鹏，仝昊楠，王思华，朱玉娇，王涛，杨诺诚，尹长川，
申请(专利权)人：北京邮电大学，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。