【技术实现步骤摘要】
本申请涉及图像处理，具体而言，涉及一种直播视频的画质增强方法、用户终端及系统。
技术介绍
1、在直播领域中，为了确保观众用户能够实时观看到直播画面，同时保持较低的延迟，直播平台通常会使用视频压缩算法来减小视频流的数据量。如此，可以适应观众用户的网络带宽和实时性要求，并且确保视频能够流畅地传输。然而，视频压缩会导致图像细节和质量的损失，从而影响观众用户的观看体验。
技术实现思路
1、为了至少克服现有技术中的上述不足，本申请的目的在于提供一种直播视频的画质增强方法、用户终端及系统。
2、第一方面，本申请实施例提供一种直播视频的画质增强方法，应用于用户终端，所述直播视频的画质增强方法包括：
3、获取直播视频流经解码后得到的yuv格式的原始图像帧；
4、根据所述原始图像帧，分离得到第一灰阶通道图像及色度通道图像；
5、将所述第一灰阶通道图像输入已训练的图像增强模型，得到增强后的第二灰阶通道图像；
6、对所述第二灰阶通道图像和所述色度通道图像进行渲染，显示渲染获得的直播视频图像。
7、在一种可能的实现方式中，所述图像增强模型包括第一下采样层、第二下采样层、第一特征学习层、第一特征融合层、第一上采样层、第二特征融合层、第二特征学习层及第二上采样层；
8、所述将所述第一灰阶通道图像输入已训练的图像增强模型，得到增强后的第二灰阶通道图像的步骤，包括：
9、将所述第一灰阶通道图像输入所述第一下采样层进行下
10、将所述第一特征图像输入所述第二下采样层进行下采样处理，得到第二特征图像；
11、将所述第二特征图像输入所述第一特征学习层进行深度特征学习，得到第三特征图像；
12、将所述第二特征图像和所述第三特征图像输入所述第一特征融合层进行特征融合，得到第四特征图像；
13、将所述第四特征图像输入所述第一上采样层进行上采样处理，得到第五特征图像；
14、将所述第一特征图像和所述第五特征图像输入所述第二特征融合层进行特征融合，得到第六特征图像；
15、将所述第六特征图像输入所述第二特征学习层进行深度特征学习，得到第七特征图像；
16、将所述第七特征图像输入所述第二上采样层进行上采样处理，得到所述第二灰阶通道图像。
17、在一种可能的实现方式中，所述将所述第二特征图像和所述第三特征图像输入所述第一特征融合层进行特征融合，得到第四特征图像的步骤，包括：
18、通过特征图的相加融合的方式将所述第二特征图像和所述第三特征图像输入所述第一特征融合层进行特征融合，得到第四特征图像；
19、所述将所述第一特征图像和所述第五特征图像输入所述第二特征融合层进行特征融合，得到第六特征图像的步骤，包括：
20、通过特征图的相加融合的方式将所述第一特征图像和所述第五特征图像输入所述第二特征融合层进行特征融合，得到第六特征图像。
21、在一种可能的实现方式中，所述将所述第四特征图像输入所述第一上采样层进行上采样处理，得到第五特征图像的步骤，包括：
22、通过通道展开算法的方式将所述第四特征图像输入所述第一上采样层进行上采样处理，得到第五特征图像；
23、所述将所述第七特征图像输入所述第二上采样层进行上采样处理，得到所述第二灰阶通道图像的步骤，包括：
24、通过通道展开算法的方式将所述第七特征图像输入所述第二上采样层进行上采样处理，得到所述第二灰阶通道图像。
25、在一种可能的实现方式中，所述第一下采样层及所述第二下采样层为两倍下采样层；所述第一上采样层及所述第二上采样层为两倍上采样层。
26、在一种可能的实现方式中，所述方法还包括：
27、获取所述用户终端的处理性能信息，并将所述性能信息发送至服务器；
28、接收所述服务器根据所述处理性能信息下发的所述图像增强模型。
29、第二方面，本申请实施例还提供一种直播视频的画质增强方法，应用于直播系统，所述直播系统包括服务器及用户终端；
30、所述服务器对直播视频流进行压缩，并将所述压缩后的直播视频流发送至所述用户终端；
31、所述用户终端根据所述原始图像帧，分离得到第一灰阶通道图像及色度通道图像；
32、所述用户终端将所述第一灰阶通道图像输入已训练的图像增强模型，得到增强后的第二灰阶通道图像；
33、所述用户终端对所述第二灰阶通道图像和所述色度通道图像进行渲染，显示渲染获得的直播视频图像。
34、在一种可能的实现方式中，所述方法还包括：
35、所述用户终端获取所述用户终端的处理性能信息，并将所述性能信息发送至服务器；
36、所述服务器根据接收到的所述处理性能信息确定对应的所述图像增强模型，并将所述图像增强模型发送至所述用户终端；
37、所述用户终端接收并部署所述图像增强模型。
38、第三方面，本申请实施例还提供一种用户终端，包括：
39、存储器，用于存储一个或多个程序；
40、处理器，当所述一个或多个程序被所述处理器执行时，实现上述第一方面提供的直播视频的画质增强方法。
41、第四方面，本申请实施例还提供一种直播视频的画质增强系统，包括：服务器及用户终端；
42、所述服务器用于对直播视频流进行压缩，并将所述压缩后的直播视频流发送至所述用户终端；
43、所述用户终端用于根据所述原始图像帧，分离得到第一灰阶通道图像及色度通道图像；所述用户终端将所述第一灰阶通道图像输入已训练的图像增强模型，得到增强后的第二灰阶通道图像；所述用户终端对所述第二灰阶通道图像和所述色度通道图像进行渲染，显示渲染获得的直播视频图像。
44、基于上述任意一个方面，本申请实施例提供的直播视频的画质增强方法、用户终端及系统，通过将原始图像帧分离为第一灰阶通道图像及色度通道图像，并通过图像增强模型对第一灰阶通道图像进行增强得到第二灰阶通道图像，最后对第二灰阶通道图像和色度通道图像进行渲染得到高质量的直播视频图像，可以提高直播视频图像的清晰度和细节，使观众用户能够更好地欣赏到高清视频内容，提升观看体验。此外，在实现画质增强的同时，还可以减少算力消耗和存储需求，且能够有效降低功耗，延长设备的续航时间。
本文档来自技高网...【技术保护点】
1.一种直播视频的画质增强方法，其特征在于，应用于用户终端，所述方法包括：
2.根据权利要求1所述的直播视频的画质增强方法，其特征在于，所述图像增强模型包括第一下采样层、第二下采样层、第一特征学习层、第一特征融合层、第一上采样层、第二特征融合层、第二特征学习层及第二上采样层；
3.根据权利要求2所述的直播视频的画质增强方法，其特征在于，所述将所述第二特征图像和所述第三特征图像输入所述第一特征融合层进行特征融合，得到第四特征图像的步骤，包括：
4.根据权利要求2所述的直播视频的画质增强方法，其特征在于，所述将所述第四特征图像输入所述第一上采样层进行上采样处理，得到第五特征图像的步骤，包括：
5.根据权利要求2所述的直播视频的画质增强方法，其特征在于，所述第一下采样层及所述第二下采样层为两倍下采样层；所述第一上采样层及所述第二上采样层为两倍上采样层。
6.根据权利要求1所述的直播视频的画质增强方法，其特征在于，所述方法还包括：
7.一种直播视频的画质增强方法，其特征在于，应用于直播系统，所述直播系统包括服务器及用
8.根据权利要求7所述的直播视频的画质增强方法，其特征在于，所述方法还包括：
9.一种用户终端，其特征在于，包括：
10.一种直播视频的画质增强系统，其特征在于，包括：服务器及用户终端；
...【技术特征摘要】
1.一种直播视频的画质增强方法，其特征在于，应用于用户终端，所述方法包括：
2.根据权利要求1所述的直播视频的画质增强方法，其特征在于，所述图像增强模型包括第一下采样层、第二下采样层、第一特征学习层、第一特征融合层、第一上采样层、第二特征融合层、第二特征学习层及第二上采样层；
3.根据权利要求2所述的直播视频的画质增强方法，其特征在于，所述将所述第二特征图像和所述第三特征图像输入所述第一特征融合层进行特征融合，得到第四特征图像的步骤，包括：
4.根据权利要求2所述的直播视频的画质增强方法，其特征在于，所述将所述第四特征图像输入所述第一上采样层进行上采样处理，得到第五特征图...
【专利技术属性】
技术研发人员：杨婕婷，
申请(专利权)人：广州虎牙信息科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。