【技术实现步骤摘要】
本申请实施例涉及图像处理以及网络直播，尤其涉及一种唇部图像修复方法、虚拟直播方法、装置、电子设备以及存储介质。
技术介绍
1、图像修复是计算机视觉领域中的一项重要任务，它旨在通过算法手段从损坏或缺失的图像数据中恢复缺失的部分，使得图像在视觉上更加完整和自然。例如，图像中存在模糊区域，对图像进行修复，可以获得清晰度高的图像。
2、然而，现有技术中，图像修复的效果不够真实，不够自然。
技术实现思路
1、本申请实施例提供了一种唇部图像修复方法、虚拟直播方法、装置、电子设备以及存储介质，可以使唇部图像修复更真实，更自然，该技术方案如下：
2、第一方面，本申请实施例提供了一种唇部图像修复方法，包括步骤：
3、获取第一样本唇部区域图像；对第一样本唇部区域图像进行退化处理，获得第二样本唇部区域图像；其中，第二样本唇部区域图像的清晰度低于第一样本唇部区域图像；
4、根据第一样本唇部区域图像以及第二样本唇部区域图像，训练待训练的唇部图像修复模型，获得已训练的唇部图像修复模型；
5、获取人脸图像；识别人脸图像中的唇部区域，获得唇部区域图像；
6、将唇部区域图像输入至已训练的唇部图像修复模型中，获得目标唇部区域图像。
7、第二方面，本申请实施例提供了一种虚拟直播方法，方法包括如下步骤：
8、从主播的直播视频帧中识别出主播的二维人脸图像；
9、识别主播的二维人脸图像中的唇部区域，根据唇部区域，对主播
10、采用上述的唇部图像修复方法，对主播唇部区域图像进行唇部修复，获得修复后的主播唇部区域图像；
11、将修复后的主播唇部区域图像贴回主播的二维人脸图像，获得目标主播人脸图像；
12、将目标主播人脸图像与主播的直播视频帧进行融合，播放融合后的直播视频帧。
13、第三方面，本申请实施例提供了一种唇部图像修复装置，包括：
14、样本唇部区域图像获取模块，用于获取第一样本唇部区域图像；对第一样本唇部区域图像进行退化处理，获得第二样本唇部区域图像；其中，第二样本唇部区域图像的清晰度低于第一样本唇部区域图像；
15、唇部图像修复模型训练模块，用于根据第一样本唇部区域图像以及第二样本唇部区域图像，训练待训练的唇部图像修复模型，获得已训练的唇部图像修复模型；
16、人脸图像获取模块，用于获取人脸图像；识别人脸图像中的唇部区域，获得唇部区域图像；
17、目标唇部区域图像获得模块，用于将唇部区域图像输入至已训练的唇部图像修复模型中，获得目标唇部区域图像。
18、第四方面，本申请实施例提供一种虚拟直播装置，包括：
19、二维人脸图像识别模块，用于从主播的直播视频帧中识别出主播的二维人脸图像；
20、主播唇部区域图像获得模块，用于识别主播的二维人脸图像中的唇部区域，根据唇部区域，对主播的二维人脸图像进行抠像处理，获得主播唇部区域图像；
21、唇部区域图像修复模块，用于采用上述的唇部图像修复方法，对主播唇部区域图像进行唇部修复，获得修复后的主播唇部区域图像；
22、目标主播人脸图像获得模块，用于将修复后的主播唇部区域图像贴回主播的二维人脸图像，获得目标主播人脸图像；
23、直播视频帧播放模块，用于将目标主播人脸图像与主播的直播视频帧进行融合，播放融合后的直播视频帧。
24、第五方面，本申请实施例提供了一种电子设备，处理器、存储器以及存储在存储器中并可在处理器上运行的计算机程序，处理器执行计算机程序时实现如第一方面或第二方面方法的步骤。
25、第六方面，本申请实施例提供了一种计算机可读存储介质，该计算机可读存储介质存储有计算机程序，该计算机程序被处理器执行时实现如第一方面或第二方面方法的步骤。
26、本申请实施例通过获取第一样本唇部区域图像；对第一样本唇部区域图像进行退化处理，获得第二样本唇部区域图像；其中，第二样本唇部区域图像的清晰度低于第一样本唇部区域图像；根据第一样本唇部区域图像以及第二样本唇部区域图像，训练待训练的唇部图像修复模型，获得已训练的唇部图像修复模型；获取人脸图像；识别人脸图像中的唇部区域，获得唇部区域图像；将唇部区域图像输入至已训练的唇部图像修复模型中，获得目标唇部区域图像。本申请通过将低清晰度的第二样本唇部区域图像与高清晰度的第一样本唇部区域图像作为待训练的唇部图像修复模型的训练样本，获得已训练的唇部图像修复模型。通过已训练的唇部图像修复模型，仅对人脸图像的唇部区域进行修复，不改变人脸图像的其他区域，提高唇部区域的画质清晰度，使得修复后的唇部区域更真实、更自然。
27、为了更好地理解和实施，下面结合附图详细说明本申请的技术方案。
本文档来自技高网...【技术保护点】
1.一种唇部图像修复方法，其特征在于，包括如下步骤：
2.根据权利要求1所述的唇部图像修复方法，其特征在于：
3.根据权利要求2所述的唇部图像修复方法，其特征在于：
4.根据权利要求2所述的唇部图像修复方法，其特征在于：
5.根据权利要求4所述的唇部图像修复方法，其特征在于：
6.根据权利要求4所述的唇部图像修复方法，其特征在于：
7.根据权利要求1至6任意一项所述的唇部图像修复方法，其特征在于：
8.根据权利要求7所述的唇部图像修复方法，其特征在于：
9.一种虚拟直播方法，其特征在于，包括如下步骤：
10.一种唇部图像修复装置，其特征在于，包括：
11.一种虚拟直播装置，其特征在于，包括：
12.一种电子设备，包括：处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至9任意一项所述方法的步骤。
13.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机
...【技术特征摘要】
1.一种唇部图像修复方法，其特征在于，包括如下步骤：
2.根据权利要求1所述的唇部图像修复方法，其特征在于：
3.根据权利要求2所述的唇部图像修复方法，其特征在于：
4.根据权利要求2所述的唇部图像修复方法，其特征在于：
5.根据权利要求4所述的唇部图像修复方法，其特征在于：
6.根据权利要求4所述的唇部图像修复方法，其特征在于：
7.根据权利要求1至6任意一项所述的唇部图像修复方法，其特征在于：
8.根据权利要求7所述的唇部图像修复方法，其特征在于：<...
【专利技术属性】
技术研发人员：宫凯程，
申请(专利权)人：广州方硅信息技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。