一种人脸的驱动显示方法、装置、电子设备和存储介质制造方法及图纸

本发明专利技术实施例公开了一种人脸的驱动显示方法、装置、电子设备和存储介质。该方法包括：获取第一图像数据与视频数据，所述视频数据中具有多帧第二图像数据，将所述第一图像数据划分为多个第一网格，将每帧所述第二图像数据划分为多个第二网格，依次根据所述第二人脸关键点调整所述第一人脸关键点，以调整所述第一人脸关键点所处的第一网格；依次绘制调整之后的第一网格，以驱动显示所述第一图像数据。第一网格的绘制及其调整相比于神经网络等深度学习更为简单，可提高处理速度、减少处理时间，适用于直播等对实时性要求较高的场景。

【技术实现步骤摘要】
一种人脸的驱动显示方法、装置、电子设备和存储介质
本专利技术实施例涉及图像处理的技术，尤其涉及一种人脸的驱动显示方法、装置、电子设备和存储介质。
技术介绍
随着社会的发展，诸如手机、平板电脑等电子设备已经广泛应用在学习、娱乐、工作等方面，扮演着越来越重要的角色。在很多电子设备中配置有摄像头，可用于拍照、录像、直播等操作。在AR(AugmentedReality，增强现实)、制作表情等应用中，使用神经网络等深度学习识别当前用户的人脸状态，从而驱动另一个人脸表达该人脸状态。但是，深度学习复杂度高，处理速度慢，处理时间较长，在直播等对实时性要求较高的场景中，性能存在瓶颈。
技术实现思路
本专利技术实施例提供一种人脸的驱动显示方法、装置、电子设备和存储介质，以解决使用深度学习驱动人脸显示处理速度慢、处理时间较长的问题。第一方面，本专利技术实施例提供了一种人脸的驱动显示方法，包括：获取第一图像数据与视频数据，所述视频数据中具有多帧第二图像数据，所述第一图像数据中具有第一人脸数据，所述第二图像数据本文档来自技高网...

【技术保护点】
1.一种人脸的驱动显示方法，其特征在于，包括：/n获取第一图像数据与视频数据，所述视频数据中具有多帧第二图像数据，所述第一图像数据中具有第一人脸数据，所述第二图像数据中具有第二人脸数据；/n将所述第一图像数据划分为多个第一网格，所述第一网格的第一顶点至少包括所述第一人脸数据的第一人脸关键点；/n将每帧所述第二图像数据划分为多个第二网格，所述第二网格的第二顶点至少包括所述第二人脸数据的第二人脸关键点；/n依次根据所述第二人脸关键点调整所述第一人脸关键点，以调整所述第一人脸关键点所处的第一网格；/n依次绘制调整之后的第一网格，以驱动显示所述第一图像数据。/n

【技术特征摘要】
1.一种人脸的驱动显示方法，其特征在于，包括：
获取第一图像数据与视频数据，所述视频数据中具有多帧第二图像数据，所述第一图像数据中具有第一人脸数据，所述第二图像数据中具有第二人脸数据；
将所述第一图像数据划分为多个第一网格，所述第一网格的第一顶点至少包括所述第一人脸数据的第一人脸关键点；
将每帧所述第二图像数据划分为多个第二网格，所述第二网格的第二顶点至少包括所述第二人脸数据的第二人脸关键点；
依次根据所述第二人脸关键点调整所述第一人脸关键点，以调整所述第一人脸关键点所处的第一网格；
依次绘制调整之后的第一网格，以驱动显示所述第一图像数据。


2.根据权利要求1所述的方法，其特征在于，所述依次根据所述第二人脸关键点调整所述第一人脸关键点，以调整所述第一人脸关键点所处的第一网格，包括：
确定所述第一人脸关键点的第一顶点坐标；
在每帧所述第二图像数据中确定所述第二人脸关键点的第二顶点坐标；
参考所述第二人脸关键点的第二顶点坐标在每相邻两帧所述第二图像数据之间的偏移，调整所述第一人脸关键点的第一顶点坐标。


3.根据权利要求2所述的方法，其特征在于，所述参考所述第二人脸关键点的第二顶点坐标在每相邻两帧所述第二图像数据之间的偏移，调整所述第一人脸关键点的第一顶点坐标，包括：
确定所述第二人脸关键点的第二顶点坐标在每相邻两帧所述第二图像数据之间的第一偏移距离；
将所述第一偏移距离映射至所述第一图像数据中，获得第二偏移距离；
在所述第一人脸关键点的第一顶点坐标的基础上加上所述第二偏移距离，以更新所述第一人脸关键点的第一顶点坐标。


4.根据权利要求3所述的方法，其特征在于，所述将所述第一偏移距离映射至所述第一图像数据中，获得第二偏移距离，包括：
计算所述第一人脸数据与所述第二人脸数据之间的尺寸比例；
计算所述第一偏移距离与所述尺寸比例之间的乘积，作为所述第一人脸关键点的第二偏移距离。


5.根据权利要求4所述的方法，其特征在于，所述第一人脸关键点包括第一眼睛关键点，所述第二人脸关键点包括第二眼睛关键点；
所述计算所述第一人脸数据与所述第二人脸数据之间的尺寸比例，包括：
确定所述第一眼睛关键点之间的第一眼间距；
确定所述第二眼睛关键点之间的第二眼间距；
计算所述第二眼间距与所述第一眼间距之间的距离比例，作为所述第一人脸数据与所述第二人脸数据之间的尺寸比例。


6.根据权利要求1-5任一项所述的方法，其特征在于，
所述将所述第一图像数据划分为多个第一网格，包括：
确定位置相邻的第一人脸关键点，作为第一目标关键点；
在所述第一图像数据中以所述第一目标关键点作为第一顶点、连接所述第一目标关键点，获得第一网格；
所述将每帧所述第二图像数据划分为多个第二网格，包括：
确定位置相邻的第二人脸关键点，作为第二目标关键点；
在所述第二图像数据中以所述第二目标关键点作为第二顶点、连接所述第二目标关键点，获得第二网格。


7.根据权利要求6所述的方法，其特征在于，
所述确定位置相邻的第一人脸关键点，作为第一目标关键点，包括：
将所述第一图像数据转换为第一维诺图，所述第一维诺图包括多个第一单元，每个所述第一单元包含一个第一人脸关键点，所述第一单元具有多条第一边；
确定位于同一条第一边两侧的第一人脸关键点位置相邻；
所述确定位置相邻的第二人脸关键点，作为第二目标关键点，包括：
将所述第二图像数据转换为第二维诺图，所述第二维诺图包括多个第二单元，每个所述第二单元包含一个第二人脸关键点，所述第二单元具有多条第二边；
确定位于同一条第二边两侧的第二人脸...

【专利技术属性】
技术研发人员：王云刚，华路延，
申请(专利权)人：广州虎牙科技有限公司，
类型：发明
国别省市：广东;44