表情的识别方法、装置、存储介质及电子设备制造方法及图纸

本发明专利技术公开了一种表情的识别方法、装置、存储介质及电子设备。涉及人工智能技术领域，其中，该方法包括：采集视频辅导过程中目标客户的初始人脸图像，其中，视频辅导过程为金融机构与目标客户之间进行远程视频的辅导过程；对初始人脸图像进行裁剪，得到目标人脸图像；将目标人脸图像输入卷积神经网络，输出目标客户的第一表情参数；基于第一表情参数和人脸表情库，确定目标客户的表情，其中，人脸表情库中至少包括预先存储的表情参数与表情之间的关联关系。本发明专利技术解决了相关技术中金融机构在与目标客户进行远程视频同屏辅导中难以对目标客户进行表情识别，导致远程视频辅导效果不佳的技术问题。的技术问题。的技术问题。

【技术实现步骤摘要】
表情的识别方法、装置、存储介质及电子设备


[0001]本专利技术涉及人工智能
，具体而言，涉及一种表情的识别方法、装置、存储介质及电子设备。

技术介绍

[0002]当前，为充分发挥人工智能数据要素在金融机构经营转型中的关键作用，完善客户操作体验，金融机构的手机银行对客户增加了手机操作同屏指导服务。但是当前的语音指导模式存在一定的局限性，无法识别客户情绪，难以保证服务准确性。并且远程同屏辅导仅支持语音识别，存在很多弊端。如：客户描述不清晰、客服理解不到位、无法兼顾客户服务体验等，会导致问题解决时效较长，信息量偏差等问题。
[0003]针对上述的问题，目前尚未提出有效的解决方案。

技术实现思路

[0004]本专利技术实施例提供了一种表情的识别方法、装置、存储介质及电子设备，以至少解决相关技术中金融机构在与目标客户进行远程视频同屏辅导中难以对目标客户进行表情识别，导致远程视频辅导效果不佳的技术问题。
[0005]根据本专利技术实施例的一个方面，提供了一种表情的识别方法，包括：采集视频辅导过程中目标客户的初始人脸图本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种表情的识别方法，其特征在于，包括：采集视频辅导过程中目标客户的初始人脸图像，其中，所述视频辅导过程为金融机构与所述目标客户之间进行远程视频的辅导过程；对所述初始人脸图像进行裁剪，得到目标人脸图像；将所述目标人脸图像输入卷积神经网络，输出所述目标客户的第一表情参数；基于所述第一表情参数和人脸表情库，确定所述目标客户的表情，其中，所述人脸表情库中至少包括预先存储的表情参数与表情之间的关联关系。2.根据权利要求1所述的识别方法，其特征在于，在基于所述第一表情参数和人脸表情库，确定所述目标客户的表情之前，包括：获取人脸表情图像库；将所述人脸表情图像库中的每张人脸表情图像输入所述卷积神经网络中，输出每张所述人脸表情图像的第二表情参数；基于每张所述人脸表情图像的所述第二表情参数，确定所述人脸表情库。3.根据权利要求1所述的识别方法，其特征在于，对所述初始人脸图像进行裁剪，得到目标人脸图像，包括：基于所述初始人脸图像中人脸的五官部位，建立坐标系；基于所述坐标系中的第一坐标轴和第二坐标轴，确定裁剪区域；基于所述裁剪区域对所述初始人脸图像进行裁剪，得到所述目标人脸图像。4.根据权利要求3所述的识别方法，其特征在于，基于所述初始人脸图像中人脸的五官部位，建立坐标系，包括：基于所述初始人脸图像中两眼连线所在的直线，确定所述第一坐标轴；基于所述初始人脸图像中所述两眼连线的中点与嘴部中点连线所在的直线，确定所述第二坐标轴；以所述两眼连线的中点为所述坐标系的原点，基于所述第一坐标轴和所述第二坐标轴，确定所述坐标系。5.根据权利要求1所述的识别方法，其特征在于，将所述目标人脸图像输入卷积神经网络，输出所述目标客户的第一表情参数，包括：将所述目标人脸图像输入所述卷积神经网络的卷积层，输出多张第一人脸图像；将每张所述第一人脸图像输入所述卷积神经网络的池化层，输出每张所述第一人脸图像关联的多张第二人脸图像；将每张所述第二人脸图像输入所述卷积神经网络的全链路层，输出多个卷积...

【专利技术属性】
技术研发人员：孙蓉，王国锋，温斌，万博，
申请(专利权)人：中国工商银行股份有限公司，
类型：发明
国别省市：