人物图像处理方法、装置、AR设备以及存储介质制造方法及图纸

技术编号:25639518 阅读:12 留言:0更新日期:2020-09-15 21:31
本公开提供了一种人物图像处理方法、装置、AR设备以及存储介质,其中,该方法包括:获取包含人脸图像的场景图像;从获取的场景图像中提取至少一个目标人脸图像,并确定提取的目标人脸图像的数量;确定与所述目标人脸图像的数量匹配的目标AR主题特效;将提取的目标人脸图像与所述目标AR主题特效进行融合后通过显示设备显示。本公开实施例通过确定出的目标人脸图像的数量来匹配相应的AR主题特效,从而可以根据从场景图像中识别出的用户个性特征为用户提供不同的主题特效,这样,可以满足不同用户的互动需求,提高互动效果和用户体验。

【技术实现步骤摘要】
人物图像处理方法、装置、AR设备以及存储介质
本公开涉及增强现实
,具体而言,涉及一种人物图像处理方法、装置、AR设备以及存储介质。
技术介绍
在一些展馆中,为了满足游客互动需求,通常会结合展览主题为游客提供中间脸部为镂空设计的造型立牌,游客站在造型立牌后面将脸放进镂空处,最终达到现场的互动效果。但是上述通过造型立牌实现互动的方法中,造型立牌是固定不动的,对于任何游客来说,造型均相同的,无法跟随用户需求的变化而变化,互动效果有限,降低了用户体验。
技术实现思路
本公开实施例至少提供一种人物图像处理方法、装置、AR设备以及存储介质,用以满足不同用户的互动需求,提高互动效果和用户体验。第一方面,本公开实施例提供了一种人物图像处理方法,包括:获取包含人脸图像的场景图像;从获取的场景图像中提取至少一个目标人脸图像,并确定提取的目标人脸图像的数量;确定与所述目标人脸图像的数量匹配的目标增强现实AR主题特效;将提取的目标人脸图像与所述目标AR主题特效进行融合后通过显示设备显示。在一种可能的实施方式中,确定与所述目标人脸图像的数量匹配的目标增强现实AR主题特效,具体包括:确定包含虚拟形象数量与所述目标人脸图像的数量相同的AR主题特效为所述目标AR主题特效。在一种可能的实施方式中,从获取的场景图像中提取目标人脸图像,具体包括:利用预先训练的人脸识别模型,从获取的场景图像中提取目标人脸图像;所述人脸识别模型为利用标注了人脸图像数据的样本图像进行训练得到的。在一种可能的实施方式中,将提取的目标人脸图像与所述目标AR主题特效进行融合后通过显示设备显示,具体包括:利用所述人脸识别模型,分别确定每一目标人脸图像的实时姿态信息;根据确定出的各目标人脸图像的实时姿态信息,分别调整与所述目标人脸图像对应的目标AR主题特效中各虚拟形象对应的显示姿态;将调整了各虚拟形象显示姿态后的目标AR主题特效叠加在提取的目标人脸图像上并通过显示设备显示。在一种可能的实施方式中,如果与所述目标用户属性信息匹配的目标增强现实AR主题特效有多个,则所述方法还包括:显示确定出的与目标用户属性信息匹配的所有目标增强现实AR主题特效;响应于用户的选择操作,确定用户选择的AR主题特效为所述目标AR主题特效。在一种可能的实施方式中,如果确定提取出的人脸图像包含多个,则所述方法还包括:显示提取出的所有人脸图像;响应于用户的选择操作,确定用户选择的至少一个人脸图像为目标人脸图像。在一种可能的实施方式中,如果确定提取出的人脸图像包含多个,则所述方法,还包括:分别确定提取出的每一人脸图像对应的置信度;确定置信度大于预设阈值的人脸图像为目标人脸图像。在一种可能的实施方式中,根据本公开实施例提供的人物图像处理方法,还包括:接收图像拍摄指令;根据接收到的图像拍摄指令,截取当前显示的特效图像并存储。第二方面,本公开实施例还提供一种人物图像处理装置,包括:获取单元,用于获取包含人脸图像的场景图像;提取单元,用于从获取的场景图像中提取至少一个目标人脸图像,并确定提取的目标人脸图像的数量;确定单元,用于确定与所述目标人脸图像的数量匹配的目标增强现实AR主题特效;显示单元,用于将提取的目标人脸图像与所述目标AR主题特效进行融合后通过显示设备显示。在一种可能的实施方式中,所述确定单元,具体用于确定包含虚拟形象数量与所述目标人脸图像的数量相同的AR主题特效为所述目标AR主题特效。在一种可能的实施方式中,所述提取单元,具体用于利用预先训练的人脸识别模型,从获取的场景图像中提取目标人脸图像;所述人脸识别模型为利用标注了人脸图像数据的样本图像进行训练得到的。在一种可能的实施方式中,所述显示单元,还用于利用所述人脸识别模型,分别确定每一目标人脸图像的实时姿态信息;根据确定出的各目标人脸图像的实时姿态信息,分别调整与所述目标人脸图像对应的目标AR主题特效中各虚拟形象对应的显示姿态;将调整了各虚拟形象显示姿态后的目标AR主题特效叠加在提取的目标人脸图像上并通过显示设备显示。在一种可能的实施方式中,所述显示单元,还用于如果与所述目标用户属性信息匹配的目标增强现实AR主题特效有多个,则显示确定出的与目标用户属性信息匹配的所有目标增强现实AR主题特效;所述确定单元,还用于响应于用户的选择操作,确定用户选择的AR主题特效为所述目标AR主题特效。在一种可能的实施方式中,所述显示单元,还用于如果确定提取出的人脸图像包含多个,则显示提取出的所有人脸图像;所述确定单元,还用于响应于用户的选择操作,确定用户选择的至少一个人脸图像为目标人脸图像。在一种可能的实施方式中,所述显示单元,还用于如果确定提取出的人脸图像包含多个,则分别确定提取出的每一人脸图像对应的置信度;所述确定单元,还用于确定置信度大于预设阈值的人脸图像为目标人脸图像。在一种可能的实施方式中,本公开实施例提供的人物图像处理装置,还包括:接收单元,用于接收图像拍摄指令;存储单元,用于根据接收到的图像拍摄指令,截取当前显示的融合图像并存储。第三方面,本公开实施例还提供一种AR设备,包括:相互连接的处理器和存储器,所述存储器存储有所述处理器可执行的机器可读指令,当AR设备运行时,所述机器可读指令被所述处理器执行以实现上述第一方面,或第一方面中任一种可能的实施方式中的人物图像处理方法。第四方面,本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述第一方面,或第一方面中任一种可能的实施方式中的步骤。本公开实施例提供的人物图像处理方法、装置、AR设备和存储介质,通过从获取的场景图像中识别出的目标人脸图像,根据目标人脸图像的数量匹配出相应的目标AR主题特效,并与识别出的目标人脸图像融合后通过显示设备进行显示,上述过程中,由于通过人脸图像的数量来匹配相应的AR主题特效,从而可以根据从场景图像中识别出的团体用户的数量特征为用户提供不同的主题特效,这样,可以满足不同团体的互动需求,提高互动效果和用户体验。进一步,本公开实施例提供的人物图像处理方法,还可以根据目标人脸图像的数量选择包含虚拟形象数量相同的目标AR主题特效进行融合显示,从而满足多个目标用户场景下的互动需求。进一步,本公开实施例提供的人物图像处理方法,还可以通过识别目标人脸图像的实时姿态,调整目标AR主题特效中相应虚拟形象的显示姿态,使得目标AR主题特效能够跟随目标人脸图像姿态的变化而变化,实现用户跟随效果,避免融合后得到的特效图像生硬呆板,更好地提高了互动效果和用户感知体验。为使本公开的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。附图说本文档来自技高网...

【技术保护点】
1.一种人物图像处理方法,其特征在于,包括:/n获取包含人脸图像的场景图像;/n从获取的场景图像中提取至少一个目标人脸图像,并确定提取的目标人脸图像的数量;/n确定与所述目标人脸图像的数量匹配的目标增强现实AR主题特效;/n将提取的目标人脸图像与所述目标AR主题特效进行融合后通过显示设备显示。/n

【技术特征摘要】
1.一种人物图像处理方法,其特征在于,包括:
获取包含人脸图像的场景图像;
从获取的场景图像中提取至少一个目标人脸图像,并确定提取的目标人脸图像的数量;
确定与所述目标人脸图像的数量匹配的目标增强现实AR主题特效;
将提取的目标人脸图像与所述目标AR主题特效进行融合后通过显示设备显示。


2.根据权利要求1所述的方法,其特征在于,所述确定与所述目标人脸图像的数量匹配的目标增强现实AR主题特效,具体包括:
确定包含虚拟形象数量与所述目标人脸图像的数量相同的AR主题特效为所述目标AR主题特效。


3.根据权利要求1或2所述的方法,其特征在于,从获取的场景图像中提取目标人脸图像,具体包括:
利用预先训练的人脸识别模型,从获取的场景图像中提取目标人脸图像;所述人脸识别模型为利用标注了人脸图像数据的样本图像进行训练得到的。


4.根据权利要求3所述的方法,其特征在于,将提取的目标人脸图像与所述目标AR主题特效进行融合后通过显示设备显示,具体包括:
利用所述人脸识别模型,分别确定每一目标人脸图像的实时姿态信息;
根据确定出的各目标人脸图像的实时姿态信息,分别调整与所述目标人脸图像对应的目标AR主题特效中各虚拟形象对应的显示姿态;
将调整了各虚拟形象显示姿态后的目标AR主题特效叠加在提取的目标人脸图像上并通过显示设备显示。


5.根据权利要求1~4任一权利要求所述的方法,其特征在于,如果与所述目标用户属性信息匹配的目标增强现实AR主题特效有多个,则所述方法还包括:
显示确定出的与目标用户属性信息匹配的所有目标增强现实AR主题特效;
响应于用户的选择操作,确定用户选择的AR主题特效为所述目标A...

【专利技术属性】
技术研发人员:王子彬孙红亮李炳泽
申请(专利权)人:上海商汤智能科技有限公司
类型:发明
国别省市:上海;31

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1