System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 表情互动方法、装置、电子设备及存储介质制造方法及图纸_技高网

表情互动方法、装置、电子设备及存储介质制造方法及图纸

技术编号:40405065 阅读:6 留言:0更新日期:2024-02-20 22:28
本申请实施例公开了一种表情互动方法、装置、电子设备及存储介质,该方法包括:通过表情识别模型确定人脸图像对应的人脸表情标签以及所述人脸表情标签对应的标签置信度,所述标签置信度用于表征所述人脸表情标签的准确概率;根据所述人脸表情标签以及所述标签置信度确定所述人脸图像对应的表情分数;在所述人脸图像中叠加显示与所述表情分数对应的表情特效图像。实施本申请实施例,能够提高表情互动的乐趣性。

【技术实现步骤摘要】

本申请涉及人机交互,尤其涉及一种表情互动方法、装置、电子设备及存储介质


技术介绍

1、当前,电子设备能够通过识别人脸表情,以生成人脸表情对应的表情包,从而通过表情包与用户进行互动,但在相关技术中无法做到电子设备识别到的人脸表情完全准确,仅通过人脸表情确定的表情包来进行互动,容易出现表情包与人脸表情不对应的情况,从而影响用户的体验,表情互动的乐趣性较低。


技术实现思路

1、本申请实施例公开了一种表情互动方法、装置、电子设备及存储介质,能够提高表情特效图像的准确性,从而提高表情互动的乐趣性。

2、本申请实施例公开了一种表情互动方法,包括:

3、通过表情识别模型确定人脸图像对应的人脸表情标签以及所述人脸表情标签对应的标签置信度,所述标签置信度用于表征所述人脸表情标签的准确概率;

4、根据所述人脸表情标签以及所述标签置信度确定所述人脸图像对应的表情分数;

5、在所述人脸图像中叠加显示与所述表情分数对应的表情特效图像。

6、在一个实施例中,所述根据所述人脸表情标签以及所述标签置信度确定所述人脸图像对应的表情分数,包括:

7、确定表情互动类型,所述表情互动类型对应至少一个目标表情;

8、若所述人脸表情标签与任一所述目标表情匹配,则根据所述人脸表情标签以及所述标签置信度确定所述人脸图像对应的表情分数;

9、若所述人脸表情标签与所述至少一个目标表情均不匹配,则确定所述表情分数为低分数值,所述低分数值小于在所述人脸表情标签与任一所述目标表情匹配时确定的表情分数。

10、在一个实施例中,所述根据所述人脸表情标签以及所述标签置信度确定所述人脸图像对应的表情分数,包括:

11、确定所述人脸表情标签对应的至少一个标签置信度区间;其中,所述至少一个标签置信度区间分别对应一个分数值,所述分数值与对应的标签置信度区间的上限呈正相关关系;

12、在所述至少一个标签置信度区间中确定所述标签置信度所处的目标标签置信度区间;

13、将所述目标标签置信度区间对应的分数值,确定为所述人脸图像对应的表情分数。

14、在一个实施例中,在所述根据所述人脸表情标签以及所述标签置信度确定所述人脸图像对应的表情分数之后,所述方法还包括:

15、获取目标分数;

16、若所述表情分数不小于所述目标分数,则记录在所述人脸图像之后获取的连续多帧人脸图像分别对应的表情分数不小于所述目标分数的持续时间;

17、在所述持续时间达到时间阈值时,在达到所述时间阈值时所对应的人脸图像中叠加显示目标特效图像,所述目标特效图像用于提示达成目标。

18、在一个实施例中,所述记录在所述人脸图像之后获取的连续多帧人脸图像对应的表情分数不小于所述目标分数的持续时间,包括:

19、若当前获取的人脸图像对应的表情分数不小于所述目标分数,则确定所述当前获取的人脸图像对应的持续时间,并在所述当前获取的人脸图像中叠加显示时间特效图像,所述时间特效图像用于提示当前获取的人脸图像对应的持续时间;

20、所述方法还包括:

21、在所述当前获取的人脸图像对应的持续时间未达到所述时间阈值时,若所述当前获取的人脸图像对应的表情分数小于所述目标分数,则将所述持续时间重置为零。

22、在一个实施例中,在所述人脸图像中叠加显示与所述表情分数对应的表情特效图像,包括:

23、获取目标分数;

24、若所述表情分数等于所述目标分数,则在所述人脸图像中叠加显示与所述表情分数对应的表情特效图像;

25、若所述表情分数小于所述目标分数,则将所述表情分数增加第一激励分数值,得到第一激励表情分数,以及在所述人脸图像中叠加显示与所述第一激励表情分数对应的表情特效图像;其中,所述第一激励表情分数小于所述目标分数;

26、若所述表情分数大于所述目标分数,则将所述表情分数减少第二激励分数值,得到第二激励表情分数,以及在所述人脸图像中叠加显示与所述第二激励表情分数对应的表情特效图像;其中,所述第二激励表情分数大于所述目标分数。

27、在一个实施例中,在所述通过表情识别模型确定人脸图像对应的人脸表情标签以及所述人脸表情标签对应的标签置信度之前,所述方法还包括:

28、通过人脸检测模型对人脸图像进行人脸检测,确定所述人脸图像对应的人脸信息,所述人脸信息包括人脸区域图像以及多个人脸关键点;

29、所述通过表情识别模型确定人脸图像对应的人脸表情标签以及所述人脸表情标签对应的标签置信度,包括:

30、通过表情识别模型对所述人脸区域图像进行表情识别,确定所述人脸图像对应的人脸表情标签以及所述人脸表情标签对应的标签置信度;

31、所述在所述人脸图像中叠加显示与所述表情分数对应的表情特效图像,包括:

32、根据所述多个人脸关键点确定与所述表情分数对应的表情特效图像在所述人脸图像中的显示位置;

33、在所述显示位置叠加显示所述表情特效图像。

34、本申请实施例公开了一种表情互动装置,包括:

35、表情识别模块,用于通过表情识别模型确定人脸图像对应的人脸表情标签以及所述人脸表情标签对应的标签置信度,所述标签置信度用于表征所述人脸表情标签的准确概率;

36、分数确定模块,用于根据所述人脸表情标签以及所述标签置信度确定所述人脸图像对应的表情分数;

37、图像显示模块,用于在所述人脸图像中叠加显示与所述表情分数对应的表情特效图像。

38、在一个实施例中,所述分数确定模块,还用于确定表情互动类型,所述表情互动类型对应至少一个目标表情;若所述人脸表情标签与任一所述目标表情匹配,则根据所述人脸表情标签以及所述标签置信度确定所述人脸图像对应的表情分数;若所述人脸表情标签与所述至少一个目标表情均不匹配,则确定所述表情分数为低分数值,所述低分数值小于在所述人脸表情标签与任一所述目标表情匹配时确定的表情分数。

39、在一个实施例中,所述分数确定模块,还用于确定所述人脸表情标签对应的至少一个标签置信度区间;其中,所述至少一个标签置信度区间分别对应一个分数值,所述分数值与对应的标签置信度区间的上限呈正相关关系;在所述至少一个标签置信度区间中确定所述标签置信度所处的目标标签置信度区间;将所述目标标签置信度区间对应的分数值,确定为所述人脸图像对应的表情分数。

40、在一个实施例中,表情互动装置,还包括目标达成模块,所述目标达成模块,用于获取目标分数;若所述表情分数不小于所述目标分数,则记录在所述人脸图像之后获取的连续多帧人脸图像分别对应的表情分数不小于所述目标分数的持续时间;在所述持续时间达到时间阈值时,在达到所述时间阈值时所对应的人脸图像中叠加显示目标特效图像,所述目标特效图像用于提示达成目标。

41、在一个实施例中,所本文档来自技高网...

【技术保护点】

1.一种表情互动方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述根据所述人脸表情标签以及所述标签置信度确定所述人脸图像对应的表情分数,包括:

3.根据权利要求1或2所述的方法,其特征在于,所述根据所述人脸表情标签以及所述标签置信度确定所述人脸图像对应的表情分数,包括:

4.根据权利要求1所述的方法,其特征在于,在所述根据所述人脸表情标签以及所述标签置信度确定所述人脸图像对应的表情分数之后,所述方法还包括:

5.根据权利要求4所述的方法,其特征在于,所述记录在所述人脸图像之后获取的连续多帧人脸图像对应的表情分数不小于所述目标分数的持续时间,包括:

6.根据权利要求1所述的方法,其特征在于,所述在所述人脸图像中叠加显示与所述表情分数对应的表情特效图像,包括:

7.根据权利要求1至2、4至6任一所述的方法,其特征在于,在所述通过表情识别模型确定人脸图像对应的人脸表情标签以及所述人脸表情标签对应的标签置信度之前,所述方法还包括:

8.一种表情互动装置,其特征在于,包括:

>9.一种电子设备,其特征在于,包括:

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储计算机程序,其中,所述计算机程序在被处理器执行时,使得所述处理器执行权利要求1~7任一项所述的方法。

...

【技术特征摘要】

1.一种表情互动方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述根据所述人脸表情标签以及所述标签置信度确定所述人脸图像对应的表情分数,包括:

3.根据权利要求1或2所述的方法,其特征在于,所述根据所述人脸表情标签以及所述标签置信度确定所述人脸图像对应的表情分数,包括:

4.根据权利要求1所述的方法,其特征在于,在所述根据所述人脸表情标签以及所述标签置信度确定所述人脸图像对应的表情分数之后,所述方法还包括:

5.根据权利要求4所述的方法,其特征在于,所述记录在所述人脸图像之后获取的连续多帧人脸图像对应的表情分数不小于所述目标分数的持...

【专利技术属性】
技术研发人员:欧阳鹏
申请(专利权)人:广东小天才科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1