情绪识别方法、相关设备及可读存储介质技术

技术编号:32855687 阅读:45 留言:0更新日期:2022-03-30 19:26
本申请公开了一种情绪识别方法、相关设备及可读存储介质。在获取待识别手语视频之后,基于该待识别手语视频,确定手语表达者当前的手语动作表达特征,由于手语表达者当前的手语动作表达特征能够表征所述手语表达者在当前的情绪下完成的手语动作;因此,基于手语表达者当前的手语动作表达特征,就能识别手语表达者当前的情绪。者当前的情绪。者当前的情绪。

【技术实现步骤摘要】
情绪识别方法、相关设备及可读存储介质


[0001]本申请涉及手语识别
,更具体的说,是涉及一种情绪识别方法、相关设备及可读存储介质。

技术介绍

[0002]手语是聋哑人的主要沟通方式,目前已经有成熟的手语识别方案,能够将聋哑人的手语表达,识别成文字或者语音,促成不会手语的正常人与聋哑人能够沟通。但是,在聋哑人与正常人沟通过程中,可能由于种种问题,导致聋哑人发生情绪激动的情况,如果这种情绪得不到注意,将不利于后续的沟通。
[0003]目前通用的情绪识别方法多基于说话内容或面部表情实现的,但是,聋哑人主要是通过手语来表达情绪的,目前通用的情绪识别方法并不适用于聋哑人的情绪识别。
[0004]因此,如何提供一种适用于聋哑人的情绪识别方法,成为本领域技术人员亟待解决的技术问题。

技术实现思路

[0005]鉴于上述问题,本申请提出了一种情绪识别方法、相关设备及可读存储介质。具体方案如下:
[0006]一种情绪识别方法,所述方法包括:
[0007]获取待识别手语视频;
[0008]基于所述待识别手语视频,确定手语表达者当前的手语动作表达特征;所述手语表达者当前的手语动作表达特征用于表征所述手语表达者在当前的情绪下完成的手语动作;
[0009]基于所述手语表达者当前的手语动作表达特征,识别所述手语表达者当前的情绪。
[0010]可选地,所述基于所述手语表达者当前的手语动作表达特征,识别所述手语表达者当前的情绪,包括:
[0011]确定所述手语表达者个性的手语动作表达特征;所述手语表达者个性的手语动作表达特征用于表征所述手语表达者在平稳情绪时完成的手语动作;
[0012]将所述手语表达者当前的手语动作表达特征与所述手语表达者个性的手语动作表达特征进行比较,确定所述手语表达者当前的情绪。
[0013]可选地,所述手语动作表达特征,包括:
[0014]速度特征、幅度特征、动作完整度特征中的一个或多个,所述速度特征用于指示手语表达者在执行手语动作时双手的移动速度,所述幅度特征用于指示手语表达者在执行手语动作时双手的移动幅度,所述动作完整度特征用于指示手语表达者对手语动作的完成程度。
[0015]可选地,所述确定所述手语表达者个性的手语动作表达特征,包括:
[0016]获取标准的手语动作表达特征;
[0017]基于所述标准的手语动作表达特征,确定所述手语表达者个性的手语动作表达特征。
[0018]可选地,所述基于所述标准的手语动作表达特征,确定所述手语表达者个性的手语动作表达特征,包括:
[0019]将所述标准的手语动作表达特征,确定为所述手语表达者个性的手语动作表达特征。
[0020]可选地,所述基于所述标准的手语动作表达特征,确定所述手语表达者个性的手语动作表达特征,包括:
[0021]获取所述手语表达者的手语视频样本;
[0022]基于所述手语表达者的手语视频样本,对所述标准的手语动作表达特征进行调整,得到调整后的手语动作表达特征;
[0023]将所述调整后的手语动作表达特征,确定为所述手语表达者个性的手语动作表达特征。
[0024]可选地,所述将所述手语表达者当前的手语动作表达特征与所述手语表达者个性的手语动作表达特征进行比较,确定所述手语表达者当前的情绪,包括:
[0025]当所述手语表达者当前的手语动作表达特征与所述手语表达者个性的手语动作表达特征匹配,则确定所述手语表达者当前的情绪为平稳情绪;
[0026]当所述手语表达者当前的手语动作表达特征与所述手语表达者个性的手语动作表达特征不匹配,则确定所述手语表达者当前的情绪为非平稳情绪。
[0027]可选地,在确定所述手语表达者当前的情绪为非平稳情绪时,所述方法还包括:
[0028]生成预警信息,所述预警信息中包括情绪类型以及情绪值;所述情绪类型用于指示所述手语表达者当前的情绪,所述情绪值用于指示所述手语表达者当前情绪类型的程度;
[0029]将所述预警信息提供给所述手语表达者的沟通对象,以提示所述手语表达者的沟通对象关注所述手语表达者当前的情绪。
[0030]可选地,所述将所述预警信息提供给所述手语表达者的沟通对象,包括:
[0031]获取所述手语视频对应的文字识别结果,和/或,语音识别结果;
[0032]在所述文字识别结果,和/或,所述语音识别结果,和/或,所述手语视频中标注所述预警信息。
[0033]一种情绪识别装置,所述装置包括:
[0034]手语视频获取单元,用于获取待识别手语视频;
[0035]特征确定单元,用于基于所述待识别手语视频,确定手语表达者当前的手语动作表达特征;所述手语表达者当前的手语动作表达特征用于表征所述手语表达者在当前的情绪下完成的手语动作;
[0036]识别单元,用于基于所述手语表达者当前的手语动作表达特征,识别所述手语表达者当前的情绪。
[0037]可选地,所述识别单元,包括:
[0038]个性的手语动作表达特征确定单元,用于确定所述手语表达者个性的手语动作表
达特征;所述手语表达者个性的手语动作表达特征用于表征所述手语表达者在平稳情绪时完成的手语动作;
[0039]比较单元,用于将所述手语表达者当前的手语动作表达特征与所述手语表达者个性的手语动作表达特征进行比较,确定所述手语表达者当前的情绪。
[0040]可选地,所述手语动作表达特征,包括:
[0041]速度特征、幅度特征、动作完整度特征中的一个或多个,所述速度特征用于指示手语表达者在执行手语动作时双手的移动速度,所述幅度特征用于指示手语表达者在执行手语动作时双手的移动幅度,所述动作完整度特征用于指示手语表达者对手语动作的完成程度。
[0042]可选地,所述个性的手语动作表达特征确定单元,包括:
[0043]标准的手语动作表达特征获取单元,用于获取标准的手语动作表达特征;
[0044]个性的手语动作表达特征确定子单元,用于基于所述标准的手语动作表达特征,确定所述手语表达者个性的手语动作表达特征。
[0045]可选地,所述个性的手语动作表达特征确定子单元,具体用于:
[0046]将所述标准的手语动作表达特征,确定为所述手语表达者个性的手语动作表达特征。
[0047]可选地,所述个性的手语动作表达特征确定子单元,包括:
[0048]手语视频样本获取单元,用于获取所述手语表达者的手语视频样本;
[0049]调整单元,用于基于所述手语表达者的手语视频样本,对所述标准的手语动作表达特征进行调整,得到调整后的手语动作表达特征;
[0050]确定单元,用于将所述调整后的手语动作表达特征,确定为所述手语表达者个性的手语动作表达特征。
[0051]可选地,所述比较单元,具体用于:
[0052]当所述手语表达者当前的手语动作表达特征本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种情绪识别方法,其特征在于,所述方法包括:获取待识别手语视频;基于所述待识别手语视频,确定手语表达者当前的手语动作表达特征;所述手语表达者当前的手语动作表达特征用于表征所述手语表达者在当前的情绪下完成的手语动作;基于所述手语表达者当前的手语动作表达特征,识别所述手语表达者当前的情绪。2.根据权利要求1所述的方法,其特征在于,所述基于所述手语表达者当前的手语动作表达特征,识别所述手语表达者当前的情绪,包括:确定所述手语表达者个性的手语动作表达特征;所述手语表达者个性的手语动作表达特征用于表征所述手语表达者在平稳情绪时完成的手语动作;将所述手语表达者当前的手语动作表达特征与所述手语表达者个性的手语动作表达特征进行比较,确定所述手语表达者当前的情绪。3.根据权利要求2所述的方法,其特征在于,所述手语动作表达特征,包括:速度特征、幅度特征、动作完整度特征中的一个或多个,所述速度特征用于指示手语表达者在执行手语动作时双手的移动速度,所述幅度特征用于指示手语表达者在执行手语动作时双手的移动幅度,所述动作完整度特征用于指示手语表达者对手语动作的完成程度。4.根据权利要求2所述的方法,其特征在于,所述确定所述手语表达者个性的手语动作表达特征,包括:获取标准的手语动作表达特征;基于所述标准的手语动作表达特征,确定所述手语表达者个性的手语动作表达特征。5.根据权利要求4所述的方法,其特征在于,所述基于所述标准的手语动作表达特征,确定所述手语表达者个性的手语动作表达特征,包括:将所述标准的手语动作表达特征,确定为所述手语表达者个性的手语动作表达特征。6.根据权利要求4所述的方法,其特征在于,所述基于所述标准的手语动作表达特征,确定所述手语表达者个性的手语动作表达特征,包括:获取所述手语表达者的手语视频样本;基于所述手语表达者的手语视频样本,对所述标准的手语动作表达特征进行调整,得到调整后的手语动作表达特征;将所述调整后的手语动作表达特征,确定为所述手语表达者个性的手语动作表达特征。7.根据...

【专利技术属性】
技术研发人员:唐紫艳刘江汪冬雪王欢
申请(专利权)人:讯飞智元信息科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1