一种手语翻译方法及系统技术方案

技术编号:20870706 阅读:20 留言:0更新日期:2019-04-17 10:13
本发明专利技术公开一种手语翻译方法,包括:S100:获取手语姿势;S200:对手语姿势进行分解;S300:识别手语姿势的含义;S400:将手语姿势翻译成文字或者语音;S500:将翻译后的文字或者语音呈现给对方;S600:接收对方的语音;S700:将对方语音翻译成对应含义的手语姿势;S800:将翻译后的手语姿势呈现给用户。本发明专利技术还公开一种手语翻译系统。本发明专利技术公开的一种手语翻译方法及系统,具有如下优点:实现手语与语音或者文字的转换,方便聋哑人与正常人的沟通。

【技术实现步骤摘要】
一种手语翻译方法及系统
本专利技术属于图像识别
,具体涉及一种手语翻译方法及系统。
技术介绍
聋哑人与正常人沟通一般都是通过手语,但是,懂手语的人不多,往往需要经过专业人士的翻译,才能实现聋哑人和正常人的交流,非常不便。为此,有必要提出一种手语翻译方法及系统,实现手语与语音或者文字的转换,方便聋哑人与正常人的沟通。
技术实现思路
针对上述现有技术的不足,本专利技术的目的在于提供一种手语翻译方法及系统,实现手语与语音或者文字的转换,方便聋哑人与正常人的沟通。为实现上述目的,本专利技术采用如下技术方案。一种手语翻译方法,包括:S100:获取手语姿势;S200:对手语姿势进行分解;S300:识别手语姿势的含义;S400:将手语姿势翻译成文字或者语音;S500:将翻译后的文字或者语音呈现给对方;S600:接收对方的语音;S700:将对方语音翻译成对应含义的手语姿势;S800:将翻译后的手语姿势呈现给用户。优选地,所述步骤S100:获取手语姿势,包括:S110:摄像头模块捕捉用户手部的姿势;S120:对用户手部的姿势进行实时记录及存储;S130:筛选出用户手部姿势中的手语姿势。优选地,所述步骤S300:识别手语姿势的含义,包括:S310:获取到单个手语姿势的含义;S320:按照顺序对单个手语姿势的含义进行组合;S330:对组合后的手语姿势的含义进行校正。优选地,所述步骤S400:将手语姿势翻译成文字或者语音,包括:S410:用户选择将手语姿势翻译成文字还是语音;S420:根据用户的选择对手语姿势进行对应的翻译。优选地,所述步骤S700:将对方语音翻译成对应含义的手语姿势,包括:S710:对用户语音的内容进行解析;S720:将对方语音的内容按顺序拆分成单个词组;S730:将单个词组翻译成对应的手语姿势;S740:按照顺序将各词组对应的手语姿势组合;S750:根据表达习惯对组合后的手语姿势进行校正。一种手语翻译系统,所述系统包括:主控模块、摄像头模块、图像分解模块、图像识别模块、语音模块、文字模块、显示模块、通讯模块,所述主控模块分别与所述摄像头模块、图像分解模块、图像识别模块、语音模块、文字模块、显示模块、通讯模块电性连接;电源模块为所述系统提供电能,数据库通过与所述通讯模块通信连接,与所述系统交互数据;所述摄像头模块用于实时获取用户的手势图像;所述图像分解模块用于对摄像头模块获取到的用户的手势图像进行分解;所述图像识别模块用于对用户的手势图像进行识别;所述语音模块用于接收对方输入的语音,以及将翻译成语音的手势呈现给对方;所述文字模块用于将手势姿势翻译成文字后呈现给对方;所述显示模块用于显示手势姿势或者文字;所述通讯模块用于所述系统与数据库通信连接、交互数据。优选地,所述图像识别模块包括:图像特征提取模块、比对模块;所述图像特征提取模块用于从摄像头模块获取到的手势图像中提取手势图像的特征;所述比对模块用于将获取到的手势图像与数据库中存储的手势图像比对。优选地,所述通讯模块支持的通讯方式至少包括WiFi、数据网络中的一种。与现有技术相比,本专利技术具有如下有益效果:本专利技术提出一种手语翻译方法及系统,实现手语与语音或者文字的转换,方便聋哑人与正常人的沟通。附图说明图1是本专利技术一实施例手语翻译方法的流程示意图;图2是本专利技术另一实施例手语翻译方法的流程示意图;图3是本专利技术另一实施例手语翻译方法的流程示意图;图4是本专利技术另一实施例手语翻译方法的流程示意图;图5是本专利技术另一实施例手语翻译方法的流程示意图;图6是本专利技术一实施例手语翻译系统的组成示意图;图7是本专利技术另一实施例手语翻译系统的组成示意图。具体实施方式体现本专利技术特征与优点的典型实施方式将在以上的说明书中详细叙述。应理解的是本专利技术能够在不同的实施方式上具有各种的变化,其皆不脱离本专利技术的范围,且其中的说明及图示在本质上是当作说明之用,而非用以限制本专利技术。下面将结合附图及实施例,对本专利技术进行进一步说明。如图1所示,图1是本专利技术一实施例手语翻译方法的流程示意图。本专利技术中的手语翻译方法,包括以下步骤:步骤S100:获取手语姿势。在聋哑用户与正常用户交流时,通过摄像头模块获实时获取用户手语的动作,并筛选出其中的手语姿势。需要说明的是,摄像头模块装设在聋哑用户的终端或者可穿戴设备上,例如,聋哑用户通过佩戴相应的智能眼镜,来获取其与正常用户交流时的手语姿势,以及获取对方用户与之交流的语音等等。步骤S200:对手语姿势进行分解。在获取到用户的手语姿势后,对获取到的手语姿势进行分解,将手语姿势分解成单个的手势动作。步骤S300:识别手语姿势的含义。对手语姿势进行分解,得到单个的手势动作后,按照顺序,将单个手势动作与数据库中存储的手势动作比对,获取到各单个手势动作的含义,并按照顺序对单个手势动作的含义进行组合。考虑到日常表达习惯,为使得翻译后的手语姿势的含义便于理解和沟通,对组合后的手语姿势的含义进行校正。例如,聋哑用户用手语问对方;“中午吃什么?”,将“中午吃什么?”的手语姿势拆分为“中午”、“吃”、“什么”,并分别从将上述单个手势动作与数据库中存储的手势动作比对,获取到各单个手势动作对应的含义,再按照顺序,对翻译后的手势动作的含义进行组合,根据日常表达习惯,对翻译后的手语姿势的含义进行校正,使得对方容易理解。步骤S400:将手语姿势翻译成文字或者语音。根据实际需要,用户可以选择将手语姿势翻译成文字或者语音。例如,聋哑用户佩戴有专用的支持手语翻译的智能眼镜,能够实时获取聋哑用户的手势姿势,并将翻译成文字或者语音的手语姿势呈现给对方。用户选择将手语姿势翻译成文字时,翻译后,可以将文字呈现在智能终端上,对方可以从聋哑用户的智能终端的屏幕上获取到翻译后的文字内容。当用户选择将手语姿势翻译成语音时,可以将翻译后的语音通过智能眼镜或者通过智能终端将语音播放给对方。步骤S500:将翻译后的文字或者语音呈现给对方。用户选择将手语姿势翻译成文字时,翻译后,可以将文字呈现在智能终端上,对方可以从聋哑用户的智能终端的屏幕上获取到翻译后的文字内容。当用户选择将手语姿势翻译成语音时,可以将翻译后的语音通过智能眼镜或者通过智能终端将语音播放给对方。步骤S600:接收对方的语音。用户通过终端或者智能眼镜等可穿戴设备,接收对方与用户交流时输入的语音。步骤S700:将对方语音翻译成对应含义的手语姿势。接收到对方输入的语音后,解析对方语音的含义,并拆分成单个词组,按照顺序从数据库中查找各词组对应的手语的姿势,并按照顺序将翻译成手语姿势的词组进行组合,根据日常表达习惯对其进行校正,使得对方能够理解。步骤S800:将翻译后的手语姿势呈现给用户。将翻译后的手语姿势,通过智能眼镜或者终端呈现给聋哑用户。如图2所示,图2是本专利技术另一实施例手语翻译方法的流程示意图。所述步骤S100:获取手语姿势,还包括以下步骤:步骤S110:摄像头模块捕捉用户手部的姿势。摄像头模块实时对用户手部的姿势进行捕捉。需要说明的是,摄像头模块可以装设在聋哑人专用的用语翻译手语的智能眼镜上,聋哑人用手语与人交流是,通常是身体正前方做出手语姿势,摄像头模块实时捕捉到用户手部的姿势。步骤S120:对用户手部的姿势进行实时记录及存储。在摄像头模块捕捉到用户手部的姿本文档来自技高网...

【技术保护点】
1.一种手语翻译方法,其特征在于,包括:S100:获取手语姿势;S200:对手语姿势进行分解;S300:识别手语姿势的含义;S400:将手语姿势翻译成文字或者语音;S500:将翻译后的文字或者语音呈现给对方;S600:接收对方的语音;S700:将对方语音翻译成对应含义的手语姿势;S800:将翻译后的手语姿势呈现给用户。

【技术特征摘要】
1.一种手语翻译方法,其特征在于,包括:S100:获取手语姿势;S200:对手语姿势进行分解;S300:识别手语姿势的含义;S400:将手语姿势翻译成文字或者语音;S500:将翻译后的文字或者语音呈现给对方;S600:接收对方的语音;S700:将对方语音翻译成对应含义的手语姿势;S800:将翻译后的手语姿势呈现给用户。2.根据权利要求1所述的一种手语翻译方法,其特征在于,所述步骤S100:获取手语姿势,包括:S110:摄像头模块捕捉用户手部的姿势;S120:对用户手部的姿势进行实时记录及存储;S130:筛选出用户手部姿势中的手语姿势。3.根据权利要求1所述的一种手语翻译方法,其特征在于,所述步骤S300:识别手语姿势的含义,包括:S310:获取到单个手语姿势的含义;S320:按照顺序对单个手语姿势的含义进行组合;S330:对组合后的手语姿势的含义进行校正。4.根据权利要求1所述的一种手语翻译方法,其特征在于,所述步骤S400:将手语姿势翻译成文字或者语音,包括:S410:用户选择将手语姿势翻译成文字还是语音;S420:根据用户的选择对手语姿势进行对应的翻译。5.根据权利要求1所述的一种手语翻译方法,其特征在于,所述步骤S700:将对方语音翻译成对应含义的手语姿势,包括:S710:对用户语音的内容进行解析;S720:将对方语音的内容按顺序拆分成单个词组;S730...

【专利技术属性】
技术研发人员:李光煌罗辉覃国秘朱鹏惠曾耀宽钟志威李万建
申请(专利权)人:深圳市赛亿科技开发有限公司
类型:发明
国别省市:广东,44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1