一种语音仿生手语双向翻译系统技术方案

本实用新型专利技术提供了一种语音仿生手语双向翻译系统，其包括：手语动作识别装置，配置成识别手语发出者的手势动作；文字或语言输出装置，配置成输出与手语动作识别装置识别得到的手势动作相对应的文字或语音；接收装置，配置成接收文字或语言发出者发出的文字或语音；具有机械手的仿生手语输出装置，配置成做出与接收装置接收的文字或语音相对应的手语的手势动作；以及控制装置。该语音仿生手语双向翻译系统，能够将聋哑人的手势动作转换成文字或语音，同时也能够将语音或文字转换成手语，克服了正常人与聋哑人之间的交流障碍；且使用机械手进行手语动作的三维表达，更直接、立体感强，可准确表达出正常人所要表达的意思。

【技术实现步骤摘要】

本技术涉及手语翻译
，特别是涉及一种语音仿生手语双向翻译系统。
技术介绍
现实生活中，正常人既可以获得视觉信息也可以获得听觉信息，聋哑人则只能利用视觉信息。正常人与聋哑人通常以手语作为媒介进行交流，但绝大多数正常人对手语知之甚少，根本无法与聋哑人进行会话，使得正常人与聋哑人之间存在难以克服的交流障碍。
技术实现思路
本技术的目的旨在克服正常人与聋哑人的交流障碍，提供一种语音仿生手语双向翻译系统。特别地，本技术提供了一种语音仿生手语双向翻译系统，其包括：手语动作识别装置，配置成识别手语发出者的手势动作；文字或语言输出装置，配置成输出与所述手语动作识别装置识别得到的手势动作相对应的文字或语音；接收装置，配置成接收文字或语言发出者发出的文字或语音；具有机械手的仿生手语输出装置，配置成做出与所述接收装置接收的文字或语音相对应的手语的手势动作；以及控制装置，与所述手语动作识别装置、所述文字或语言输出装置、所述接收装置和所述仿生手语输出装置均通信连接，配置成：将所述手语动作识别装置识别得到的手势动作翻译成相对应的文字或语言，以使所述文字或语言输出装置进行输出；和将所述接收装置接收的文字或语言翻译成相对应的手语的手势动作，以使所述仿生手语输出装置做出。可选地，所述机械手为两个，每个所述机械手包括：手掌；第一手指，其具有枢接于所述手掌的第一指节、枢接于所述第一指节的第二指节和枢接于所述第二指节的第三指节；第一电机，配置成驱动所述第一指节相对于所述手掌转动，以使所述第一手指进行摆动；第一蜷伸驱动机构，其具有第一拉线、第一复位装置和安装于所述手掌的第二电机，配置成驱动所述第一手指进行蜷伸运动；多个第二手指，每个所述第二手指具有枢接于所述手掌的连接块、枢接于所述连接块的第四指节、枢接于所述第四指节的第五指节和枢接于所述第五指节的第六指节；多个第三电机，每个所述第三电机配置成驱动一个所述连接块相对于所述手掌转动，以使每个所述第二手指进行摆动；多个第二蜷伸驱动机构，每个所述第二蜷伸驱动机构具有第二拉线、第二复位装置和安装于所述手掌的第四电机，配置成驱动一个所述第二手指进行蜷伸运动。可选地，所述第一复位装置包括两个扭簧，一个扭簧安装于所述第一指节和所述第二指节，另一扭簧安装于所述第二指节和所述第三指节；每个所述第二复位装置包括三个扭簧，一个扭簧安装于所述连接块和所述第四指节，另一扭簧安装于所述第四指节和所述第五指节，第三个扭簧安装于所述第五指节和所述第六指节；所述第一蜷伸驱动机构和每个所述第二蜷伸驱动机构均还包括拉线管。可选地，所述仿生手语输出装置还包括机身和安装于所述机身的两个机械臂，且每个所述机械臂包括：连接件，可转动地安装于所述机身；第五电机，安装于所述机身，配置成所述连接件相对于所述机身转动；第一手臂段，可转动地安装于所述连接件；第六电机，安装于所述机身，配置成带动所述第一手臂段相对于所述连接件转动；第二手臂段，可转动地安装于所述第一手臂段；第七电机，安装于所述第一手臂段，配置成带动所述第二手臂段相对于所述第一手臂段转动；第三手臂段，可转动地安装于所述第二手臂段；第八电机，安装于所述第二手臂段，配置成带动所述第三手臂段相对于所述第二手臂段转动；第四手臂段，可转动地安装于所述第三手臂段，且每个所述机械手的手掌可转动地安装于一个所述机械臂的第四手臂段；第九电机，安装于所述第三手臂段，配置成带动所述第四手臂段相对于所述第三手臂段转动；第十电机，安装于所述第四手臂段，配置成带动所述机械手相对于所述第四手臂段转动。可选地，所述第一电机、所述第二电机、每个所述第三电机、每个所述第四电机、第五电机、第六电机、第七电机、第八电机、第九电机和第十电机均为舵机。可选地，所述机身上还设置有显示装置，以显示所述接收装置接收的文字信息或与所述接收装置接收的语音相对应的文字信息。可选地，所述接收装置包括麦克风，设置于所述机身；所述文字或语言输出装置包括扬声器，设置于所述机身。可选地，手语动作识别装置包括手语手套和设置于手语手套上的传感器，以检测手语发出者的手势动作。可选地，所述手语动作识别装置和所述控制装置均包括无线传输模块。可选地，所述控制装置包括：设置于所述手语动作识别装置上的第一控制装置，以将所述手语动作识别装置识别得到的手势动作翻译成相对应的文字或语言，以使所述文字或语言输出装置进行输出；和设置于所述仿生手语输出装置上的第二控制装置，以将所述接收装置接收的文字或语言翻译成相对应的手语的手势动作，以使所述仿生手语输出装置做出；且所述文字或语言输出装置设置于所述手语动作识别装置上；所述接收装置设置于所述仿生手语输出装置上。本技术的语音仿生手语双向翻译系统因为具有手语动作识别装置、文字或语言输出装置、接收装置、仿生手语输出装置和控制装置，能够将聋哑人的手势动作转换成文字或语音，以供正常人接收聋哑人的信息；同时也能够将语音或文字转换成手语，以使聋哑人接收正常人的信息，克服了正常人与聋哑人之间的交流障碍，可广泛应用银行等公共领域，便于聋哑人正常办理业务。使用机械手进行手语动作的三维表达，更直接、立体感强，可准确表达出正常人所要表达的意思，以防止由于平面、二位动画等显示的手语的手势动作不够清晰明了，使聋哑人不能够准确了解正常人的意思。进一步地，本技术的语音仿生手语双向翻译系统因为采用手语手套，可准确检测手语发出者的手势动作，从而能够对手势动作进行更加精确的翻译，以使聋哑人的意思表达更准确。进一步地，本技术的语音仿生手语双向翻译系统中因为仿生手语输出装置可为32自由度仿生机械手臂（包括机械手和机械臂），做出相应手语的手势动作更加准确、规范，可使聋哑人准确领会正常人传递出来的信息。根据下文结合附图对本技术具体实施例的详细描述，本领域技术人员将会更加明了本技术的上述以及其他目的、优点和特征。附图说明后文将参照附图以示例性而非限制性的方式详细描述本技术的一些具体实施例。附图中相同的附图标记标示了相同或类似的部件或部分。本领域技术人员应该理解，这些附图未必是按比例绘制的。附图中：图1是根据本技术一个实施例的语音仿生手语双向翻译系统的示意性结构图；图2是根据本技术一个实施例的语音仿生手语双向翻译系统中机械手的示意性结构图；图3是图2所示机械手的示意性局部结构图；图4是根据本技术一个实施例的语音仿生手语双向翻译系统中机械臂和机械手组合后的示意性结构图。具体实施方式图1是根据本技术一个实施例的语音仿生手语双向翻译系统的示意性结构图。如图1所示，本技术实施例提供了一种语音仿生手语双向翻译系统，其可包括手语动作识别装置20、文字或语本文档来自技高网...

【技术保护点】
一种语音仿生手语双向翻译系统，其特征在于，包括：手语动作识别装置，配置成识别手语发出者的手势动作；文字或语言输出装置，配置成输出与所述手语动作识别装置识别得到的手势动作相对应的文字或语音；接收装置，配置成接收文字或语言发出者发出的文字或语音；具有机械手的仿生手语输出装置，配置成做出与所述接收装置接收的文字或语音相对应的手语的手势动作；以及控制装置，与所述手语动作识别装置、所述文字或语言输出装置、所述接收装置和所述仿生手语输出装置均通信连接，配置成：将所述手语动作识别装置识别得到的手势动作翻译成相对应的文字或语言，以使所述文字或语言输出装置进行输出；和将所述接收装置接收的文字或语言翻译成相对应的手语的手势动作，以使所述仿生手语输出装置做出。

【技术特征摘要】
1.一种语音仿生手语双向翻译系统，其特征在于，包括：
手语动作识别装置，配置成识别手语发出者的手势动作；
文字或语言输出装置，配置成输出与所述手语动作识别装置识别得到的手势动作相对应的文字或语音；
接收装置，配置成接收文字或语言发出者发出的文字或语音；
具有机械手的仿生手语输出装置，配置成做出与所述接收装置接收的文字或语音相对应的手语的手势动作；以及
控制装置，与所述手语动作识别装置、所述文字或语言输出装置、所述接收装置和所述仿生手语输出装置均通信连接，配置成：
将所述手语动作识别装置识别得到的手势动作翻译成相对应的文字或语言，以使所述文字或语言输出装置进行输出；和
将所述接收装置接收的文字或语言翻译成相对应的手语的手势动作，以使所述仿生手语输出装置做出。
2.根据权利要求1所述的语音仿生手语双向翻译系统，其特征在于，
所述机械手为两个，每个所述机械手包括：
手掌；
第一手指，其具有枢接于所述手掌的第一指节、枢接于所述第一指节的第二指节和枢接于所述第二指节的第三指节；
第一电机，配置成驱动所述第一指节相对于所述手掌转动，以使所述第一手指进行扭转运动；
第一蜷伸驱动机构，其具有第一拉线、第一复位装置和安装于所述手掌的第二电机，配置成驱动所述第一手指进行蜷伸运动；
多个第二手指，每个所述第二手指具有枢接于所述手掌的连接块、枢接于所述连接块的第四指节、枢接于所述第四指节的第五指节和枢接于所述第五指节的第六指节；
多个第三电机，每个所述第三电机配置成驱动一个所述连接块相对于所述手掌转动，以使每个所述第二手指进行摆动；
多个第二蜷伸驱动机构，每个所述第二蜷伸驱动机构具有第二拉线、第二复位装置和安装于所述手掌的第四电机，配置成驱动一个所述第二手指进行蜷伸运动。
3.根据权利要求2所述的语音仿生手语双向翻译系统，其特征在于，
所述第一复位装置包括两个扭簧，一个扭簧安装于所述第一指节和所述第二指节，另一扭簧安装于所述第二指节和所述第三指节；
每个所述第二复位装置包括三个扭簧，一个扭簧安装于所述连接块和所述第四指节，另一扭簧安装于所述第四指节和所述第五指节，第三个扭簧安装于所述第五指节和所述第六指节；
所述第一蜷伸驱动机构和每个所述第二蜷伸驱动机构均还包括拉线管。
4.根据权利要求2所述的语音仿生手语双向翻译系统，其特征在于，所述仿生手语输出装置还包括机身和安装于所述机身的两个机械臂，且每个所述机械臂包括：
连接件，可...

【专利技术属性】
技术研发人员：宋纪元，李浩亮，孙宇，卞甘甜，陈本海，房兆琦，宋静静，王石磊，徐科飞，
申请(专利权)人：宋纪元，李浩亮，孙宇，卞甘甜，陈本海，房兆琦，宋静静，王石磊，徐科飞，
类型：新型
国别省市：河南;41