信息处理方法、系统、电子设备和计算机可读存储介质技术方案

本发明专利技术实施例公开了一种信息处理方法、系统、电子设备和计算机可读存储介质，该方法包括：获取所述第一处理装置采集的手势姿态信息，并根据动作识别模型对所述手势姿态信息进行识别；当识别出所述手势姿态信息与预设标准姿态信息匹配时，通过所述第一处理装置输出与所述手势姿态信息对应的第一输出信息；获取所述第二处理装置采集的语音信息，并根据语音识别模型对所述语音信息进行识别；当识别出所述语音信息与预设音频信息匹配时，通过所述第二处理装置输出与所述语音信息对应的第二输出信息。通过上述方法，丰富了聋哑人与正常人之间的沟通交流方式，使聋哑人与正常人能够高效沟通。

【技术实现步骤摘要】
信息处理方法、系统、电子设备和计算机可读存储介质
本专利技术涉及计算机
，尤其涉及一种信息处理方法、系统、电子设备和计算机可读存储介质。
技术介绍
随着社会的科技发展和进步，聋哑人群越来越得到社会的关注和重视，聋哑人群需要更高效率的与正常人进行沟通，来满足生活、工作等需求，而正常人也需要更好的理解与聋哑人沟通过程中所表达的内容，因此通过辅助产品来实现正常人与聋哑人之间的沟通显得尤为重要。传统的辅助沟通产品通常需要聋哑人长期佩带设备，识别手语精准度不高，并且交流方式单一，导致单方面的沟通方式无法满足不同人群的需求，例如：当聋哑人使用手语沟通时，不懂手语的正常人无法理解到聋哑人需要表达的内容；或者，当不懂手语的正常人说话时，聋哑人无法理解正常人所表达的内容。因此，现有的社交方法和方式无法全面性的满足聋哑人在沟通方面的需求，如何满足聋哑人与正常人高效的沟通，成为亟待解决的问题。
技术实现思路
本专利技术实施例提供一种信息处理方法、系统、电子设备和计算机可读存储介质，丰富了沟通交流方式，使聋哑人与正常人能够高效沟通。一种信息处理方法，应用于便于聋哑人与正常人沟通的信息处理系统，所述信息处理系统包括第一处理装置和第二处理装置，所述第一处理装置用于处理第一类用户的手势姿态信息，所述第二处理装置用于处理第二类用户的语音信息；所述方法包括：获取所述第一处理装置采集的手势姿态信息，并根据动作识别模型对所述手势姿态信息进行识别；当识别出所述手势姿态信息与预设标准姿态信息匹配时，通过所述第一处理装置输出与所述手势姿态信息对应的第一输出信息；获取所述第二处理装置采集的语音信息，并根据语音识别模型对所述语音信息进行识别；当识别出所述语音信息与预设音频信息匹配时，通过所述第二处理装置输出与所述语音信息对应的第二输出信息。可选的，在其中一个实施例中，所述第一处理装置包括图像采集模块；所述获取所述第一处理装置采集的手势姿态信息，包括：获取所述图像采集模块采集的具有所述手势姿态信息的图像；分析所述图像中的手势特征；其中所述手势特征包括形状、运动轨迹、颜色、轮廓、深度中的一种或一种以上。可选的，在其中一个实施例中，在所述根据动作识别模型对所述手势姿态信息进行识别之前，所述方法还包括：采集国际标准手语的手势特征作为预设标准姿态信息，并建立所述预设标准姿态信息与所述第一输出信息的对应关系。可选的，在其中一个实施例中，所述第一处理装置还包括音频播放模块和第一显示模块，所述第一输出信息包括语音信息和文字信息；所述通过所述第一处理装置输出与所述手势姿态信息对应的第一输出信息，包括：通过所述音频播放模块播放与所述手势姿态信息对应的语音信息；通过所述第一显示模块显示与所述手势姿态信息对应的文字信息。可选的，在其中一个实施例中，所述第二处理装置包括音频采集模块，所述获取所述第二处理装置采集的语音信息，并根据语音识别模型对所述语音信息进行识别，包括：建立预设音频信息与所述第二输出信息的映射关系；获取基于所述第二处理装置中的音频采集模块采集的语音信息；对所述语音信息进行预处理，并根据所述预设音频信息与第二输出信息的映射关系，确定与所述语音信息对应的第二输出信息。可选的，在其中一个实施例中，所述第二处理装置还包括第二显示模块，所述通过所述第二处理装置输出与所述语音信息匹配的第二输出信息，包括：基于所述第二处理装置中的第二显示模块输出所述第二输出信息，其中所述第二输出信息包括文字、手势动作、动画中的一种或一种以上。可选的，在其中一个实施例中，所述方法还包括：建立存储多个数据信息的数据库；所述数据信息包括预设标准姿态信息和预设语音信息；对同一个数据信息进行特征学习，并根据预设训练模型对每个所述数据信息进行模拟训练；根据训练后的数据信息更新所述数据库中的原有数据信息。一种信息处理系统，所述信息处理系统包括第一处理装置和第二处理装置，所述第一处理装置用于处理第一类用户的手势姿态信息，所述第二处理装置用于处理第二类用户的语音信息；其中，所述第一处理装置包括第一控制模块，所述第一控制模块用于获取所述第一处理装置采集的手势姿态信息，并根据动作识别模型对所述手势姿态信息进行识别，当识别出所述手势姿态信息与预设标准姿态信息匹配时，通过所述第一处理装置输出与所述手势姿态信息对应的第一输出信息；所述第二处理装置包括第二控制模块，所述第二控制模块用于获取所述第二处理装置采集的语音信息，并根据语音识别模型对所述语音信息进行识别，当识别出所述语音信息与预设音频信息匹配时，通过所述第二处理装置输出与所述语音信息匹配的第二输出信息。一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现所述方法的步骤。一种计算机可读存储介质，包括计算机指令，当所述计算机指令在计算机上运行时，使得计算机执行所述方法的步骤。实施本专利技术实施例，将具有如下有益效果：上述信息处理方法、系统、电子设备和计算机可读存储介质，通过获取第一处理装置采集的手势姿态信息，并根据动作识别模型对手势姿态信息进行识别，当识别出手势姿态信息与预设标准姿态信息匹配时，通过第一处理装置输出与手势姿态信息对应的第一输出信息，能够将聋哑人的手势姿态信息转换为正常人能理解的信息。通过获取第二处理装置采集的语音信息，并根据语音识别模型对语音信息进行识别，当识别出语音信息与预设音频信息匹配时，通过第二处理装置输出与语音信息对应的第二输出信息，能够将正常人的语音信息转换为聋哑人能理解的信息；因此，通过上述方法，丰富了聋哑人与正常人之间的沟通交流方式，使聋哑人与正常人能够高效沟通。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。其中：图1为一个实施例中信息处理方法的流程示意图；图2为另一个实施例中信息处理方法的流程示意图；图3为另一个实施例中信息处理方法的流程示意图；图4为另一个实施例中信息处理方法的流程示意图；图5为一个实施例中信息处理系统的结构框图；图6为一个实施例中电子设备的内部结构示意图。具体实施方式为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。除非另有定义，本文所使用的所有的技术和科学术语与属于本申请的
的技术人员通常理解的含义相同。本文中在本申请的说明书中所使用的术语只是为了描述具体的实施例的目的，不是旨在限制本申请。可以理解，本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种元件，但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说，在不脱离本申请的范围的情况下，可以将第一应用程序称为第二应用程序，且类似地，可将第二进应用程序为第一应用程序。第一应用程序和第二应用程序两者都是应用程序，但其不是同一应用程序。以下提供一种信息处理方法，该信息处理方法应用于便于聋哑人与正常人沟通的信本文档来自技高网...

【技术保护点】
1.一种信息处理方法，应用于便于聋哑人与正常人沟通的信息处理系统，其特征在于，所述信息处理系统包括第一处理装置和第二处理装置，所述第一处理装置用于处理第一类用户的手势姿态信息，所述第二处理装置用于处理第二类用户的语音信息；所述方法包括：获取所述第一处理装置采集的手势姿态信息，并根据动作识别模型对所述手势姿态信息进行识别；当识别出所述手势姿态信息与预设标准姿态信息匹配时，通过所述第一处理装置输出与所述手势姿态信息对应的第一输出信息；获取所述第二处理装置采集的语音信息，并根据语音识别模型对所述语音信息进行识别；当识别出所述语音信息与预设音频信息匹配时，通过所述第二处理装置输出与所述语音信息对应的第二输出信息。

【技术特征摘要】
1.一种信息处理方法，应用于便于聋哑人与正常人沟通的信息处理系统，其特征在于，所述信息处理系统包括第一处理装置和第二处理装置，所述第一处理装置用于处理第一类用户的手势姿态信息，所述第二处理装置用于处理第二类用户的语音信息；所述方法包括：获取所述第一处理装置采集的手势姿态信息，并根据动作识别模型对所述手势姿态信息进行识别；当识别出所述手势姿态信息与预设标准姿态信息匹配时，通过所述第一处理装置输出与所述手势姿态信息对应的第一输出信息；获取所述第二处理装置采集的语音信息，并根据语音识别模型对所述语音信息进行识别；当识别出所述语音信息与预设音频信息匹配时，通过所述第二处理装置输出与所述语音信息对应的第二输出信息。2.根据权利要求1所述的方法，其特征在于，所述第一处理装置包括图像采集模块；所述获取所述第一处理装置采集的手势姿态信息，包括：获取所述图像采集模块采集的具有所述手势姿态信息的图像；分析所述图像中的手势特征；其中所述手势特征包括形状、运动轨迹、颜色、轮廓、深度中的一种或一种以上。3.根据权利要求2所述的方法，其特征在于，在所述根据动作识别模型对所述手势姿态信息进行识别之前，所述方法还包括：采集国际标准手语的手势特征作为预设标准姿态信息，并建立所述预设标准姿态信息与所述第一输出信息的对应关系。4.根据权利要求3所述的方法，其特征在于，所述第一处理装置还包括音频播放模块和第一显示模块，所述第一输出信息包括语音信息和文字信息；所述通过所述第一处理装置输出与所述手势姿态信息对应的第一输出信息，包括：通过所述音频播放模块播放与所述手势姿态信息对应的语音信息；通过所述第一显示模块显示与所述手势姿态信息对应的文字信息。5.根据权利要求1所述的方法，其特征在于，所述第二处理装置包括音频采集模块，所述获取所述第二处理装置采集的语音信息，并根据语音识别模型对所述语音信息进行识别，包括：建立预设音频信息与所述第二输出信息的映射关系；获取基于所述第二处理装置中的音频采...

【专利技术属性】
技术研发人员：魏尚利，
申请(专利权)人：深圳市漫牛医疗有限公司，
类型：发明
国别省市：广东,44