一种多人唇语交互方法及装置制造方法及图纸

技术编号:43396015 阅读:22 留言:0更新日期:2024-11-19 18:12
本申请提出一种多人唇语交互方法及装置,该方法利用Netty框架部署WebSocket服务,实现多设备间实时连接。用户唇语指令经AI识别后,若成功则转为WebSocket消息体并简化为数字代码发送至服务端。服务端解码并据此向其他设备发送语音或提示。未识别指令则特殊处理。此方案通过WebSocket与数字编码,为复杂环境提供稳定高效的唇语交互解决方案。

【技术实现步骤摘要】

本申请属于唇语交互领域,尤其涉及一种多人唇语交互方法及装置


技术介绍

1、在日常的交互方式中,语音是交互与沟通最高效的方式。然而,在某些特定的业务场景,如消防救援、火灾救援以及军事行动等,由于环境中存在噪声以及有害气体的干扰,传统的语音交互方式的效果会大打折扣。为了在这些复杂环境下提升交互效率,唇语交互作为图形图像技术和模式识别的一个新型应用方向,逐渐得到了关注和应用。

2、唇语交互技术通过捕捉并分析用户的唇部动作,将其转化为可理解的指令或信息,从而实现了在噪声环境下或无法进行语音交流时的有效沟通。该技术不仅能够有效提升复杂环境下的语音交互效果,完善这些特定场景的交互方式,而且对于终端用户而言,唇语交互的操作性简单,易于上手,学习成本低,是一个友好且实用的交互技术。

3、然而,现有唇语交互技术在实际应用中仍存在一些缺陷和不足。由于需要在客户设备端引入对应的人工智能算法模型进行识别推理操作,这会导致客户设备端的算力负担加重,同时对网络通信的要求也较高。在网络波动的情况下,唇语交互的效果可能会受到较大影响,导致通信不稳定或信息传输失败本文档来自技高网...

【技术保护点】

1.一种多人唇语交互方法,其特征在于,包括:

2.根据权利要求1所述的多人唇语交互方法,其特征在于,还包括:

3.根据权利要求1所述的多人唇语交互方法,其特征在于,多个客户设备端发起WebSocket连接请求,与服务端连接,包括:

4.根据权利要求1所述的多人唇语交互方法,其特征在于,多个客户设备端发起WebSocket连接请求,与服务端连接,包括:

5.根据权利要求1所述的多人唇语交互方法,其特征在于,多个客户设备端发起WebSocket连接请求,与服务端连接,连接成功后包括:

6.一种多人唇语交互装置,其特征在于,包括:...

【技术特征摘要】

1.一种多人唇语交互方法,其特征在于,包括:

2.根据权利要求1所述的多人唇语交互方法,其特征在于,还包括:

3.根据权利要求1所述的多人唇语交互方法,其特征在于,多个客户设备端发起websocket连接请求,与服务端连接,包括:

4.根据权利要求1所述的多人唇语交互方法,其特征在于,多个客户设备端发起websocket连接请求,与服务端连接,包括:

5.根据权利要求1所述的多人唇语交互方法,其特征在于,多个客户设备端发起websocket连接请求,与服务端连接,连接成功后包括:

6.一种多人唇语...

【专利技术属性】
技术研发人员:张兴坤马其浩王志广卢鑫武嘉琛
申请(专利权)人:新兴际华科技天津有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1