一种基于大语言模型的汉语手语翻译方法及系统技术方案

技术编号:43677121 阅读:23 留言:0更新日期:2024-12-18 21:00
本公开提供了一种基于大语言模型的汉语手语翻译方法及系统,属于手语翻译技术领域,该方法包括:响应于收到第一信息,对第一信息进行手势识别,得到第一文本信息;对第一文本信息进行翻译,生成并输出第一翻译信息,第一信息包括第二设备发送的手势图像,第一翻译信息包括第一信息对应的文本数据;响应于收到第二信息,对第二信息进行手语翻译,得到第二文本信息;对第二文本信息进行翻译,生成并向第二设备发送第二翻译信息,第二信息包括待识别的文本数据和/或语音数据,第二翻译信息包括第二信息对应的手势图像。本公开提供的一种基于大语言模型的汉语手语翻译方法及系统能够提升用户交流中手势识别和翻译的准确性及实时处理能力。

【技术实现步骤摘要】

本公开属于手语翻译,更具体地说,是涉及一种基于大语言模型的汉语手语翻译方法及系统


技术介绍

1、在当前社会,听力障碍者和听力正常者之间的沟通障碍给教育、就业和社交等生活的各个方面带来了重大挑战。传统的手语翻译并非总是可用,现有的自动化解决方案往往缺乏准确性和实时处理能力。因此,需要一个强大的、高效的、准确的实时手语翻译方法,可以准确地解释中国手语手势并将其转换为文本和语音,以及将语音或书面文字翻译成手语手势,以增强沟通和包容性。


技术实现思路

1、本公开的目的在于提供一种基于大语言模型的汉语手语翻译方法及系统,以提升用户交流中手势识别和翻译的准确性和实时处理能力。

2、本公开实施例的第一方面,提供了一种基于大语言模型的汉语手语翻译方法,应用于第一设备,包括:

3、响应于收到第一信息,对第一信息进行手势识别,得到第一文本信息;对第一文本信息进行翻译,生成并输出第一翻译信息,第一信息包括第二设备发送的手势图像,第二设备为与第一设备连接的设备,第一翻译信息包括第一信息对应的文本数据;...

【技术保护点】

1.一种基于大语言模型的汉语手语翻译方法,其特征在于,应用于第一设备,包括:

2.如权利要求1所述的一种基于大语言模型的汉语手语翻译方法,其特征在于,所述对所述第一信息进行手势识别,得到第一文本信息,包括:

3.如权利要求1所述的一种基于大语言模型的汉语手语翻译方法,其特征在于,所述对所述第一文本信息进行翻译,生成并输出第一翻译信息,包括:

4.如权利要求1所述的一种基于大语言模型的汉语手语翻译方法,其特征在于,所述对所述第二信息进行手语翻译,得到第二文本信息,包括:

5.如权利要求1所述的一种基于大语言模型的汉语手语翻译方法,其特征在于,...

【技术特征摘要】

1.一种基于大语言模型的汉语手语翻译方法,其特征在于,应用于第一设备,包括:

2.如权利要求1所述的一种基于大语言模型的汉语手语翻译方法,其特征在于,所述对所述第一信息进行手势识别,得到第一文本信息,包括:

3.如权利要求1所述的一种基于大语言模型的汉语手语翻译方法,其特征在于,所述对所述第一文本信息进行翻译,生成并输出第一翻译信息,包括:

4.如权利要求1所述的一种基于大语言模型的汉语手语翻译方法,其特征在于,所述对所述第二信息进行手语翻译,得到第二文本信息,包括:

5.如权利要求1所述的一种基于大语言模型的汉语手语翻译方法,其特征在于,所述对所述第二文本信息进行翻译,生成并向所述第二设备发送第二翻...

【专利技术属性】
技术研发人员:叶显锋李涛王超
申请(专利权)人:河北知时数据科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1