多模态下人机协同交互系统及方法技术方案

技术编号:43163029 阅读:21 留言:0更新日期:2024-11-01 19:55
本发明专利技术公开了多模态下人机协同交互系统及方法,涉及人机协同交互技术领域,包括:采集智能问答机器人拍摄的且画面中存在移动对象的监控视频,提取出目标移动对象,以及目标移动对象对应的人声话音;得到人声话音对应的人声语速,得到人声话音对应的应答文本,并获取应答文本中的每一关键词对应的关键系数;得到每一关键词的应答语速;根据任意两相邻的关键词,对两相邻的关键词之间的应答语速进行调整,进而得到应答文本对应的应答话音。本发明专利技术通过对智能问答机器人对应的监控视频进行分析,得到移动对象对应的人声话音,并根据人声话音,将机器人的语速调整至更贴合用户的需求,有助于提高人机协同交互的效率和流畅度。

【技术实现步骤摘要】

本专利技术涉及人机协同交互,具体是多模态下人机协同交互系统及方法


技术介绍

1、通过多模态技术,能实现人和机器之间协同合作进行交互,通过融合多种交互方式,使人与机器之间的交流更加自然、高效和智能。在商场里,经常存在能够帮助顾客寻找店铺或特定位置的智能问答机器人,这些智能问答机器人通常配备了语音识别和语音合成技术,能够通过语音交流与顾客进行沟通,顾客可以通过语音指令、触摸屏操作等多模态信息,实现与智能问答机器人的协同交互。然而,现有的智能问答机器人系统通常是根据预设的语速进行响应的,无法针对每个人的语速进行智能调整。这意味着每个人与智能问答机器人交流时,机器人的语速可能并不符合个体的语速习惯,导致交流不畅或者不舒适。所以根据每个人的语速,来调整智能问答机器人自身的语速,使得智能问答机器人在回应时能更贴合用户的需求,有助于提高人机协同交互的效率和流畅度,从而带来更个性化的交流体验。


技术实现思路

1、本专利技术的目的在于提供多模态下人机协同交互系统及方法,以解决现有技术中提出的问题。

2、为实现上述本文档来自技高网...

【技术保护点】

1.多模态下人机协同交互方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的多模态下人机协同交互方法,其特征在于,步骤S100包括以下步骤:

3.根据权利要求1所述的多模态下人机协同交互方法,其特征在于,步骤S200包括以下步骤:

4.根据权利要求3所述的多模态下人机协同交互方法,其特征在于,步骤S300包括以下步骤:

5.根据权利要求1所述的多模态下人机协同交互方法,其特征在于,步骤S400包括以下步骤:

6.多模态下人机协同交互系统,用于执行权利要求1-5中任意一项所述的多模态下人机协同交互方法,其特征在于,所述系统包...

【技术特征摘要】

1.多模态下人机协同交互方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的多模态下人机协同交互方法,其特征在于,步骤s100包括以下步骤:

3.根据权利要求1所述的多模态下人机协同交互方法,其特征在于,步骤s200包括以下步骤:

4.根据权利要求3所述的多模态下人机协同交互方法,其特征在于,步骤s300包括以下步骤:

5.根据权利要求1所述的多模态下人机协同交互方法,其特征在于,步骤s400包括以下步骤:

6.多模态下人机协...

【专利技术属性】
技术研发人员:赵国江赵国智赵岁民
申请(专利权)人:深圳市江智工业技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1