语音交互方法、电子设备和存储介质技术

技术编号:36801456 阅读:20 留言:0更新日期:2023-03-08 23:47
本发明专利技术公开一种语音交互方法、电子设备和存储介质。在该方法中,监测对应语音请求过程的说话人音频;当所监测到的说话人音频处于说话保持状态时,获取对应说话保持状态的第一说话人音频的第一语音识别结果,并确定第一语音识别结果所对应的前置语义分析结果;当所监测到的说话人音频从说话保持状态转为说话结束状态时,获取对应说话结束状态的第二说话人音频的第二语音识别结果,并将第二语音识别结果与第一语音识别结果进行比较;如果第一说话人音频和第二说话人音频的语音识别结果一致,则基于前置语义分析结果进行语音反馈操作。由此,从整体上有效节省了语义解析的耗时,能在较大程度上加速语音交互的整体响应效果。较大程度上加速语音交互的整体响应效果。较大程度上加速语音交互的整体响应效果。

【技术实现步骤摘要】
语音交互方法、电子设备和存储介质


[0001]本专利技术属于互联网
,尤其涉及一种语音交互方法、电子设备和存储介质。

技术介绍

[0002]随着语音技术的不断发展,各种语音交互设备已经融入到了人们生活中的各个方面,例如语音购票机、语音聊天机器人等等。从设备接收到用户输入语音到反馈输出音频,中间涉及语音交互的全链路系统的各个处理模块,例如,语音采集模块、语音识别模块、语义理解模块和对话管理模块等。
[0003]在对语音交互系统进行性能评估时,对话响应时延是一项重要考核指标,对话响应时延包含各个模块的耗时,例如末帧识别延迟、语义分类解析时间和对话处理时间,等等。目前,为了降低对话响应时延,业内通常会对各个模块的处理耗时进行优化,但不论怎样,各个模块的处理还是存在一定的耗时,尤其是语义分类解析的时间,产品中领域包含越多,或领域内说法越多,语义分类解析耗时越长,导致对话响应时延的优化效果不够显著。
[0004]针对上述问题,目前业界暂时并未提供较佳的解决方案。

技术实现思路

[0005]本专利技术实施例提供一种语音交互方法、电子设备和存储介质,用于至少解决上述技术问题之一。
[0006]第一方面,本专利技术实施例提供一种语音交互方法,包括:监测对应语音请求过程的说话人音频;当所监测到的说话人音频处于说话保持状态时,获取对应说话保持状态的第一说话人音频的第一语音识别结果,并确定所述第一语音识别结果所对应的前置语义分析结果;当所监测到的说话人音频从所述说话保持状态转为说话结束状态时,获取对应说话结束状态的第二说话人音频的第二语音识别结果,并将所述第二语音识别结果与所述第一语音识别结果进行比较;如果所述第一说话人音频和所述第二说话人音频的语音识别结果一致,则基于所述前置语义分析结果进行语音反馈操作。
[0007]第二方面,本专利技术实施例提供一种电子设备,其包括:至少一个处理器,以及与所述至少一个处理器通信连接的存储器,其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行上述方法的步骤。
[0008]第三方面,本专利技术实施例提供一种存储介质,所述存储介质中存储有一个或多个包括执行指令的程序,所述执行指令能够被电子设备(包括但不限于计算机,服务器,或者网络设备等)读取并执行,以用于执行本专利技术上述方法的步骤。
[0009]第四方面,本专利技术实施例还提供一种计算机程序产品,所述计算机程序产品包括存储在存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时,使所述计算机执行上述方法的步骤。
[0010]本专利技术实施例的有益效果在于:
[0011]从语音交互全链路服务的视角出发,考虑到识别处理,语义处理和对话处理虽然在流程上是串行的过程,但在提前识别的语音识别结果与最终的语音识别结果一致的情况下,可以直接利用提前计算的语义结果进行处理,从整体上有效节省了语义解析的耗时,能在较大程度上加速语音交互的整体响应效果。
附图说明
[0012]为了更清楚地说明本专利技术实施例的技术方案,下面将对实施例描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0013]图1示出了根据本申请实施例的语音交互方法的一示例的流程图;
[0014]图2示出了图1中的步骤120的操作过程的一示例的流程图;
[0015]图3示出了根据本申请实施例的全链路语音交互系统的操作流程示意图;
[0016]图4示出了在VAD(Voice Activity Detection,语音端点检测)阶段提前触发识别解码的操作时序示意图;
[0017]图5为本专利技术的电子设备的一实施例的结构示意图。
具体实施方式
[0018]为使本专利技术实施例的目的、技术方案和优点更加清楚,下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本专利技术一部分实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本专利技术保护的范围。
[0019]需要说明的是,在不冲突的情况下,本专利技术中的实施例及实施例中的特征可以相互组合。
[0020]本专利技术可以在由计算机执行的计算机可执行指令的一般上下文中描述,例如程序模块。一般地,程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、元件、数据结构等等。也可以在分布式计算环境中实践本专利技术,在这些分布式计算环境中,由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中,程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
[0021]在本专利技术中,“模块”、“系统”等等指应用于计算机的相关实体,如硬件、硬件和软件的组合、软件或执行中的软件等。详细地说,例如,元件可以、但不限于是运行于处理器的过程、处理器、对象、可执行元件、执行线程、程序和/或计算机。还有,运行于服务器上的应用程序或脚本程序、服务器都可以是元件。一个或多个元件可在执行的过程和/或线程中,并且元件可以在一台计算机上本地化和/或分布在两台或多台计算机之间,并可以由各种计算机可读介质运行。元件还可以根据具有一个或多个数据包的信号,例如,来自一个与本地系统、分布式系统中另一元件交互的,和/或在因特网的网络通过信号与其它系统交互的数据的信号通过本地和/或远程过程来进行通信。
[0022]最后,还需要说明的是,在本文中,术语“包括”、“包含”,不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的
要素。在没有更多限制的情况下,由语句“包括
……”
限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
[0023]图1示出了根据本申请实施例的语音交互方法的一示例的流程图。关于本申请实施例方法的实施主体,其可以是具有语音采集功能和处理能力的终端(例如,手机、智能音箱等),也可以是具有语音处理能力的服务端(例如,云端服务器等),在此应不加限制。
[0024]如图1所示,在步骤110中,监测对应语音请求过程的说话人音频。示例性地,当用户发起语音交互操作请求时在预设时间段内持续采集音频数据,并过滤无效音频信息(例如,环境音频信息),以提取说话人音频。
[0025]在步骤120中,当所监测到的说话人音频处于说话保持状态时,获取对应说话保持状态的第一说话人音频的第一语音识别结果,并确定第一语音识别结果所对应的前置语义分析结果。这里,对用户进行语音交互时的说话人状态进行分类,区分说话保持状态和说话结束状态。
[0026]需说明的是,在语音交互的全链路处理过程中,一般是串行执行各个环节或模块的,需要在检测到用户单轮本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种语音交互方法,包括:监测对应语音请求过程的说话人音频;当所监测到的说话人音频处于说话保持状态时,获取对应说话保持状态的第一说话人音频的第一语音识别结果,并确定所述第一语音识别结果所对应的前置语义分析结果;当所监测到的说话人音频从所述说话保持状态转为说话结束状态时,获取对应说话结束状态的第二说话人音频的第二语音识别结果,并将所述第二语音识别结果与所述第一语音识别结果进行比较;如果所述第一说话人音频和所述第二说话人音频的语音识别结果一致,则基于所述前置语义分析结果进行语音反馈操作。2.根据权利要求1所述的方法,其中,如果所述第一说话人音频和所述第二说话人音频的语音识别结果不一致,则所述方法还包括:确定所述第二语音识别结果所对应的完全语义分析结果;基于所述完全语义分析结果进行语音反馈操作。3.根据权利要求1所述的方法,其中,所述监测对应语音请求过程的说话人音频,包括:获取语音交互请求,并解析所述语音交互请求所对应的说话人音频;基于具有对应预设的第一停顿时长的说话结束条件,识别所监测到的说话人音频是对应说话保持状态的还是对应说话结束状态的。4.根据权利要求3所述的方法,其中,所述基于具有对应预设停顿时长的说话结束条件,识别所监测到的说话人音频是对应说话保持状态的还是对应说话结束状态的,包括:实时检测说话人音频的录入停顿时间;当所述录入停顿时间达到所述第一停顿时长时,确定所监测到的说话人音频是对应说话结束状态的。5.根据权利要求4所述的方法,其中,在实时检测说话人音频的录入停顿时间之后,所述方法还包括:当所述录入停顿时间达到预设的第二停顿时长时,确定所监测到的说话人音频是对应说话保持状态的;其中,所述第二停顿时长小于所述第一停顿时长。6.根据权利要求...

【专利技术属性】
技术研发人员:朱成亚樊帅郭奕超吴旭貌
申请(专利权)人:思必驰科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1