在自动化助理中接受话语时使用释义制造技术

自动化助理自动识别语音，解码所识别的语音中的释义，基于解码器输出执行动作或任务，并且向用户提供响应。响应可以是文本或音频，并且可以被翻译为包括释义。可以处理自动识别的语音以确定语音中的分区，这些分区可以进而被处理以标识分区中的释义。解码器可以处理输入的话语文本以标识要包括在片段或句子中的释义内容。解码器可以释义输入的话语以使得用一个或多个释义更新的话语更容易被解析器解析。翻译器可以处理所生成的响应以使响应听起来更自然。翻译器可以基于与用户的对话的状态(包括显著性数据)用释义内容替换所生成的响应的内容。

【技术实现步骤摘要】
【国外来华专利技术】在自动化助理中接受话语时使用释义
技术实现思路
一种系统可以包括自动化助理，自动化助理接收并且自动识别来自用户的语音，解码所识别的语音中的释义或者转换所识别的语音，基于解码器/转换器输出执行动作或任务，并且向用户提供响应。响应可以是文本或音频，并且可以被翻译为包括释义。可以处理自动识别的语音以确定语音中的分区，这些分区可以进而被处理以标识分区中的释义。一种解码器可以处理输入的话语文本以标识要包括在片段或句子中的释义内容。解码器可以释义输入的话语以使得用一个或多个释义更新的话语更容易被解析器220解析。输入话语可以使用诸如训练句子或片段等触发短语来解析。一种翻译器可以处理所生成的响应以使响应听起来更自然。翻译器可以基于与用户的对话的状态(包括显著性数据)用释义内容替换所生成的响应的内容。在一些实例中，一种提供自动化助理的系统可以包括自动语音识别模块和释义解码器。自动语音识别模块可以存储在存储器中并且由处理器可执行，使得在被执行时，自动语音识别模块接收语音数据，识别语音中的语言的单词，并且基于所识别的单词来输出单词数据。释义解码器可以存储在存储器中并且由处理器可执行，使得在被执行时，释义解码器标识所识别的单词中的第一组一个或多个单词，选择与第一组单词相关联的释义，并且生成释义解码器输出，释义解码器输出包括与第一组单词和除了第一组单词之外的所识别的单词相关联的释义。释义可以基于与解析器相关联的触发短语来选择。在一些实例中，一种提供自动化助理的系统可以包括自动语音识别模块和释义翻译器。生成器模块可以存储在存储器中并且由处理器可执行，使得在被执行时，该模块接收语音结构形式并且基于结构形式来渲染单词串。释义翻译器可以存储在存储器中并且由处理器可执行，使得在被执行时，翻译器标识单词串中的第一组单词，选择与第一组单词相关联的释义，并且生成释义翻译器输出，释义翻译器输出包括与第一组单词和除了第一组单词之外的所识别的单词相关联的释义。释义可以至少部分基于状态信息来选择。附图说明图1是使用释义的自动化助理的框图。图2是使用释义的自动化助理的服务器侧实现的框图。图3是用于提供使用释义的自动化助理的方法。图4是表示香肠(sausage)网络的框图。图5是通过解码器用释义替换语言输入的片段的方法。图6是示出由解码器提供并且添加到话语的释义的流程图。图7是用于通过翻译器用释义更新和输出的方法。图8是示出由翻译器提供并且添加到所生成的输出的释义的流程图。图9示出了用于实现本技术的计算环境。具体实施方式一种系统可以包括自动化助理，自动化助理接收并且自动识别来自用户的语音，将来自所识别的语音的文本解码为释义，基于解码器/转换器输出执行动作或任务，并且向用户提供响应。响应可以是文本或音频，并且可以被翻译为包括释义。可以处理自动识别的语音以确定语音中的分区，这些分区可以进而被处理以标识分区中的释义。自然语言的用户具有很多方式来向听众交谈含义。给定一个句子，用户可以明智地要求具有相同“含义”的第二句子。在自动化助理应用中，用户用语音或文本通信，并且系统用语言(文本或语音)和/或动作(例如，查找票证的价格)进行响应。本系统的上下文是自动化助理。释义可以用于修改用户的话语以更可能创建适当的代理响应(解码器实现)，或者可以用于修改代理回复以对用户看起来更自然(翻译器实现)。在任何一种情况下，意图在于，所释义的话语具有与非释义的话语相同的含义：在第一种情况下，系统对用户请求的响应应当是对用户的原始话语的适当响应，并且在第二种情况下，系统向用户传递的信息应当包含与原始系统响应相同的信息。一种解码器可以处理输入的话语文本以标识要包括在片段或句子中的释义内容。解码器可以释义输入话语以使得用一个或多个释义更新的话语更容易被解析器220解析。输入话语可以使用诸如训练句子或片段等触发短语来解析。一种翻译器可以处理所生成的响应以使响应听起来更自然。翻译器可以基于与用户的对话的状态(包括显著性数据)用释义内容替换所生成的响应的内容。图1是实现使用释义来接受话语的自动化助理的系统的框图。图1的系统100包括客户端110、移动设备120、计算设备130、网络140、网络服务器150、应用服务器160和数据存储170。客户端110、移动设备120和计算设备130通过网络140与网络服务器150通信。网络140可以包括专用网络、公共网络、因特网和内联网、WAN、LAN、蜂窝网络或适合于在图1的计算设备之间传输数据的某种其他网络。客户端110包括应用112。应用112可以提供自动语音识别、释义解码、转换和/或翻译、释义翻译、分区、自动化助理以及本文中讨论的其他功能。应用112可以实现为一个或多个应用、对象、模块或其他软件。应用112可以通过图1的服务器架构或直接(图1中未示出)与应用服务器160和数据存储170通信以访问大量数据。移动设备120可以包括移动应用122。移动应用可以提供自动语音识别、释义解码、转换和/或翻译、释义翻译、分区、自动化助理以及本文中讨论的其他功能。移动应用122可以实现为一个或多个应用、对象、模块或其他软件。计算设备130可以包括网络浏览器132。网络浏览器可以接收一个或多个内容页面、脚本代码以及当加载到网络浏览器中时提供自动语音识别、释义解码、转换和/或翻译、释义翻译、分区、自动化助理和本文中讨论的其他功能的其他代码。网络服务器150可以经由网络140从应用112、移动应用122和网络浏览器132接收请求和数据。请求可以由特定应用或浏览器应用发起。网络服务器150可以处理请求和数据，传输响应，或者向应用服务器160传输请求和数据或其他内容。应用服务器160包括应用162。应用服务器可以接收数据，包括从应用112和122以及浏览器132接收的数据请求，处理数据，以及向网络服务器150传输响应。在一些实现中，响应是由网络服务器152转发到最初发送请求的计算机或应用。应用的服务器160还可以与数据存储170通信。例如，可以从数据存储170访问数据以供应用使用以提供自动语音识别、释义解码、转换和/或翻译、释义翻译、分区、自动化助理和本文中讨论的其他功能。应用服务器160包括应用162，除了全部或部分地在应用服务器160上实现之外，应用162可以与应用112类似地操作。框200包括网络服务器150、应用服务器160和数据存储170，并且可以用于实现利用释义的自动化助理。在一些实例中，框200可以包括用于处理输入话语以使话语更容易解析的释义模块。在一些实例中，框200可以包括用于处理所生成的输出以便使其对用户更自然的释义模块。参考图2更详细地讨论框200。图2是利用释义的自动化助理的服务器侧部分的框图。图2的系统200包括自动语音识别(ASR)模块210、解析器220、输入释义模块(解码器)230、计算模块240、生成器250、状态管理器260、输出释义模块(翻译器)270和文本到语音(TTS)模块280。每个模块可以如箭头所示进行通信，并且可以另外与可以在或没有在图2中示出的其他模块、机器或系统通信。自动语音识别模块210可以从客户端110、移动设备120或计算设备130之一接收音频内容，诸如通过麦克风接收的内容，并且可以处理音频内容以标识语音。语音本文档来自技高网...

【技术保护点】
1.一种用于提供自动化助理的系统，包括：自动语音识别模块，存储在存储器中并且由处理器可执行，所述自动语音识别模块在被执行时接收语音数据，识别所述语音中的语言的单词，并且基于识别的所述单词来输出单词数据；以及释义解码器，存储在存储器中并且由处理器可执行，所述释义解码器在被执行时标识识别的所述单词中的第一组一个或多个单词，选择与所述第一组单词相关联的释义，并且生成释义解码器输出，所述释义解码器输出包括与所述第一组单词和除了所述第一组单词之外的识别的所述单词相关联的释义，所述释义基于与解析器相关联的触发短语被选择。

【技术特征摘要】
【国外来华专利技术】2016.08.24 US 62/379,152;2017.08.04 US 15/669,7951.一种用于提供自动化助理的系统，包括：自动语音识别模块，存储在存储器中并且由处理器可执行，所述自动语音识别模块在被执行时接收语音数据，识别所述语音中的语言的单词，并且基于识别的所述单词来输出单词数据；以及释义解码器，存储在存储器中并且由处理器可执行，所述释义解码器在被执行时标识识别的所述单词中的第一组一个或多个单词，选择与所述第一组单词相关联的释义，并且生成释义解码器输出，所述释义解码器输出包括与所述第一组单词和除了所述第一组单词之外的识别的所述单词相关联的释义，所述释义基于与解析器相关联的触发短语被选择。2.根据权利要求1所述的系统，还包括执行任务并且基于所述释义解码器输出来生成响应的自动化助理。3.根据权利要求1所述的系统，还包括将所述触发短语提供给所述释义解码器的解析器。4.根据权利要求3所述的系统，其中所述触发短语包括用于训练所述解析器的数据。5.根据...

【专利技术属性】
技术研发人员：J·D·安德烈斯，D·E·H·伯克特，陈鹏宇，J·R·科恩，G·C·杜雷特，L·S·吉利克，D·L·W·豪尔，D·克莱恩，A·D·保利斯，D·L·劳斯，J·D·E·卢萨克，Y·维瑞恩，C·C·吴特斯，
申请(专利权)人：语义设备公司，
类型：发明
国别省市：美国,US