System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 助理系统的主动收听技术方案_技高网
当前位置: 首页 > 专利查询>元平台公司专利>正文

助理系统的主动收听技术方案

技术编号:40055942 阅读:8 留言:0更新日期:2024-01-16 21:56
在一个实施例中,一种方法包括:从第一客户端系统接收第一用户输入,该第一用户输入包括与助理xbot相关联的唤醒词;将助理xbot设置为收听模式,其中在该助理xbot处于收听模式时经由第一客户端系统提供连续非视觉反馈;在助理xbot处于收听模式时从第一客户端系统接收第二用户输入,该第二用户输入包括用户话语;基于用户话语的完成来确定第二用户输入已结束;以及将助理xbot设置为非活动模式,其中在助理xbot处于非活动模式时,经由第一客户端系统终止非视觉反馈。

【技术实现步骤摘要】
【国外来华专利技术】

本公开总体上涉及网络环境内的数据库和文件管理,尤其涉及用于智能助理系统的硬件和软件。


技术介绍

1、助理系统可以基于用户输入、位置感知和从各种在线源(例如,天气状况、交通拥堵、新闻、股票价格、用户日程、零售价格等)访问信息的能力的组合,来代表用户提供信息或服务。用户输入可以包括文本(例如,在线聊天)(尤其是在即时消息收发应用或其它应用中的文本)、语音、图像、运动或它们的组合。助理系统可以基于用户输入执行礼宾型服务(例如,预订晚餐、购买活动门票、进行旅行安排)或提供信息。助理系统还可以在无需用户发起或交互的情况下,基于在线信息和事件执行管理或数据处理任务。可以由助理系统执行的那些任务的示例可以包括日程管理(例如,向晚餐约会者发送用户由于交通状况而迟到的警报、更新双方的日程、以及改变餐厅预订时间)。该助理系统可以通过以下项的组合来实现:计算设备、应用编程接口(application programming interface,api)和用户设备上的激增的应用。

2、社交网络系统可以使其各用户(例如,个人或组织)能够与其交互和通过其而彼此交互,该社交网络系统可以包括社交网络网站。社交网络系统可以利用来自用户的输入,在社交网络系统中创建和存储与用户相关联的用户简档(user profile)。用户简档可以包括基本信息、通信信道信息和关于用户个人兴趣的信息。社交网络系统还可以利用来自用户的输入,创建和存储该用户与社交网络系统中的其他用户的关系的记录,并提供用于促进用户之间或用户之中的社交互动的服务(例如,资料/新闻推送帖子、照片共享、活动组织、消息传递、游戏、或广告)。

3、社交网络系统可以通过一个或多个网络将与其服务相关的内容或消息发送到用户的移动或其它计算设备。用户还可以在用户的移动或其它计算设备上安装软件应用,以访问用户的用户简档和社交网络系统内的其它数据。社交网络系统可以生成一组个性化的内容对象(例如,与用户相关联的其他用户的聚合故事的新闻推送)以显示给该用户。


技术实现思路

1、在特定实施例中,助理系统可以帮助用户获得信息或服务。助理系统可以使用户能够在有状态和多轮会话(stateful and multi-turn conversations)中通过各种模态(例如,音频、语音、文本、视觉、图像、视频、姿势、运动、活动、位置、方位)的用户输入与助理系统交互,以接收来自助理系统的帮助。作为示例而非限制,助理系统可以支持单模态输入(例如,仅语音输入)、多模态输入(例如,语音输入和文本输入)、混合/多模态输入、或它们的任何组合。由用户提供的用户输入可以与特定的助理相关任务相关联,并且可以包括例如用户请求(例如,对信息或执行动作的口头请求)、用户与和助理系统相关联的助理应用的交互(例如,经由触摸或姿势选择用户界面(ui)元素)、或者可以由助理系统检测和理解的任何其它类型的合适的用户输入(例如,由用户的客户端设备检测到的用户动作)。助理系统可以创建并存储用户简档,该用户简档包括与用户相关联的个人信息和上下文信息。在特定实施例中,助理系统可以使用自然语言理解(natural-language understanding,nlu)来分析用户输入。该分析可以基于用户的用户简档,以便更个人化和上下文感知的理解。助理系统可以基于该分析来解析与用户输入相关联的实体。在特定实施例中,助理系统可以与不同的代理交互以获得与所解析的实体相关联的信息或服务。助理系统可以通过使用自然语言生成(natural-language generation,nlg)为用户生成关于信息或服务的响应。通过与用户的交互,助理系统可以使用对话管理技术来管理和推进与用户的对话流。在特定实施例中,助理系统还可以通过汇总信息来帮助用户有效和高效地理解所获得的信息。助理系统还可以通过提供帮助用户与在线社交网络交互(例如,创建帖子、评论、消息)的工具来帮助用户更多地参与在线社交网络。该助理系统还可以帮助用户管理不同的任务,例如保持对事件的追踪。在特定实施例中,助理系统可以在没有用户输入的情况下,在与用户相关的时间基于用户简档主动执行与用户兴趣和偏好相关的任务。在特定实施例中,助理系统可以检查隐私设置以确保允许遵循用户的隐私设置来访问用户的简档或其它用户信息并执行不同任务。

2、在特定实施例中,助理系统可以经由构建在客户端侧过程和服务器侧过程上的混合架构来帮助用户。客户端侧过程和服务器侧过程可以是用于处理用户输入和向用户提供帮助的两个并行工作流。在特定实施例中,客户端侧过程可以在与用户相关联的客户端系统上本地执行。相比之下,服务器侧过程可以在一个或多个计算系统上远程执行。在特定实施例中,客户端系统上的仲裁器可以对如下进行协调:接收用户输入(例如,音频信号),确定是使用客户端侧过程、服务器侧过程还是客户端侧过程和服务器侧过程来响应用户输入,并分析来自每个过程的处理结果。仲裁器可以基于前述分析来指示客户端或服务器端的代理执行与用户输入相关联的任务。执行结果可以被进一步渲染作为到客户端系统的输出。通过利用客户端侧过程和服务器侧过程,助理系统可以有效地帮助用户优化使用计算资源,同时保护用户隐私并增强安全性。

3、在特定实施例中,在用户向启用助理的设备说唤醒词之后,在启用助理的设备的传声器正在收听用户并且用户正在讲话时,助理系统可以向用户提供主动的非视觉反馈(例如,音频和触觉)。连续非视觉反馈可以通过向用户提供助理系统正在主动收听其话语的指示来改善用户体验。在启用助理的设备与配套设备配对(例如,智能眼镜与智能手机配对)的情况下,该特征还可以具有如下好处:减少/消除由在配对的配套设备上正运行的助理配套应用的操作系统所导致的抑制(throttle)。尽管本公开描述了由特定系统以特定方式提供特定反馈,但是本公开考虑了由任何合适的系统以任何合适的方式提供任何合适的反馈。

4、在特定实施例中,助理系统可以从第一客户端系统接收第一用户输入,该第一用户输入包括与助理xbot相关联的唤醒词。然后,助理系统可以将助理xbot设置为收听模式。相应地,在助理xbot处于收听模式时,可以经由第一客户端系统提供连续非视觉反馈。在特定实施例中,在助理xbot处于收听模式时,助理系统可以从第一客户端系统接收第二用户输入,该第二用户输入包括用户话语。然后,助理系统可以基于用户话语的完成来确定第二用户输入已结束。助理系统还可以将助理xbot设置为非活动模式。在特定实施例中,在助理xbot处于非活动模式时,可以经由第一客户端系统终止非视觉反馈。在特定实施例中,第一用户输入和第二用户输入可以包括与助理系统的整个对话会话,或者可以是与助理系统的多轮对话会话的一部分。

5、随着操作容量的增加,主动收听存在某些技术挑战。一个技术挑战可包括,在客户端系统被锁定时,增加客户端系统上的助理系统的操作容量。本文所公开的实施例提出的用于解决该挑战的解决方案可以是经由客户端系统提供的连续非视觉反馈,这是因为操作系统可以在无需解锁客户端系统的情况下,响应于非视觉反馈而本文档来自技高网...

【技术保护点】

1.一种方法,所述方法包括:由一个或多个计算系统:

2.根据前述权利要求中任一项所述的方法,其中,所述一个或多个计算系统包括所述第一客户端系统。

3.根据前述权利要求中任一项所述的方法,其中,所述一个或多个计算系统包括配套设备,所述配套设备与所述第一客户端系统配对。

4.根据权利要求3所述的方法,其中,所述配套设备在所述唤醒词被接收到时处于锁定状态。

5.根据权利要求3所述的方法,其中,所述助理xbot与在所述配套设备上执行的配套应用相关联。

6.根据权利要求5所述的方法,其中,所述配套应用正作为后台应用在所述配套设备上执行,并且其中,所述配套设备允许所述配套应用访问低于阈值容量的计算容量;和/或优选地,所述方法还包括:

7.根据前述权利要求中任一项所述的方法,其中,所述第一客户端系统包括以下中的一者或多者:智能手机、智能眼镜、增强现实(AR)眼镜、虚拟现实(VR)头戴式视图器或智能手表。

8.根据前述权利要求中任一项所述的方法,还包括:

9.根据前述权利要求中任一项所述的方法,还包括

10.根据前述权利要求中任一项所述的方法,其中,所述一个或多个计算系统包括配套设备,所述配套设备与所述第一客户端系统配对,其中,所述方法还包括:

11.根据权利要求10所述的方法,其中,所述连续视觉反馈基于以下中的一者或多者:与所述助理xbot相关联的图标;所述收听模式的视觉指示;或光线。

12.一种或多种计算机可读非暂态存储介质,所述一种或多种计算机可读非暂态存储介质包含软件,所述软件在被执行时能够操作以:

13.根据权利要求12所述的介质,其中,所述第一客户端系统包括以下中的一者或多者:智能手机、智能眼镜、增强现实(AR)眼镜、虚拟现实(VR)头戴式视图器或智能手表;和/或优选地,其中,所述软件在被执行时还能够操作以:

14.一种系统,所述系统包括:一个或多个处理器;以及非暂态存储器,所述非暂态存储器耦接到所述处理器并且包括能够由所述处理器执行的指令,所述处理器在执行所述指令时能够操作以:

15.根据权利要求14所述的系统,其中,所述第一客户端系统包括以下中的一者或多者:智能手机、智能眼镜、增强现实(AR)眼镜、虚拟现实(VR)头戴式视图器或智能手表;和/或优选地,其中,所述处理器在执行所述指令时还能够操作以:

...

【技术特征摘要】
【国外来华专利技术】

1.一种方法,所述方法包括:由一个或多个计算系统:

2.根据前述权利要求中任一项所述的方法,其中,所述一个或多个计算系统包括所述第一客户端系统。

3.根据前述权利要求中任一项所述的方法,其中,所述一个或多个计算系统包括配套设备,所述配套设备与所述第一客户端系统配对。

4.根据权利要求3所述的方法,其中,所述配套设备在所述唤醒词被接收到时处于锁定状态。

5.根据权利要求3所述的方法,其中,所述助理xbot与在所述配套设备上执行的配套应用相关联。

6.根据权利要求5所述的方法,其中,所述配套应用正作为后台应用在所述配套设备上执行,并且其中,所述配套设备允许所述配套应用访问低于阈值容量的计算容量;和/或优选地,所述方法还包括:

7.根据前述权利要求中任一项所述的方法,其中,所述第一客户端系统包括以下中的一者或多者:智能手机、智能眼镜、增强现实(ar)眼镜、虚拟现实(vr)头戴式视图器或智能手表。

8.根据前述权利要求中任一项所述的方法,还包括:

9.根据前述权利要求中任一项所述的方法,还包括:

10.根据前述权利要求中任一项所述的方法...

【专利技术属性】
技术研发人员:瑞安·弗雷德里克·斯图尔特大卫·莱维森塔拉·拉曼南塞缪尔·斯蒂尔·诺特克莱夫·黑文·马丁森希斯·威廉·布莱克克里斯托夫·查兰德左正平罗欣·达巴斯崔振华伊恩·格雷夫斯普拉莫德·古鲁纳特劳埃德·希莱尔克里希纳·柴坦尼亚·戈皮塞蒂·斯里尼瓦斯陈元汇迈克尔·罗伯特·汉森刘白杨刘洪磊阿列克谢·根纳季耶维奇·苏尔科夫艾哈迈德·马格迪·哈米德·穆罕默德阿里雷扎·迪拉夫松艾米·劳森·贝尔曼普一鸣刘冰克里斯托弗·德保利克里斯托弗·E·巴尔梅斯丹尼尔·约翰·威格多丹尼斯·
申请(专利权)人:元平台公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1