集线器设备、包括集线器设备和多个设备的多设备系统及其操作方法技术方案

一种集线器设备、包括集线器设备的多设备系统及其操作方法可以包括：由集线器设备将接收的语音输入转换为文本；由集线器设备识别能够执行与所述文本相对应的操作的设备；从集线器设备和连接到集线器设备的多个其他设备当中识别哪个设备存储与能够执行对应于文本的操作的设备相对应的功能确定模型；以及基于识别的存储功能确定模型的设备是与集线器设备不同的设备，将文本的至少一部分发送到识别的设备，其中，集线器设备包括硬件处理器。集线器设备包括硬件处理器。集线器设备包括硬件处理器。

【技术实现步骤摘要】
【国外来华专利技术】集线器设备、包括集线器设备和多个设备的多设备系统及其操作方法


[0001]本公开涉及集线器设备、包括集线器设备的多设备系统以及操作所述集线器设备的方法。例如，根据实施例，集线器设备可以从集线器设备本身和多个其他电子设备当中确定用于在多设备环境中根据用户的意图(例如，包括在从用户接收的语音输入中)执行操作的操作执行设备(例如，物联网(IoT)设备)。根据实施例，集线器设备可以控制确定的操作执行设备。

技术介绍

[0002]随着多媒体技术和网络技术的发展，用户可以通过使用设备IoT设备(诸如空气净化器或电视机(TV))来接收各种服务。特别地，随着诸如虚拟个人助理技术的语音识别技术的发展，用户可以向设备(例如，收听设备)输入语音(例如，话语)，并可以通过服务提供代理(例如，虚拟助理)接收对语音输入的响应消息。
[0003]然而，在诸如包括多个IoT设备的家庭网络环境的多设备系统中，当用户想要通过使用尚未注册以通过语音输入等进行交互的未注册IoT设备来接收服务时，用户不得不不方便地注册IoT设备(例如，包括选择IoT设备以提供服务)。具体地，因为由多个IoT设备提供的服务的类型不同，所以需要能够识别包括在用户的语音输入中的意图并有效地提供相应服务的技术。
[0004]为了识别包括在用户的语音输入中的意图，可以使用人工智能(AI)技术，并还可以使用基于规则的自然语言理解(NLU)技术。当通过集线器设备接收到用户的语音输入时，因为集线器设备可能不会根据语音输入直接选择用于提供服务的设备，且不得不通过使用单独的语音助理服务提供服务器来控制设备，所以用户可能不得不支付网络使用费，并且因为使用语音助理服务提供服务器，所以响应速度降低。

技术实现思路

[0005]问题的解决方案
[0006]本公开涉及一种集线器设备、包括集线器设备和多个设备的多设备系统及其操作方法，并且更具体地，涉及一种集线器设备、多设备系统及其操作方法，集线器设备接收用户的语音输入，基于接收的语音输入根据用户的意图自动确定用于执行操作的设备，并根据确定的设备提供执行服务所需的多条信息。
[0007]另外的方面将部分地在下面的描述中阐述，并部分地将从描述中变得清楚，或可以通过实践本公开所呈现的实施例来学习。
附图说明
[0008]根据以下结合附图的描述，本公开的特定实施例的上述和其他方面、特征和优点将更加清楚，并且，相同的附图标记表示相同的结构元件，其中：
[0009]图1是图示根据本公开的实施例的包括集线器设备、语音助理服务器、物联网(IoT)服务器和多个设备的多设备系统的一些元件的框图；
[0010]图2是图示根据本公开的实施例的集线器设备的元件的框图；
[0011]图3是图示根据本公开的实施例的语音助理服务器的元件的框图；
[0012]图4是图示根据本公开的实施例的IoT服务器的元件的框图；
[0013]图5是图示根据本公开的实施例的多个设备的一些元件的框图；
[0014]图6是根据本公开的实施例的由集线器设备执行的基于语音输入来控制设备的方法的流程图；
[0015]图7是根据本公开的实施例的由集线器设备执行的向集线器设备、语音助理服务器和操作执行设备中的一个根据用户的语音输入提供文本的至少一部分的方法的流程图；
[0016]图8是根据本公开的实施例的操作集线器设备、语音助理服务器、IoT服务器和操作执行设备的方法的流程图；
[0017]图9是根据本公开的实施例的操作集线器设备和操作执行设备的方法的流程图；
[0018]图10是根据本公开的实施例的操作集线器设备和操作执行设备的方法的流程图；
[0019]图11是根据本公开的实施例的操作集线器设备、语音助理服务器、IoT服务器、第三方IoT服务器和第三方设备的方法的流程图；
[0020]图12A是图示根据本公开的实施例的集线器设备和多个设备的操作的概念图；
[0021]图12B是图示根据本公开的实施例的集线器设备和多个设备的操作的概念图；
[0022]图13是图示根据本公开的实施例的在其中集线器设备基于从收听设备接收的语音信号确定操作执行设备并将文本发送到存储与操作执行设备相对应的功能确定模型的设备的方法的流程图；
[0023]图14是图示根据本公开的实施例的在其中集线器设备将文本发送到存储与操作执行设备相对应的功能确定模型的设备的方法的流程图；
[0024]图15是图示根据本公开的实施例的操作集线器设备、语音助理服务器和收听设备的方法的流程图；
[0025]图16是图示根据本公开的实施例的操作集线器设备、语音助理服务器、收听设备和操作执行设备的方法的流程图；
[0026]图17是图示根据本公开的实施例的操作执行设备更新功能确定模型的示例的示图；
[0027]图18是图示根据本公开的实施例的操作集线器设备、语音助理服务器、IoT服务器和操作执行设备的方法的流程图；
[0028]图19是图示根据本公开的实施例的操作集线器设备、语音助理服务器、IoT服务器和新设备的方法的流程图；
[0029]图20是图示包括集线器设备、语音助理服务器和多个设备的多设备系统环境的示图；以及
[0030]图21A和图21B是图示根据本公开的实施例的可由集线器设备和语音助理服务器执行的语音助理模型的示图。
[0031]最佳实施方式
[0032]根据本公开的实施例，一种由集线器设备执行的基于语音输入来控制设备的方法
包括：接收用户的语音输入；通过执行自动语音识别(ASR)将接收的语音输入转换为文本；通过使用设备确定模型，基于所述文本确定操作执行设备；从连接到所述集线器设备的多个设备当中识别存储与确定的操作执行设备相对应的功能确定模型的设备；以及将所述文本的至少一部分提供给识别的设备。
[0033]设备确定模型可以包括第一自然语言理解(NLU)模型，被配置为分析文本并基于文本的分析结果来确定操作执行设备。
[0034]功能确定模型可以包括第二NLU模型，被配置为分析文本的至少一部分，并基于文本的至少一部分的分析结果来获得与要由确定的操作执行设备执行的操作相关的操作信息。
[0035]所述方法还可以包括从多个设备当中存储功能确定模型的至少一个设备获得关于存储在至少一个设备中的功能确定模型的信息，其中，所述功能确定模型用于确定与多个设备中的每一个相关的功能。
[0036]设备的识别可以包括：基于获得的关于功能确定模型的信息，识别存储与确定的操作执行设备相对应的功能确定模型的设备。
[0037]根据本公开的另一实施例，一种用于基于语音输入来控制设备的集线器设备包括：通信接口，被配置为与多个设备、语音助理服务器和物联网(IoT)服务器中的至少一个执行数据通信；麦克风，被配置为接收用户的语音输入；存储器，被配置为存储包括一个或多个指令的程序；以及处理器，被配置为执行存储在存储器中的程序的本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种方法，包括：基于由集线器设备接收到用户的语音输入：由集线器设备通过执行自动语音识别(ASR)将接收的语音输入转换为文本；由集线器设备识别能够执行与文本相对应的操作的设备；从集线器设备和连接到集线器设备的多个其他设备当中识别哪个设备存储与能够执行对应于文本的操作的设备相对应的功能确定模型；以及基于识别的存储功能确定模型的设备是与集线器设备不同的设备，将文本的至少一部分发送到识别的设备。2.根据权利要求1所述的方法，其中，识别能够执行所述操作的设备包括：使用第一自然语言理解(NLU)模型来分析文本；以及基于文本的分析结果来确定能够执行所述操作的设备，其中，NLU是设备确定模型。3.根据权利要求1所述的方法，还包括：使用包括在设备确定模型中的第二自然语言理解(NLU)模型来分析文本的至少一部分，并基于文本的至少一部分的分析结果来获得与对应于文本的操作相关的操作信息。4.根据权利要求1所述的方法，还包括：从存储所述功能确定模型的至少一个设备获得关于存储在至少一个设备中的所述功能确定模型的信息。5.根据权利要求4所述的方法，其中，识别哪个设备存储所述功能确定模型包括：基于获得的关于所述功能确定模型的信息，识别存储与能够执行所述操作的识别的设备相对应的所述功能确定模型的设备。6.一种用于基于语音输入来控制设备的集线器设备，所述集线器设备包括：通信接口，被配置为与多个设备、语音助理服务器和物联网(IoT)服务器中的至少一个执行数据通信；麦克风，被配置为接收用户的语音输入；存储器，被配置为存储包括一个或多个指令的程序；以及处理器，被配置为执行存储在存储器中的程序...

【专利技术属性】
技术研发人员：李连浩，朴相昱，吕国珍，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：