用于操作语音辨识服务的方法和支持其的电子装置制造方法及图纸

提供了一种电子装置。电子装置包括处理器和存储器，其中存储器存储指令，指令在执行时使处理器：接收用户输入，该用户输入包括对需要至少一个参数的用于执行第一任务的请求但不包括全部至少一个参数；将与用户输入相关的第一数据发送到外部服务器；从外部服务器接收用于执行第一任务的电子装置的状态的第一序列；执行状态的第一序列中的并非全部而是一些，并同时显示第一序列中改变的状态中的至少一些；并且在执行第一序列中的一些之后，显示GUI，需要该GUI用于执行第一任务且GUI表示请求用户提供用户输入中省略的至少一个参数。

Methods for operating speech recognition services and electronic devices supporting them

An electronic device is provided. The electronic device includes a processor and a memory, wherein the memory stores instructions, which enable the processor to: receive user input, the user input includes a request for performing a first task that requires at least one parameter but does not include all at least one parameter; send the first data related to the user input to an external server; receive from an external server for execution The first sequence of the states of the electronic device that performs the first task; not all but some of the first sequence of the execution states, and at least some of the changed states in the first sequence are displayed simultaneously; and after some of the first sequence are executed, a GUI is displayed, which is required to perform the first task, and the GUI indicates that the user is requested to provide at least one parameter omitted in the user's input Number.

【技术实现步骤摘要】
【国外来华专利技术】用于操作语音辨识服务的方法和支持其的电子装置
本公开涉及语音输入处理技术。
技术介绍
近来的电子装置已提出各个方面的输入方案，作为针对与用户交互的一部分。例如，电子装置可操作语音输入方案，通过该语音输入方案，基于执行应用来输入根据用户的话语的语音数据。此外，电子装置可以通过辨识输入语音数据来导出用户的话语意图，并且可以执行对应于导出的话语意图的操作。这可以基于系统来实现。人工智能系统是一种实现人类智能的计算机系统，并且机器在自我训练的同时做出决定，并且机器的辨识速率随着时间的推移而得到提高。人工智能技术包括元素技术(例如，通过确定语言理解技术和用于辨识人类语言/字母的信息，在逻辑上进行推理和预测的推理/预测技术)，其通过利用机器学习(深度学习)技术来模拟人类大脑的功能，例如辨识和确定，这些技术使用自行分类/学习输入数据特征的算法和机器学习算法。上述信息仅作为背景信息呈现以帮助理解本公开。对于上述任何内容是否可以用于相对于本公开的现有技术，没有做出确定，也没有做出断言。
技术实现思路
技术问题本公开的方面旨在至少解决上述问题和/或缺点，并且至少提供下文所描述的优点。因此，本公开的一方面旨在提供一种用于操作语音辨识服务的方法，通过该方法，当用户的话语不足以引起用户的附加输入时，可以通过为用户的话语提供图形用户界面(GUI)来可靠地处理根据用户的话语的语音输入，并且还提供了支持操作语音辨识服务的电子装置。对应于用户的话语的执行电子装置的操作可以基于一系列序列，所述序列基于用户的话语中包括的信息而创建。因此，当用户的话语不充分或不明确时，不可能获得明确的信息，从而可能以不完整的状态生成序列。因此，电子装置不能完成对应于用户的话语意图的操作的执行，使得用户的语音输入无法得到处理或者处理的可靠性可能降低。解决方案根据本公开的方面，提供了一种电子装置。电子装置包括：壳体；显示器，其通过壳体的至少一部分暴露；麦克风；扬声器；通信电路；处理器，其电连接到显示器、麦克风、扬声器和通信电路；以及存储器，其电连接到处理器，其中所述存储器配置成存储至少一个应用程序，以及其中所述处理器在执行所述至少一个应用程序的指令时配置成：接收第一用户输入，所述第一用户输入包括对执行需要用于运行的至少一个参数的第一任务的请求但不包括全部至少一个参数，通过所述通信电路将与所述第一用户输入相关的第一数据发送到外部服务器，通过所述通信电路从所述外部服务器接收用于执行所述第一任务的、所述电子装置的状态的第一序列，由所述电子装置执行所述状态的所述第一序列中的一些状态而并非全部，同时通过所述显示器显示在所述第一序列中改变的状态中的至少一些，以及在执行所述第一序列中的所述一些状态之后，显示图形用户界面(GUI)，所述图形用户界面被需要用于执行所述第一任务并且表示请求用户在所述显示器的一部分中提供所述第一用户输入中所省略的至少一个参数。根据本公开的另一方面，提供一种支持语音辨识服务的操作的电子装置。电子装置包括：存储器，其被配置成存储至少一个应用；显示器，其被配置成输出应用的执行屏幕；麦克风，其被配置成接收语音信号；通信电路，其被配置成执行与至少一个外部装置的通信；以及处理器，其电连接到存储器、显示器、麦克风和通信电路。处理器被配置成：与执行所述电子装置的任务的请求相关地，接收第一用户输入，所述第一用户输入不包括执行所述任务所需的一条或多条参数信息中的至少一些，并将所述第一用户输入发送到第一外部装置，从所述第一外部装置接收第一序列，所述第一序列包括与执行所述电子装置的任务相关地、基于所述第一用户输入而创建的至少一个单元操作，通过执行包括在所述第一序列中的第一单元操作来输出结果屏幕，在执行第二单元操作的时间点处确定所述第一用户输入中的第一参数信息是否被省略，其中所述第二单元操作是基于在所述第一单元操作之后顺次包括在所述第一序列中但不包括在所述第一用户输入中的所述第一参数信息而执行的，确定所述第一参数信息的属性，以及在所述第一单元操作的所述结果屏幕的区域中显示特定GUI，所述特定GUI对应于所述第一参数信息的属性。根据本公开的另一方面，提供一种用于操作电子装置的语音辨识服务的方法。方法包括：与执行所述电子装置的任务的命令相关地，接收第一用户输入，所述第一用户输入不包括执行所述任务所需的一条或多条参数信息中的至少一些；将所述第一用户输入发送到第一外部装置；从所述第一外部装置接收第一序列，所述第一序列包括与执行所述电子装置的所述任务相关地、基于所述第一用户输入而创建的至少一个单元操作；在执行第二单元操作的时间点处确定所述第一用户输入中的第一参数信息是否被省略，其中所述第二单元操作是基于在所述第一单元操作之后顺次包括在所述第一序列中但不包括在所述第一用户输入中的所述第一参数信息而执行的；确定所述第一参数信息的属性；以及在所述电子装置的屏幕的区域中显示特定GUI，所述特定GUI对应于所述第一参数信息的属性。有益效果根据各种实施方式，当用户的话语不充分时，可以借助于通过GUI引入附加输入来提高根据用户的话语的语音输入的处理效率。根据各种实施方式，可以通过在与从用户的话语中省略的信息的属性相关的屏幕区域中显示GUI来明确地提供对附加输入的请求。此外，本公开可以提供直接或间接辨识的各种效果。从以下结合附图公开了本公开的各种实施方式的详细描述中，本公开的其他方面、优点和显著特征对于本领域技术人员将变得显而易见。附图说明从以下结合附图的描述中，本公开的某些实施方式的以上和其他方面、特征和优点将变得更加明显，在附图中：图1是示出根据本公开的实施方式的集成智能系统的视图；图2是示出根据本公开的实施方式的集成智能系统的用户终端的视图；图3是示出根据本公开的实施方式执行用户终端的智能应用的视图；图4是示出根据本公开的实施方式的集成智能系统的智能服务器的视图；图5是示出根据本公开的实施方式的由自然语言理解模块创建路径规则的方式的视图；图6是示出根据本公开的实施方式的建议模块的视图；图7是示意性地示出根据本公开的实施方式的针对不充分话语的用户终端操作的视图；图8a是示出根据本公开的实施方式的用户终端的元件与智能服务器以及相关的第一界面和第二界面之间的第一信号流的视图；图8b是示出根据本公开的实施方式的用户终端的元件与智能服务器以及相关的第三界面之间的第二信号流的视图；图8c是示出根据本公开的实施方式的用户终端的元件与智能服务器以及相关的第四界面到第六界面之间的第三信号流的视图；图8d是示出根据本公开的实施方式的用户终端的元件与智能服务器以及相关的第七界面到第九界面之间的第四信号流的视图；图9a是示出根据本公开的实施方式的第一形式的附加用户输入的视图；图9b是示出根据本公开的实施方式的第二形式的附加用户输入的视图；图9c是示出根据本公开的实施方式的第三形式的附加用户输入的视图；图10a本文档来自技高网...

【技术保护点】
1.一种电子装置，包括：/n壳体；/n显示器，通过所述壳体的至少一部分暴露；/n麦克风；/n扬声器；/n通信电路；/n处理器，电连接到所述显示器、所述麦克风、所述扬声器和所述通信电路；以及/n存储器，电连接到所述处理器，/n其中所述存储器配置成存储至少一个应用程序，以及/n其中所述处理器在执行所述至少一个应用程序的指令时配置成：/n接收第一用户输入，所述第一用户输入包括对执行需要用于运行的至少一个参数的第一任务的请求但不包括全部至少一个参数，/n通过所述通信电路将与所述第一用户输入相关的第一数据发送到外部服务器，/n通过所述通信电路从所述外部服务器接收用于执行所述第一任务的、所述电子装置的状态的第一序列，/n由所述电子装置执行所述状态的所述第一序列中的一些状态而并非全部，同时通过所述显示器显示在所述第一序列中改变的状态中的至少一些，以及/n在执行所述第一序列中的所述一些状态之后，显示图形用户界面(GUI)，所述图形用户界面被需要用于执行所述第一任务并且表示请求用户在所述显示器的一部分中提供所述第一用户输入中所省略的至少一个参数。/n

【技术特征摘要】
【国外来华专利技术】20170328 KR 10-2017-00395931.一种电子装置，包括：
壳体；
显示器，通过所述壳体的至少一部分暴露；
麦克风；
扬声器；
通信电路；
处理器，电连接到所述显示器、所述麦克风、所述扬声器和所述通信电路；以及
存储器，电连接到所述处理器，
其中所述存储器配置成存储至少一个应用程序，以及
其中所述处理器在执行所述至少一个应用程序的指令时配置成：
接收第一用户输入，所述第一用户输入包括对执行需要用于运行的至少一个参数的第一任务的请求但不包括全部至少一个参数，
通过所述通信电路将与所述第一用户输入相关的第一数据发送到外部服务器，
通过所述通信电路从所述外部服务器接收用于执行所述第一任务的、所述电子装置的状态的第一序列，
由所述电子装置执行所述状态的所述第一序列中的一些状态而并非全部，同时通过所述显示器显示在所述第一序列中改变的状态中的至少一些，以及
在执行所述第一序列中的所述一些状态之后，显示图形用户界面(GUI)，所述图形用户界面被需要用于执行所述第一任务并且表示请求用户在所述显示器的一部分中提供所述第一用户输入中所省略的至少一个参数。


2.根据权利要求1所述的电子装置，其中所述处理器还配置成：
在显示所述GUI之前，通过所述通信电路将为所述第一序列中的所述一些状态的执行结果的、与所述电子装置的状态相关的第二数据发送到所述外部服务器。


3.根据权利要求1所述的电子装置，其中所述处理器还配置成：
通过所述麦克风或所述显示器上的用户界面接收包括所省略的参数的第二用户输入；
通过所述通信电路将与所述第二用户输入相关的第三数据发送到所述外部服务器；以及
通过所述通信电路从所述外部服务器接收所述电子装置的状态的第二序列。


4.根据权利要求3所述的电子装置，其中所述处理器还配置成：
根据所述第二用户输入的接收来改变所述GUI。


5.根据权利要求3或4所述的电子装置，其中所述指令使所述处理器：在完全接收到所述第二用户输入之后移除所述GUI。


6.根据权利要求3所述的电子装置，其中所述处理器还配置成：
确定所述状态的所述第二序列是否包括已为执行所述第一任务而执行的、所述状态的所述第一序列中的一些状态；以及
通过使用所述状态的所述第二序列且同时不重复进行所述第一序列中的所执行的一些来完成所述第一任务。


7.一种支持语音辨识服务的操作的电子装置，所述电子装置包括：
存储器，配置成存储至少一个应用；
显示器，配置成输出所述应用的执行屏幕；
麦克风，配置成接收语音信号；
通信电路，配置成执行与至少一个外部装置的通信；以及
处理器，电连接到所述存储器、所述显示器、所述麦克风和所述通信电路，
其中所述处理器配置成：
与执行所述电子装置的任务的请求相关地，接收第一用户输入，所述第一用户输入不包括执行所述任务所需的一条或多条参数信...

【专利技术属性】
技术研发人员：尹永旼，吴荣一，姜炫宇，金镇热，金知贤，李多顺，全镛俊，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：韩国;KR