显示与语音输入相关联的视觉信息的方法及支持该方法的电子装置制造方法及图纸

本公开中公开的电子装置包括：显示器、包括通信电路系统的通信接口、处理器和存储器。所述存储器可被配置为存储指令，所述指令当被执行时，使所述处理器控制所述电子装置：确定外部装置是否正在输出与用户的话语输入相对应的语音响应，接收指定的用户交互，以及响应于所述用户交互而允许与所述语音响应相关联的视觉信息被显示在所述显示器上。的视觉信息被显示在所述显示器上。的视觉信息被显示在所述显示器上。

【技术实现步骤摘要】
【国外来华专利技术】显示与语音输入相关联的视觉信息的方法及支持该方法的电子装置


[0001]本公开涉及一种用于基于用户交互来显示与语音识别相关联的视觉信息的方法以及支持该方法的电子装置。

技术介绍

[0002]已经发布了基于用户的交互式语音输入来运行的各种装置。例如，诸如智能电话、平板个人计算机(PC)等这样的电子装置可执行与用户的语音命令相对应的应用(例如，Bixby和Siri)。应用可接收用户的话语输入，并且输出与所接收到的话语输入相关联的语音响应。
[0003]近来，已经发布了诸如与用户的语音命令相对应的人工智能扬声器、人工智能机器人这样的装置。此外，也在诸如冰箱、TV和洗衣机这样的家用电器中利用语音识别。

技术实现思路

[0004]技术问题
[0005]当响应于用户的语音输入而运行时，根据现有技术的电子装置提供与用户的话语输入相对应的语音响应。然而，经由与其他装置的链接来提供附加信息是不够的。当用户想要确认与语音响应相关联的附加信息时，用户必须通过具有单独的显示器的装置来确认应用的历史列表或者必须重新搜索。
[0006]技术方案
[0007]根据本公开的一个示例方面，一种电子装置包括：显示器；通信接口，所述通信接口包括被配置为执行与外部装置的无线通信的通信电路系统；处理器；以及存储器，所述存储器在操作上连接到所述处理器，其中所述存储器存储有指令，所述指令当被执行时，使所述处理器控制所述电子装置：确定所述外部装置是否正在输出与用户的话语输入相对应的语音响应，接收指定的用户交互，以及响应于所述用户交互而允许与所述语音响应相关联的视觉信息被显示在所述显示器上。
[0008]根据以下详细描述，本公开的其他方面、优点和突出特征将变得对本领域的技术人员而言是显而易见的，以下详细描述结合附图进行，公开了本公开的各种示例实施例。
[0009]专利技术的有益效果
[0010]根据本公开中公开的各种示例实施例的电子装置可在显示器上显示与通过单独的扬声器输出的语音响应相关联的视觉信息，使得用户可以容易地识别语音响应。
[0011]根据本公开中公开的各种示例实施例的电子装置可以在显示器上显示视觉信息，其中将附加信息添加到由单独的扬声器正在输出的语音响应。
[0012]根据本公开中公开的各种示例实施例的电子装置可直接在指定状态下执行与由单独的扬声器正在输出的语音响应相关联的应用。
附图说明
[0013]根据结合附图进行的以下详细描述，本公开的某些实施例的以上及其他方面、特征和优点将是更显而易见的，在附图中：
[0014]图1是示出了根据各种实施例的示例语音输出系统的图；
[0015]图2是示出了根据各种实施例的来自第一装置的语音响应的示例输出的流程图；
[0016]图3是示出了根据各种实施例的从第二装置输出视觉信息的示例过程的流程图；
[0017]图4是示出了根据各种实施例的发起用于从第一装置输出视觉信息的示例过程的示例信号的信号流图；
[0018]图5是示出了根据各种实施例的发起用于通过服务器从第一装置输出视觉信息的示例过程的示例信号的信号流图；
[0019]图6是示出了根据各种实施例的发起用于通过服务器从第二装置输出视觉信息的示例过程的示例信号的信号流图；
[0020]图7是示出了根据各种实施例的发起用于通过第一装置从第二装置输出视觉信息的示例过程的示例信号的信号流图；
[0021]图8是示出了根据各种实施例的第一装置的示例功能和第二装置的类型/交互的图；
[0022]图9是示出了根据各种实施例的视觉信息的示例显示和删除的图；
[0023]图10是示出了根据各种实施例的视觉信息的示例文本显示的图；
[0024]图11是示出了根据各种实施例的基于第二装置的类型来显示视觉信息的示例的图；
[0025]图12是示出了当根据各种实施例的第二装置是可穿戴装置时的示例用户交互的图；
[0026]图13是示出了根据各种实施例的通过执行除语音识别应用以外的应用对视觉信息的示例显示的图；
[0027]图14是示出了根据各种实施例的响应于来自第一装置的事件通知的示例过程的图；
[0028]图15是示出了根据各种实施例的在共享装置处执行的示例用户认证的图；
[0029]图16是示出了根据各种实施例的在第二装置中显示与语音响应相关联的图像的示例画面的图；以及
[0030]图17是示出了根据各种实施例的网络环境中的示例电子装置的框图。
[0031]在附图的描述中，相同或类似的附图标记可被用于相同或类似的部件。
具体实施方式
[0032]在下文中，将参考附图描述本公开的各种示例实施例。然而，应该理解，本公开的各种示例实施例不旨在将本文阐述的技术特征限于特定实施例，并且本公开的范围包括对应实施例的各种修改、等同形式和/或替代方案。在附图的描述中，相同或类似的附图标记可被用于相同或类似的部件。
[0033]图1是示出了根据各种实施例的示例语音输出系统的图。
[0034]参考图1，语音输出系统100可包括第一装置101、第二装置102和服务器103。第一
装置101、第二装置102和服务器103可经由有线或无线网络彼此连接。例如，第一装置101和第二装置102可以无线方式连接到网络装置(例如，AP)以进行WiFi通信。网络装置(例如，AP)可连接到服务器103。作为另一示例，第一装置101和第二装置102中的每一个可以是能够蜂窝通信的装置，并且可经由蜂窝通信连接到服务器103。作为另一示例，第一装置101和第二装置102可经由短距离无线通信(例如，BLE)彼此连接。
[0035]第一装置(或语音输出装置)(例如，AI扬声器)101可通过麦克风来接收用户105的话语输入110。第一装置101可分析话语输入110，并且提供与经分析的话语输入110相对应的语音响应120。第一装置101可通过内部操作或外部装置(例如，服务器103或单独的语音识别服务器(未示出))上的操作来分析话语输入110，并且输出相应的语音响应120。在示例实施例中，第一装置101可能不包括单独的显示器或者可以是具有分辨率等于或低于指定的分辨率的显示器的装置。
[0036]根据示例实施例，第一装置101可执行识别用户的交互式命令的语音识别应用(例如，Bixby或Siri)。第一装置101可通过用户的指定唤醒话语(例如，Hi，Bixby)来激活等待接收交互式命令的输入待机状态。第一装置101可在输入待机状态下接收用户的话语输入(例如，今天天气如何？)110。第一装置101可通过扬声器101a来输出与话语输入(例如，今天天气如何？)相对应的语音响应120(例如，今天将是晴天。最低温度将是19度并且最高温度将是...)。
[0037]第二装置102可以是具有显示器102a的装置。第二装置102可通过显示器102a来显示各种内容(例如，图像、文本、UI或表情本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种电子装置，所述电子装置包括：显示器；通信接口，所述通信接口包括被配置为执行与外部装置的无线通信的通信电路系统；处理器；以及存储器，所述存储器在操作上连接到所述处理器，其中所述存储器被配置为存储指令，所述指令当被执行时，使所述处理器控制所述电子装置：确定所述外部装置是否正在输出与用户的话语输入相对应的语音响应；接收指定的用户交互；以及响应于所述用户交互，允许与所述语音响应相关联的视觉信息被显示在所述显示器上。2.根据权利要求1所述的电子装置，其中所述指令当被执行时，使所述处理器控制所述电子装置：使用通过所述通信接口与所述外部装置的短距离通信来定义信道；以及通过所述信道来确认所述外部装置的状态。3.根据权利要求1所述的电子装置，其中所述指令当被执行时，使所述处理器控制所述电子装置：通过所述通信接口经由所述外部装置和网络装置来定义信道；以及通过所述信道来确认所述外部装置的状态。4.根据权利要求1所述的电子装置，其中所述指令当被执行时，使所述处理器控制所述电子装置：通过外部服务器来确认所述外部装置的状态。5.根据权利要求1所述的电子装置，所述电子装置还包括：传感器，所述传感器被配置为检测所述电子装置的状态，其中所述指令当被执行时，使所述处理器控制所述电子装置基于在所述电子装置中发生了指定的移动，通过所述传感器来确定发生了所述用户交互。6.根据权利要求1所述的电子装置，其中所述指令当被执行时，使所述处理器控制所述电子装置：基于在所述显示器上发生了触摸输入来确定发生了所述用户交互。7.根据权利要求1所述的电子装置，其中所述指令当被执行时，使所述处理器控制所述电子装置：基于在与所述电子装置关联地使用的配件装置中发生了指定的用户输入或者在所述配件装置中发生了指定的移动来确定发生了所述用户交互。8.根据权利要求1所述的电子装置，其中所述视觉信息包括...

【专利技术属性】
技术研发人员：金宗浩，孙廷周，蔡健浩，黄相雄，金桓彻，李定根，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：