用于控制外部设备的显示装置、系统和方法制造方法及图纸

提供了显示装置。该显示设备配置成控制附着有识别标记的至少一个外部设备。显示装置还包括成像传感器和通信器，其中，成像传感器配置成获取至少一个外部设备的图像，通信器配置成与服务器和至少一个外部设备中的至少之一进行通信。显示装置还包括处理器，该处理器配置成传送从图像中包括的识别标记获取的识别信息，并响应于从服务器或至少一个外部设备接收的用于控制至少一个外部设备的控制信息，控制显示器以基于所述控制信息将用于控制至少一个外部设备的对象与外部设备图像进行匹配并显示该对象。

Display device, system and method for controlling external equipment

A display device is provided. The display device is configured to control at least one external device attached to an identification tag. The display device also includes an imaging sensor and communicator, the imaging sensor is configured to at least one external image acquisition device, the communicator is configured to communicate with at least one of the server and at least one of the external devices. The display device also includes a processor, the processor is configured to transmit the identification information including the identification mark from the image acquisition, and in response to the server or from at least one external device receives the control information for controlling at least one external device, display control based on the control information will be used for the object and the external device control at least image an external device, and display the object.

【技术实现步骤摘要】
用于控制外部设备的显示装置、系统和方法相关申请的交叉引用本申请要求于2016年4月1日在韩国知识产权局提交的第10-2016-0040408号韩国专利申请的优先权，该申请的公开内容通过引用以其整体并入本文。
根据示例性实施方式的设备和方法涉及用于控制外部设备的显示装置、系统及其控制方法。
技术介绍
由于电子技术的发展，各种类型的电子产品已被开发出并得到普及。例如，多种显示装置(诸如，电视机(TV)、移动电话、个人计算机(PC)、智能电话、平板电脑和个人数字助理(PDA))已在大多数普通家庭中广泛使用。随着显示装置的使用增加，用户对更多种功能的需求也增加。具体地，由于可以在多种电子设备之间传送和接收信息，因此越来越需要通过一个电子设备来控制其它电子设备。例如，用户可以通过智能电话或可穿戴电子设备来控制外部电子设备，诸如空调、电视机、音频扬声器和其它电子设备。然而，当前使用的用户界面的缺点在于其缺乏允许用户容易地辨识的直观性。此外，当前使用的用户界面的缺点在于，由于它提供统一的集成控制窗口，它不反映环境的变化。例如，当外部电子设备的位置改变时，或者当外部电子设备被移除时，用户必须直接设置外部电子设备的位置或删除外部电子设备项目，这导致不便。
技术实现思路
示例性实施方式的一方面涉及配置成通过至少一个外部设备的图像来控制外部设备的显示装置、系统及其控制方法。根据示例性实施方式的一方面，提供了配置成控制附着有识别标记的至少一个外部设备的显示装置，该显示装置包括显示器、图像拾取单元或成像传感器、通信器或通信电路以及处理器，其中：图像拾取单元或成像传感器配置成获取与至少一个外部设备有关的图像；通信器或通信电路配置成与服务器和外部设备中的至少之一进行通信；处理器配置成传送从图像中包括的识别标记获取的识别信息，以及响应于从服务器或至少一个外部设备接收的用于控制外部设备的控制信息，基于所接收的控制信息来控制显示器以将用于控制外部设备的对象与外部设备图像进行匹配并显示该对象。控制信息可以包括以下中的至少之一：外部设备的当前状态、外部设备的控制参数、外部设备的名称、用于控制至少一个外部设备的软件以及与用于控制外部设备的对象有关的信息。至少一个外部设备的控制参数可以包括以下中的至少之一：控制功能的类型、每种类型的控制范围和每种类型的控制精度。对象可以包括以下中的至少之一：用于控制外部设备的开关图像、用于控制外部设备的按钮图像以及用于控制外部设备的远程控制图像。装置还可以包括配置成接收用户输入的输入单元，以及其中处理器响应于所接收的与对象有关的用户输入，可以基于外部设备的控制参数生成与用户输入对应的控制命令并将所生成的控制命令传送到外部设备。对象可以是能够操作为响应用户输入的图像，以及处理器可以生成与对象的操作状态对应的控制命令，并将所生成的控制命令传送到外部设备。处理器可以生成用户界面屏幕并使用户界面屏幕显示以用于控制和管理与所生成的对象匹配的外部设备。根据另一示例性实施方式的一方面，提供了包括有服务器和显示装置的系统，该系统包括：显示装置，配置成获取多个外部设备的图像，其中多个外部设备中的每个相应的外部设备附着有识别标记，以及显示装置配置成传送从图像中包括的多个识别标记获取的识别信息；以及服务器，配置成接收识别信息，并且作为响应，向显示装置传送用于控制多个外部设备中与所接收的多个识别信息的每个相应外部设备对应的每个外部设备的控制信息，以及显示装置基于所接收的控制信息，将用于控制多个外部设备中的每个外部设备的多个对象与多个外部设备图像中的相应外部设备图像进行匹配并显示该多个对象。根据另一示例性实施方式的一方面，提供了用于控制附着有识别标记的至少一个外部设备的显示装置的控制方法，该方法包括：获取至少一个外部设备的图像；将从图像中包括的识别标记获取的识别信息传送到服务器；从服务器接收用于控制外部设备的控制信息；以及基于从服务器接收的控制信息，将用于控制外部设备的对象与外部设备图像进行匹配并显示该对象。控制信息可以包括以下中的至少之一：外部设备的当前状态、外部设备的控制参数、外部设备的名称、用于控制外部设备的软件以及与用于控制外部设备的对象有关的信息。外部设备的控制参数可以包括以下中的至少之一：控制功能的类型、每种类型的控制范围和每种类型的控制精度。对象可以包括以下中的至少之一：用于控制外部设备的开关图像、用于控制外部设备的按钮图像以及用于控制外部设备的远程控制图像。该方法还可以包括：接收针对对象的用户输入；基于与对象对应的外部设备的控制参数生成与用户输入对应的控制命令；以及将所生成的控制命令传送到外部设备。对象可以是能够操作为响应用户输入的图像，以及将所生成的控制命令传送到外部设备可以包括：生成与对象的操作状态对应的控制命令以及将所生成的控制命令传送到外部设备。显示可以包括，生成并显示用户界面屏幕，其中用户界面屏幕用于控制和管理与对象匹配的外部设备。根据另一示例性实施方式的一方面，提供了包括有服务器和显示装置的系统的控制方法，该方法包括：通过显示装置分别获取附着有识别标记的多个外部设备的图像；通过服务器将用于控制多个外部设备中与所接收的多个识别信息中的每个信息对应的每个外部设备的控制信息传送到显示装置；以及基于所接收的控制信息，通过显示装置将用于控制多个外部设备中每个外部设备的多个对象与多个外部设备图像中的每个外部设备图像进行匹配并显示该多个对象。根据上述多种示例性实施方式，用户可以直接观看图像并控制外部设备，从而提供良好的直观性并增强用户的便利性。附图说明参照附图，示例性实施方式的上述和/或其它方面将更加明显，在附图中：图1是示出根据示例性实施方式的显示装置的配置的框图；图2和图3是用于示出根据示例性实施方式的与外部设备有关的图像的视图；图4是用于示出根据示例性实施方式的在显示装置与服务器之间传送和接收信息的过程的时序视图；图5是示出根据示例性实施方式的对象与多个外部设备图像中的每个外部设备图像匹配的视图；图6是示出根据另一示例性实施方式的显示装置100的配置的视图；图7是用于示出根据示例性实施方式的与对象有关的操作的视图；图8是用于示出根据示例性实施方式的显示装置实施为TV的情况的视图；图9是示出根据示例性实施方式的显示装置的具体配置的框图；图10是根据示例性实施方式的存储在存储设备中的软件模块的视图；图11是示出根据示例性实施方式的系统的配置的框图；图12是用于示出根据示例性实施方式的显示装置的控制方法的流程图；图13是用于示出根据示例性实施方式的显示装置的具体控制方法的流程图；以及图14是用于示出根据示例性实施方式的系统的控制方法的流程图。具体实施方式在下文中，将参照附图更详细地描述示例性实施方式。图1是示出根据示例性实施方式的显示装置100的配置的框图。参考图1，显示装置100包括显示器110、图像拾取单元120(例如，成像传感器)、通信器130(例如，通信电路)以及处理器140。此处，显示装置是用于控制附着有识别标记的至少一个外部设备的电子装置，以及可以实施为多种电子装置，诸如TV、电子黑板、电子台桌、大屏显示器(LFD)、智能电话、平板PC、台式PC、笔记本PC、机顶盒、智能手表、可穿戴设备或具有显示器的本文档来自技高网...

【技术保护点】
显示装置，配置成控制附着有识别标记的至少一个外部设备，所述装置包括：显示器；成像传感器，配置成获取所述至少一个外部设备的图像；通信器，配置成与服务器和所述至少一个外部设备中的至少之一进行通信；以及处理器，配置成传送从所述图像中包括的识别标记获取的识别信息，以及响应于从所述服务器或所述至少一个外部设备接收的用于控制所述至少一个外部设备的控制信息，基于所述控制信息来控制所述显示器以将用于控制所述至少一个外部设备的对象与外部设备图像进行匹配并显示所述对象。

【技术特征摘要】
2016.04.01 KR 10-2016-00404081.显示装置，配置成控制附着有识别标记的至少一个外部设备，所述装置包括：显示器；成像传感器，配置成获取所述至少一个外部设备的图像；通信器，配置成与服务器和所述至少一个外部设备中的至少之一进行通信；以及处理器，配置成传送从所述图像中包括的识别标记获取的识别信息，以及响应于从所述服务器或所述至少一个外部设备接收的用于控制所述至少一个外部设备的控制信息，基于所述控制信息来控制所述显示器以将用于控制所述至少一个外部设备的对象与外部设备图像进行匹配并显示所述对象。2.如权利要求1所述的装置，其中，所述控制信息包括以下中的至少之一：所述至少一个外部设备的当前状态、所述至少一个外部设备的控制参数、所述至少一个外部设备的名称、用于控制所述至少一个外部设备的软件以及与用于控制所述至少一个外部设备的对象相关的信息。3.如权利要求2所述的装置，其中，所述至少一个外部设备的控制参数包括以下中的至少之一：控制功能的类型、每种类型的控制范围以及每种类型的控制精度。4.如权利要求2所述的装置，其中，用于控制所述至少一个外部设备的对象包括以下中的至少之一：用于控制所述至少一个外部设备的开关图像、用于控制所述至少一个外部设备的按钮图像以及用于控制所述至少一个外部设备的远程控制图像。5.如权利要求3所述的装置，还包括：输入单元，配置成接收用户输入，其中，所述处理器响应于所接收的与所述对象有关的用户输入，基于所述至少一个外部设备的控制参数生成与所述用户输入对应的控制命令，以及将所生成的控制命令传送到所述至少一个外部设备。6.如权利要求5所述的装置，其中，所述对象是能够操作为响应于所述用户输入的图像，其中，所述处理器生成与所述对象的操作状态对应的控制命令，以及将所生成的控制命令传送到所述至少一个外部设备。7.如权利要求1所述的装置，其中，所述处理器生成用户界面屏幕并使得所述用户界面屏幕显示以用于控制和管理与所述对象匹配的所述至少一个外部设备。8.包括有服务器和显示装置的系统，所述系统包括：显示装置，配置成获取多个外部设备的图像，所述多个外部设备中的每个相应外部设备附...

【专利技术属性】
技术研发人员：安友蓝，咸喆熙，李泰永，丁朱英，丘起赫，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：韩国,KR