用户终端设备、电子设备以及控制用户终端设备和电子设备的方法技术

技术编号:17959420 阅读:56 留言:0更新日期:2018-05-16 05:15
一种用户终端设备,包括:通信器,配置为与外部设备通信;触摸屏,配置为显示图像并接收触摸输入;以及控制器,配置为控制所述触摸屏以显示通过所述通信器从所述外部设备接收的图像,配置为响应于在显示在所述触摸屏上的图像上检测到触摸输入,控制所述触摸屏以显示与包括在所显示的图像中的对象相关联的第一指示符,所述第一指示符显示在检测到所述触摸输入的点处,并且配置为控制所述通信器以向所述外部设备传输与所述第一指示符有关的数据,所述数据包括要由所述外部设备用于确定要被包括在显示在所述外部设备中的图像中的第二指示符的位置的信息。

User terminal device, electronic device, and method for controlling user terminal equipment and electronic device

A user terminal device, including: communicator, configured to communicate with an external device; a touch screen, configured to display images and receive touch input; and a controller configured to control the touch screen to display an image received from the external device through the communicator, configured to respond to the touch displayed in the touch. The touch input is detected on the image on the screen, and the touch screen is controlled to display the first indicator associated with the object included in the displayed image, the first indicator is displayed at the point detected by the touch input, and is configured to control the communicator to transmit the first finger to the external device. The data in which the data is shown includes information to be used by the external device to determine the position of a second indicator to be included in an image displayed in the external device.

【技术实现步骤摘要】
【国外来华专利技术】用户终端设备、电子设备以及控制用户终端设备和电子设备的方法
根据示例性实施例的设备和方法涉及用户终端设备、电子设备以及控制用户终端设备和电子设备的方法,更具体地涉及用户终端设备、电子设备以及控制用户终端设备和电子设备的方法,通过该方法,由用户终端设备和电子设备共享图像,并且用户终端设备在共享图像中提供指示符。
技术介绍
近来,由用户佩戴并提供虚拟现实的电子设备(例如头戴式装置(HMD))引起了相当的关注。例如,当用户佩戴HMD时,他或她可以在与现实完全不同的虚拟世界中看到和享受逼真的三维(3D)视图。关于典型的基于二维(2D)的游戏,用户可以欣赏具有360度视角的比较逼真的游戏,因此用户可以欣赏从游戏内容引入了许多VR内容,并且也期望虚拟现实应用于远程教育、医药等各个领域,使用服务用于与偏远地区的经验分享。佩戴用户并提供3D类型虚拟现实的电子设备可以大致分为透视型(See-Throughtype)设备和看见关闭型(See-Closedtype)。看见关闭型设备可以允许仅仅在与现实完全不同的虚拟空间中进行各种体验,但是透视型设备可以将增强对象投影到现实空间以获得现实中的增强现实。用于提供虚拟现实的电子设备可以可操作地与外部用户终端设备相关联。通常,在用户终端设备和用于提供虚拟现实的电子设备之间存在单方面的信息传输和交互。也就是说,通常用户终端设备的信息被单方面地传输到电子设备,或者电子设备的图像可被单方面地传输到用户终端设备。也就是说,通常不可能在用户终端设备和用于提供虚拟现实的电子设备之间进行交互。
技术实现思路
【问题的解决方案】本公开的示例性实施例可以克服上述缺点以及以上没有描述的其他缺点。而且,示例性实施例不需要克服上述缺点,并且本公开的示例性实施例可以不克服上述任何问题。一个或多个示例性实施例提供了一种用户终端设备、电子设备以及控制用户终端设备和电子设备的方法,用于经由用户终端设备和电子设备之间的双向通信来提供更加直观和各种各样的用户环境。根据示例性实施例的一个方面,提供了一种用户终端设备,包括:通信器,配置为与外部电子设备通信;触摸屏,配置为显示图像并检测用户的触摸输入;以及控制器,配置为控制所述触摸屏以显示通过所述通信器从所述外部电子设备接收的图像,配置为响应于从显示在所述触摸屏上的图像检测到用户触摸,控制所述触摸屏以在检测到用户触摸的点处生成并显示指示包括在图像中的对象的指示符,并且配置为控制所述通信器以向所述外部电子设备传输关于指示符的数据。控制器可以控制通信器以一起接收所捕获的图像的多个图像帧和与多个图像帧相对应的相机姿态数据。控制器可以响应于根据用户命令选择所述多个图像帧中的一个并且响应于在所选择的图像帧的显示期间检测到用户触摸,控制所述触摸屏耦在检测到所选择的图像帧的用户触摸的点处生成并显示指示符,并且可以控制所述通信器一起传输关于指示符的数据和与所选择的图像帧相对应的相机姿态数据。用户终端设备可以以2D形式显示所捕获的图像和指示符,并且外部电子设备可以基于关于指示符的数据和与所选择的图像帧相对应的相机姿态数据以三维(3D)形式显示所捕获的图像和指示符。控制器可以控制通信器以接收所捕获的图像的一个图像帧,外部电子设备可以基于关于指示符的数据和与一个预先存储的图像帧相对应的相机姿态数据以3D形式显示所捕获的图像和指示符。控制器可以根据用户触摸的触摸压力和触摸大小中的至少一个来调整指示符的z轴位置。控制器可以根据用户触摸的触摸压力和触摸大小中的至少一个来调整指示符的厚度。控制器可以响应于基于用户触摸所选择的预先存储的指示符模型中的一个,控制触摸屏以在检测到用户触摸的点处生成并显示所选择的指示符模型。关于指示符的数据可以包括以下中的至少一个:用于显示指示符的位置的坐标值、指示符的形状、指示符的大小以及指示符的厚度。根据另一示例性实施例的一个方面,提供了一种控制用户终端设备的方法,该方法包括:接收由外部电子设备捕获的图像;显示图像;响应于从所显示的图像检测到用户触摸,在检测用户触摸的点处生成并显示指示包括在图像中的对象的指示符;以及将关于指示符的数据传输到外部电子设备。接收可以包括一起接收所捕获的图像的多个图像帧和与多个图像帧相对应的相机姿态数据。接收可以包括根据用户命令选择多个图像帧中的一个,并且响应于在显示所选择的图像帧期间检测到用户触摸,在检测到所选择的图像帧的用户触摸的点处生成并显示指示符,并且传输可以包括一起传输关于指示符的数据和与所选择的图像帧相对应的相机姿态数据。用户终端设备可以以2D形式显示所捕获的图像和指示符,并且外部电子设备可以基于关于指示符的数据和与所选择的图像帧相对应的相机姿态数据以3D形式显示所捕获的图像和指示符。接收可以包括接收所捕获的图像的一个图像帧,并且外部电子设备可以基于关于指示符的数据和与一个预先存储的图像帧相对应的相机姿态数据以3D形式显示所捕获的图像和指示符。该方法还可以包括根据用户触摸的触摸压力和触摸大小中的至少一个来调整指示符的z轴位置。该方法还可以包括根据用户触摸的触摸压力和触摸大小中的至少一个来调整指示符的厚度。所述显示可以包括基于用户触摸从预先存储的指示符模型选择一个,并且在检测到用户触摸的点处生成并显示所选择的指示符模型。关于指示符的数据可以包括以下中的至少一个:用于显示指示符的位置的坐标值、指示符的形状、指示符的大小以及指示符的厚度。根据另一示例性实施例的一方面,提供了一种电子设备,包括:图像捕获器,配置为捕获图像;显示器,配置为以3D形式显示所捕获的图像;通信器,配置为与外部用户终端设备通信;以及控制器,配置为控制通信器以在以3D形式显示所捕获的图像期间将所捕获的图像传输到外部用户终端设备,并且从外部用户终端设备接收关于指示包括在所捕获的图像中的对象的指示符的数据,并且配置为控制显示器以使用关于指示符的数据和相机姿态数据来以3D形式在所捕获的图像上显示指示符。控制器可以控制通信器将以特定角度拍摄的所捕获的图像的第一图像帧传输到外部用户终端设备,并且可以在拍摄第一图像帧期间获取相机姿态数据。控制器可以控制通信器以将所捕获的图像的多个图像帧和与多个图像帧相对应的相机姿态数据传输到外部用户终端设备,并且一起接收与从多个图像帧选择的第二图像帧相对应的相机姿态数据。关于指示符的数据可以包括以下中的至少一个:用于显示指示符的位置的坐标值、指示符的形状、指示符的大小以及指示符的厚度。电子设备可以是头戴式设备。根据另一示例性实施例的一个方面,提供了一种控制电子设备的方法,该方法可以包括:捕获图像;在以3D形式显示所捕获的图像期间将所捕获的图像传输到外部用户终端设备;从用户终端设备接收关于指示包括在所捕获的图像中的对象的指示符的数据;以及使用关于指示符的数据和相机姿态数据以3D形式在所捕获的图像上显示指示符。传输可以包括将以特定角度拍摄的所捕获的图像的第一图像帧传输到外部用户终端设备,并且可以在拍摄第一图像帧期间获取相机姿态数据。传输可以包括将所捕获的图像的多个图像帧和与多个图像帧相对应的相机姿态数据传输到外部用户终端设备,并且接收可以包括一起接收与从多个图像帧选择的第二图像帧相对应的相机姿态数据。关于指示符的数据可以包括以下中的至少一个:本文档来自技高网...
用户终端设备、电子设备以及控制用户终端设备和电子设备的方法

【技术保护点】
一种用户终端设备,包括:通信器,其被配置为与外部设备通信;触摸屏,其被配置为显示图像并接收触摸输入;以及控制器,其被配置为:控制所述触摸屏以显示通过所述通信器从所述外部设备接收的图像;响应于在显示在所述触摸屏上的图像上检测到触摸输入,控制所述触摸屏显示与包括在所显示的图像中的对象相关联的第一指示符,所述第一指示符显示在检测到所述触摸输入的点处;并且控制所述通信器以向所述外部设备传输与所述第一指示符有关的数据,所述数据包括要由所述外部设备用于确定第二指示符的位置的信息,所述第二指示符要被包括在显示在所述外部设备中的图像中。

【技术特征摘要】
【国外来华专利技术】2015.09.21 KR 10-2015-01329301.一种用户终端设备,包括:通信器,其被配置为与外部设备通信;触摸屏,其被配置为显示图像并接收触摸输入;以及控制器,其被配置为:控制所述触摸屏以显示通过所述通信器从所述外部设备接收的图像;响应于在显示在所述触摸屏上的图像上检测到触摸输入,控制所述触摸屏显示与包括在所显示的图像中的对象相关联的第一指示符,所述第一指示符显示在检测到所述触摸输入的点处;并且控制所述通信器以向所述外部设备传输与所述第一指示符有关的数据,所述数据包括要由所述外部设备用于确定第二指示符的位置的信息,所述第二指示符要被包括在显示在所述外部设备中的图像中。2.根据权利要求1所述的用户终端设备,其中,所述控制器被配置为控制所述通信器以接收来自所述外部设备的图像的多个图像帧以及与所述多个图像帧相对应的相机姿态数据。3.根据权利要求2所述的用户终端设备,其中,所述控制器被配置为:响应于根据用户命令选择所述多个图像帧中的一个并且响应于在所选择的图像帧的显示期间检测到触摸输入,控制所述触摸屏在检测到所述多个图像帧中的所选择的图像帧上的所述触摸输入的点处显示所述第一指示符;并且控制所述通信器以传输与所述第一指示符有关的数据和与所选择的图像帧相对应的相机姿态数据。4.根据权利要求3所述的用户终端设备,其中:所述用户终端设备被配置为以二维(2D)形式显示图像和所述第一指示符;并且所述外部设备被配置为基于与所述第一指示符有关的数据和与所选择的图像帧相对应的相机姿态数据以三维(3D)形式显示图像和所述第二指示符。5.根据权利要求1所述的用户终端设备,其中:所述控制器被配置为控制所述通信器以接收图像的图像帧;并且所述外部设备被配置为基于与所述第一指示符有关的数据和与图像帧相对应的相机姿态数据以3D形式显示图像和所述第二指示符。6.根据权利要求1所述的用户终端设备,其中,所述控制器被配置为根据所述触摸输入的触摸压力和触摸大小中的至少一个来调整所述第一指示符的z轴信息。7.根据权利要求1所述的用户终端设备,其中,所述控制器被配置为根据所述触摸输...

【专利技术属性】
技术研发人员:李光容郑夏旭洪泰和
申请(专利权)人:三星电子株式会社
类型:发明
国别省市:韩国,KR

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1