用于使用设备来处理画面的方法和装置制造方法及图纸

提供了一种通过使用设备来处理画面的方法和装置。所述方法包括：根据关于第一设备的画面显示请求在第二设备处获得在第一设备上显示的显示画面和与显示画面相关的信息；在第二设备处基于第一设备上的显示画面和与显示画面相关的信息来确定附加画面；以及在第一设备上的显示画面附近显示附加画面。

【技术实现步骤摘要】
【专利说明】用于使用设备来处理画面的方法和装置对相关申请的交叉引用本申请要求于2014年10月15日向韩国知识产权局提交的被分配序列号10-2014-0139071的韩国专利申请的优先权，其全部公开通过引用合并于此。
本公开涉及用于处理联接在设备之间的画面的方法和装置。
技术介绍
通常，移动设备是尺寸足够小到适合在口袋中并包括具有触摸输入功能的显示屏幕或小尺寸键盘的计算设备。然而，这样的移动设备的屏幕通常小于向其提供的内容的尺寸，因此应附加显示窗口或应执行屏幕滚动。头戴式显示(HMD)设备应被理解为被设计用于用户在将HMD设备像眼镜那样佩戴在其头部上时观看虚拟图像的各种图像显示设备。HMD设备不仅能够向用户提供简单的显示功能，而且能够向用户提供具有作为显示功能与增强现实技术、N画面技术等的组合的各种便利功能。然而，HMD设备的用户可能间接地尝试控制在HMD设备的眼镜上显示的虚拟图像，例如通过朝向虚拟图像做手势、做出语音输入、或触摸眼镜的臂，而不物理地触摸虚拟图像。因此，难以准确地控制虚拟图像。将上述信息仅呈现为背景信息，以帮助理解本公开。尚未确定并且尚未断定是否可以将上述内容应用为关于本公开的现有技术。
技术实现思路
本公开的方面用于解决至少上述问题和/或确定以及提供至少下述优点。因此，本公开的一个方面是提供一种用于通过使用设备来处理联接到实际画面的附加画面的方法和装置。依据本公开的一个方面，提供了一种由第二设备执行的处理第一设备上的画面的方法。该方法包括:根据关于第一设备的画面显示请求在第二设备处获得在第一设备上显示的显示画面和与显示画面相关的信息；在第二设备处基于第一设备上的显示画面和与显示画面相关的信息来确定附加画面；以及在所述第一设备上的显示画面附近显示附加画面。与显示画面相关的信息可以包括以下中的至少一个:第一设备的形状信息、要在第一设备上的显示画面附近显示的附加画面的位置、附加画面的大小、与附加画面相关的内容信息和使用相机捕捉的第一设备的状态信息。第一设备的状态信息可以包括第一设备的画面的位置和角度。第一设备的状态信息可以使用相机来定期更新。显示附加画面可以包括:捕捉第一设备的图像；基于所捕捉的第一设备的图像来确定第一设备的画面的位置和方向；以及基于第一设备的画面的位置和方向在第一设备的画面的预定位置显示附加画面。确定第一设备的画面的位置和方向可以包括:从第一设备接收第一设备的形状信息；从第一设备的形状信息中提取特征点；以及将第一设备的图像的特征点与第一设备的形状信息的特征点进行比较，以确定第一设备的画面的位置和方向。该方法可以进一步包括:根据在第一和第二设备上执行的用户输入来控制第一设备上的显示画面和附加画面被相互联接。控制第一设备上的显示画面和附加画面被相互联接可以包括:根据在相应第一和第二设备上执行的用户输入来控制第一设备上的显示画面和第二设备上的附加画面被相互联接。控制第一设备上的显示画面和附加画面被相互联接可以包括:根据从第一设备接收的用户输入来识别用于结束附加画面的命令；以及通过将用于结束附加画面的命令传送到第二设备来结束附加画面。控制第一设备上的显示画面和附加画面被相互联接可以包括:通过使用相机来识别在第二设备上的附加画面上的用户输入；以及当识别出用户输入时，结束附加画面并且将指示附加画面的结束的信息传送到第一设备。依据本公开的另一方面，提供了一种由第二设备执行的通过使用包括对象的第一设备来处理画面的方法。该方法包括:在第二设备处通过从第一设备接收与对象相关的信息来识别对象，并将指示识别对象的结果的信息传送到第一设备；在第二设备处根据关于第一设备的附加画面显示请求来获得关于与所识别的对象相关的显示画面的信息；在第二设备处基于关于与对象相关的显示画面的信息来确定要在对象上的预定位置显示的附加画面；以及在对象上的预定位置上显示附加画面。该方法可以进一步包括:从第一设备获得关于在对象的预定位置上设置的显示区域的信息。关于与对象相关的显示画面的信息可以包括:对象的形状信息、要在对象上显示的附加画面的位置和方向、附加画面的大小、与附加画面相关的内容信息以及使用相机捕捉的对象的状态信息。对象的状态信息可以包括对象的位置和角度。 对象的状态信息可以使用相机来定期更新。显示附加画面可以包括:提供使用相机来捕捉对象的图像；从所捕捉的对象的图像来提取对象的位置和角度；以及基于对象的位置和角度来确定要显示附加画面的位置和方向。提取关于对象的位置和角度可以包括:从第一设备接收对象的形状信息；从对象的形状信息提取特征点；以及将对象的形状信息的特征点与所捕捉的对象的图像的特征点进行比较，以提取关于对象的位置和角度的信息。根据本公开的又一方面，提供了一种由第二设备执行的通过使用第一设备来处理附加画面的方法。该方法包括:在第二设备处根据关于第一设备的画面显示请求来获得关于附加画面的信息和第一设备的状态信息；在第二设备处基于关于附加画面的信息和第一设备的状态信息来确定要显示附加画面的位置；在所确定的位置显示附加画面；以及根据与附加画面相关的用户输入来控制第一和第二设备被相互联接。根据本公开的又一方面，提供了一种由第一设备执行的处理第二设备上的画面的方法。该方法包括:在第一设备处根据画面显示请求来将显示画面和与显示画面相关的信息传送到第二设备；在第一设备处从第二设备接收关于在第二设备上显示的附加信息的控制信息；以及在第一设备处根据控制信息来更新与显示画面相关的信息。与显示画面相关的信息可以包括要在设备的显示画面附近显示的附加画面的位置、附加画面的大小和与附加画面相关的内容信息。依据本公开的又一方面，提供了一种用于通过使用设备来处理画面的装置。该装置包括:显示单元，被配置为显示图像；通信单元，被配置为根据关于设备的画面显示请求来接收设备上的显示画面和与显示画面相关的信息；以及控制单元，被配置为基于与由通信单元获得的显示画面相关的信息来获得附加画面，在显示单元上显示附加画面，使得在设备的显示画面附近显示附加画面，并且根据用户输入来控制设备的显示画面和附加画面被相互联接。控制单元可以通过使用相机来对设备的形状进行拍照，基于设备的形状来从状态信息中提取设备的画面的位置和角度，以及基于设备的画面的位置和角度来确定要显示附加画面的区域。控制单元可以根据在设备上执行的用户输入和与附加画面相关的用户输入来控制设备上的显示画面和附加画面被相互联接。控制单元可以通过相机来识别附加画面上的用户输入，在用户输入指令结束附加画面时结束附加画面，以及将通知附加画面的结束的信息传送给设备。依据本公开的又一方面，提供了一种非瞬时计算机可读记录介质。该记录介质上记录有包括用于执行由第二设备执行的处理第一设备上的画面的方法的指令的至少一个程序。该方法包括:根据关于第一设备的画面显示请求在第二设备处获得在第一设备上显示的显示画面和与显示画面相关的信息；在第二设备处基于与显示画面相关的信息来确定附加画面；以及在所述第一设备上的显示画面附近显示附加画面。从以下结合附图的公开本公开的各个实施例的详细描述，本公开的其他方面、优点和突出特征对于本领域技术人员将变得显而易见。【附图说明】从下面结合附图进行的详细描述，本公开的某些实施例的上述和本文档来自技高网...

【技术保护点】
一种由第二设备执行的处理第一设备上的画面的方法，所述方法包括：根据关于第一设备的画面显示请求在第二设备处获得在第一设备上显示的显示画面和与显示画面相关的信息；在第二设备处基于第一设备上的显示画面和与显示画面相关的信息来确定附加画面；以及在第一设备上的显示画面附近显示附加画面。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：金明植，裵秀晶，郑文植，崔成焘，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：韩国;KR