基于眼睛跟踪的可见度提高方法和电子装置制造方法及图纸

提供一种基于眼睛跟踪的可见度提高方法和电子装置。利用凝视跟踪的可见度提高方法包括：通过相机检测用户的凝视；从通过电子装置的显示单元查看的至少一个对象中确定用户凝视的聚焦对象；在显示单元上显示与聚焦对象相应的并且比聚焦对象具有更高可见度的具有高可见度的图像。

Visibility Improvement Method and Electronic Device Based on Eye Tracking

A method for improving visibility based on eye tracking and an electronic device are provided. The methods of improving the visibility by using gaze tracking include: detecting the user's gaze by camera; determining the focused object of the user's gaze from at least one object viewed by the display unit of the electronic device; displaying a high visibility image corresponding to the focused object on the display unit and having a higher visibility than the focused object.

【技术实现步骤摘要】
基于眼睛跟踪的可见度提高方法和电子装置本申请是申请日为2014年6月11日，申请号为“201410257721.0”，专利技术名称为“基于眼睛跟踪的可见度提高方法和电子装置”的专利技术专利申请的分案申请。
本专利技术总体上涉及一种用于处理由相机所拍摄的图像的方法，更具体地讲，涉及一种用于基于用户的凝视来处理图像的方法。
技术介绍
通常，随着使用相机的凝视跟踪技术的发展，出现了如下技术：通过跟踪用户的凝视以放大或缩小显示在屏幕上且正被聚焦的对象或者在正被聚焦的对象周围显示相关信息，来提供针对用户的兴趣定制的信息。例如，可以存在如下技术：当用户凝视屏幕上的预定部分时，跟踪用户的凝视，并放大或缩小该预定部分。作为另一示例，当用户凝视运动场上的运动员时，可显示与每个运动员相关联的信息，或者可在历史古迹中显示与古文物相关联的信息。当用户聚焦于预定区域时，传统技术通过放大预定区域或显示相关文本信息而向用户提供详细信息。然而，当在屏幕上显示的图像或在用户实际上通过附着到面部上的相机而凝视对象的环境中拍摄的图像等具有低分辨率，或者由于不足的环境光量而导致图像较暗，或者由于不足的曝光而导致图像不清晰，或者距诸如符号等期望对象的距离较远时，传统技术即使放大图像也难以向用户提供期望的视觉信息。此外，通过文本显示与目标对象相关联的信息的技术可提供在视觉信息中未出现的详细信息，但是不可提供实际对象的详细视觉信息(诸如外观、颜色等)。
技术实现思路
做出本专利技术以至少部分地解决、减小或去除与现有技术相关的问题和/或缺点中的至少一个，并至少提供下面描述的优点。因此，本专利技术的一方面在于改进放大现有图像并显示文本信息的信息提供方法，并通过跟踪用户的凝视，确定聚焦对象，再现图像或使用相关图像替代图像等来提供高可见度图像，以使用户能够容易地识别对象并向用户提供丰富视觉信息。根据本专利技术的一方面，提供一种利用凝视跟踪提高可见度的方法，所述方法包括：通过相机检测用户的凝视；从通过电子装置的显示单元查看的至少一个对象或在透明显示器中在用户的凝视的延长线上的对象等中确定用户凝视的聚焦对象；在显示单元上显示与聚焦对象对应的并且比聚焦对象具有更高可见度的具有高可见度的图像。例如，具有更高可见度的图像(即，与聚焦对象对应的高可见度图像)可比具体地讲先前显示的与聚焦对象对应的图像(例如，检索到的或先前拍摄的图像)具有更高的分辨率、更高的清晰度和更高的亮度中的至少一个。根据本专利技术的另一方面，提供一种电子装置，包括：相机，拍摄用户的眼睛；显示单元，显示至少一个对象；控制器，从拍摄的用户的眼睛检测用户的凝视，从所述至少一个对象中确定用户凝视的聚焦对象，并通过显示单元显示与聚焦对象对应的并且比聚焦对象具有更高可见度的具有高可见度的图像。根据本专利技术的另一方面，提供一种其上记录有程序的机器可读存储介质，其中，当所述程序被执行时，执行使用凝视跟踪提高可见度的方法，所述方法包括：通过相机检测用户的凝视；从通过电子装置的显示单元查看的至少一个对象中确定用户凝视的聚焦对象；在显示单元上显示与聚焦对象对应的并且比聚焦对象具有更高可见度的具有高可见度的图像。根据本专利技术的另一方面，提供一种包括其上记录有程序的机器可读存储介质的电子装置，其中，当所述程序被执行时，执行使用凝视跟踪提高可见度的方法，所述方法包括：通过相机检测用户的凝视；从通过电子装置的显示单元查看的至少一个对象中确定用户凝视的聚焦对象；在显示单元上显示与聚焦对象对应的并且比聚焦对象具有更高可见度的具有高可见度的图像。根据本专利技术的另一方面，提供一种可佩戴电子装置，包括：用于将可佩戴电子装置布置在用户的身体上的装置；至少一个相机，拍摄用户的眼睛；至少一个显示单元，显示至少一个对象；控制器，被配置为从拍摄的用户的眼睛检测凝视，从所述至少一个对象中确定用户凝视的聚焦对象，并通过显示单元显示与聚焦对象对应的并且比聚焦对象具有更高可见度的具有高可见度的图像。附图说明从下面结合附图进行的详细描述，本专利技术的上述和其他方面、特征和优点将更加清楚，在附图中：图1是示出根据本专利技术的第一实施例的第一电子装置的框图；图2是根据本专利技术的第一实施例的第一电子装置的前侧透视图；图3是根据本专利技术的第一实施例的第一电子装置的后侧透视图；图4是根据本专利技术的第二实施例的从外侧查看的第二电子装置的透视图；图5是从内侧查看的第二电子装置的透视图；图6是第二电子装置的电路构造的框图；图7是示出根据本专利技术的第一实施例的使用凝视跟踪的可见度提高方法的流程图；图8A和图8B示出用户的眼睛；图9A和图9B示出基于面部表情确定用户是否聚焦于对象的方法；图10是示出根据本专利技术的第一实施例的检测聚焦对象的方法的示图；图11是示出根据本专利技术的第二实施例的检测聚焦对象的方法的示图；图12是示出根据本专利技术的第三实施例的检测聚焦对象的方法的示图；图13A至图13C示出根据本专利技术的第一实施例的显示高可见度图像的方法；图14A至图14C示出根据本专利技术的第二实施例的显示高可见度图像的方法；图15A和图15B示出根据本专利技术的第三实施例的显示高可见度图像的方法；图16A至图16C示出根据本专利技术的第四实施例的显示高可见度图像的方法；图17是示出服务器的配置的框图；图18A至图18B以及图19A至图19B示出根据本专利技术的第五实施例的显示高可见度图像的方法；图20A和图20B示出根据本专利技术的第六实施例的显示高可见度图像的方法；图21A和图21B示出根据本专利技术的实施例的中断高可见度图像的显示的方法；图22是示出根据本专利技术的第二实施例的使用凝视跟踪的可见度提高方法的流程图；图23是示出根据本专利技术的第三实施例的使用凝视跟踪的可见度提高方法的流程图；图24A至图24C示出聚焦对象的改变。具体实施方式本专利技术可具有各种修改和各种实施例，现在将参照附图更充分地描述特定实施例。然而，应当理解，不意图将本专利技术限制于所述特定实施例，而是相反，本专利技术覆盖落入在此描述的范围内的所有修改、等同形式和替代形式。虽然包括诸如第一、第二等序数的术语可用于描述各种元件，但是这些元件不受这些术语限制。这些术语仅用于区分一个元件与另一个元件。例如，在不脱离本专利技术的范围的情况下，第一结构元件可被称为第二结构元件。类似地，第二结构元件也可被称为第一结构元件。如在此使用的，术语“和/或”包括相关列出项中的一个或更多个的任何和所有组合。在本申请中使用的术语仅为了描述具体实施例的目的，而不意图限制本专利技术。除非上下文另外清楚地指示，否则单数形式意图包括复数形式。在描述中，应当理解，术语“包括”或“具有”指示存在特征、数字、步骤、操作、结构元件、部件或其组合，并且不预先排除存在一个或更多个其他特征、数字、步骤、操作、结构元件、部件或其组合，或者不预先排除添加一个或更多个其他特征、数字、步骤、操作、结构元件、部件或其组合的可能性。除非不同地定义，否则在此使用的包括技术术语或科学术语的所有术语具有与本专利技术所属领域的技术人员所理解的含义相同的含义。除非在本说明书中清楚地定义，否则如在通用字典中定义的这样的术语应被解释为具有与相关
中的上下文含义等同的含义，并且不应被解释为具有理想或过于正式的含义。本专利技术的电子装置可以是特定装置，并且可被称为便携式装置、移动本文档来自技高网...

【技术保护点】
1.一种利用凝视跟踪提高可见度的方法，所述方法包括：在电子装置的显示器上显示第一图像；在在电子装置的显示器上显示第一图像的同时，通过电子装置的相机装置来获得用户的凝视；基于用户的凝视的停留时间，确定第一图像的第一部分；基于第一图像的第一部分，从服务器接收具有第二部分的第二图像，其中，第二图像的可见度比第一图像的第一部分的可见度更高；在电子装置的显示器上显示从服务器接收的更高可见度的具有第二部分的第二图像，其中，可见度比第一图像的第一部分的可见度更高的具有第二部分的第二图像的分辨率、清晰度或亮度中的至少一个比第一图像的第一部分的相应的分辨率、相应的清晰度或相应的亮度中的至少一个更高，其中，所述方法还包括：在在电子装置的显示器上显示第二图像的同时，基于用户的凝视确定用户的虚拟视点的移动，其中，更高可见度的具有第二部分的第二图像是通过拍摄城市或街道所获得的实际图像。

【技术特征摘要】
2013.06.11 KR 10-2013-00665781.一种利用凝视跟踪提高可见度的方法，所述方法包括：在电子装置的显示器上显示第一图像；在在电子装置的显示器上显示第一图像的同时，通过电子装置的相机装置来获得用户的凝视；基于用户的凝视的停留时间，确定第一图像的第一部分；基于第一图像的第一部分，从服务器接收具有第二部分的第二图像，其中，第二图像的可见度比第一图像的第一部分的可见度更高；在电子装置的显示器上显示从服务器接收的更高可见度的具有第二部分的第二图像，其中，可见度比第一图像的第一部分的可见度更高的具有第二部分的第二图像的分辨率、清晰度或亮度中的至少一个比第一图像的第一部分的相应的分辨率、相应的清晰度或相应的亮度中的至少一个更高，其中，所述方法还包括：在在电子装置的显示器上显示第二图像的同时，基于用户的凝视确定用户的虚拟视点的移动，其中，更高可见度的具有第二部分的第二图像是通过拍摄城市或街道所获得的实际图像。2.根据权利要求1所述的方法，还包括：通过使用相机装置检测用户的眼睛，其中，基于用户的瞳孔的位置检测所述凝视。3.根据权利要求1所述的方法，还包括：确定用户是否聚焦于显示器上的第一图像的第一部分。4.根据权利要求3所述的方法，其中，确定用户是否聚焦于第一图像的第一部分的步骤包括：基于用户的瞳孔的变化或者用户的面部表情，确定用户是否聚焦于第一图像的第一部分。5.根据权利要求1所述的方法，其中，第二图像的第二部分被放大，并且第二图像的第二部分的放大程度基于用户面部皱眉的程度；或者，其中，虚拟视点是基于用户面部皱眉的程度确定的。6.根据权利要求1所述的方法，还包括：接收用户的命令，其中，基于用户的命令获得所述凝视。7.根据权利要求1所述的方法，还包括：接收用户的命令，其中，确定第一图像的第一部分的步骤包括：基于用户的命令确定第一图像的第一部分。8.根据权利要求1所述的方法，其中，第一图像是通过拍摄城市或街道所获取的。9.根据权利要求1所述的方法，其中，第一图像和第二图像是从服务器的地图数据库所获取的图像。10.一种用于利用凝视跟踪提高可见度的电子装置，包括：相机，显示器，通信接口，至少一个存储指令的存储器，以及至少一个处理器，被配置为执行存储的指令以至少：控制显示器显示第一图像，在在电子装置的显示器上显示第一图像的同时，控制相机获得用户的凝视，基于通过相机获得的用户的凝视的停留时间，确定第一图像的第一部分，基于第一图像的第一部分，控制通信接口从服务器接收具有第二部分的第二图像，其中，第二图像的可见度比第一图像的第一部分的可见度更高，控制显示器显示从服务器接收的更高可见度的具有第二部分的第二图像，其中，可见度比第一图像的第一部分的可见度更高的具有第二部分的第二图像的分辨率、清晰度或亮度中的至少一个比第一图像的第一部分的相应的分辨率、清晰度或亮度中的至少一个更高，其中，所述至少一个处理器还被配置为：在在电子装置的显示器上显示第二图像的同时，控制基于用户的凝视确定用户的虚拟视点的移动，其中，更高可见度的具有第二部分的第二图像是通过拍摄城市或街道所获得的实际图像。11.根据权利要求10所述的电子装置，其中，所述至少一个处理器还被配置为：控制相机检测用户的眼睛，其中，基于用户的瞳孔的位置检测用户的凝视。12.根据权利要求10所述的电子装置，其中，所述至少一个处理器还被配置为：确定用户是否聚焦于显示器上的第一图像的第一部分。13.根据权利要求10所述的电子装置，其中，所述至少一个处理器还被配置为：基于用户...

【专利技术属性】
技术研发人员：金明植，金昌容，韩益祥，金俊佑，金珍湖，吴润济，郑善太，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：韩国,KR