利用视线跟踪的自适应显示制造技术

本发明专利技术涉及用于基于显示器用户关注适配显示屏输出的方法和系统。采用视线方向跟踪来确定用户正关注的显示屏区的子区域。受关注的子区域的显示相对于显示屏的剩余部分被修改，例如，通过相对于在显示屏的不受关注的子区域中显示的对象改变表示在受关注的子区域内显示的对象的数据量。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及利用视线跟踪用于在计算平台的显示屏上以自适应的方式输出信息。
技术介绍
随着在例如LCD屏、OLED屏等显示屏方面的现代技术进步，采用显示屏的计算平台的多样性以及向平台要求的功能性都在持续增加。例如，象征着手持式形状因素(handheld form factor)的有限的屏面积和电池寿命往往导致了显示屏的空间分辨率相对低，使得手持式设备的实用性经常受到限制，因显示屏无能力在没有连续积极用户干预(例如，屏幕点击，滑动，等等)情况下呈现足够的视场(FOV)以向终端用户展现最有关数据(例如，图像数据帧的子区域，GUI (图形用户接口)的子区域，等等)。对于另一示范性平台，象征着家用电视的大屏幕是针对比个人计算机或者手持式设备的视距长得多的视距所设计的。因而，通常有必要在具有独特接口(例如“10英尺接口”)的家用电视上呈现图形数据对象，要求用户学习导航(navigate)不同形状因素的设备之间的多个接口。此外，某些计算平台提供显示视频(即图像数据帧流)的应用，该视频由集成有计算机渲染图形对像的视频图像传感器收集。例如，Sony Playstation EyePet 游戏应用程序与由耦合到计算平台的视频图像传感器所收集的应用程序用户与用户环境(例如，客厅)的视频一起渲染(render)虚拟宠物的图形图像。于是用户可以在显示器上观看他们与其虚拟宠物交互。由于对于这样的游戏应用程序典型的高清晰度显示分辨率(例如1080p)，需要有效的带宽将视频数据从视频图像传感器传输到计算平台。该带宽限制或者降低在显示器上呈现的视频数据的质量，减少可用于渲染图形的处理器周期，或者显著提高视频图像传感器/传感器与计算平台之间的接口的制造成本。对于无线内联网传输模式与互联网传输模式两者，视频传输带宽均成为更多的问题。附图说明本专利技术的实 施例在本说明书结束部分中被特别指出并且清楚地被要求保护。然而，关于组织和操作方法两者，连同目标、特征及其优点，本专利技术的实施例可能最好在借助附图阅读时通过参考以下详细说明来理解，其中: 图1示出按照实施例的示范性自适应显示系统的示意 图2A为按照实施例确定所显示的图像数据帧的受关注的子区域的示范性基于网格的方法的流程 图2B为按照实施例确定所显示的图像数据帧的受关注的子区域的示范性基于轮廓的方法的流程 图3A为按照实施例基于显示器用户关注适配要显示的数据的量的示范性方法的流程 图3B为按照实施例基于显示器用户关注适配要传输的数据的量的示范性方法的流程图；图3C为按照实施例基于显示器用户关注适配数据压缩率的示范性方法的流程 图3D为按照实施例基于显示器用户关注适配接口数据压缩率的示范性方法的流程 图4示出按照本专利技术的一个实施例可被用于适配显示的用户接口和硬件；以及 图5示出按照本专利技术的一个实施例可被用于处理指令的附加硬件。为了说明的清楚，图中示出的元件没有必要地按照比例绘制。另外，在被认为合适的地方，参考数字在图之中被重复以指示相应或相似的元件。
技术实现思路
此处描述了用于基于显示器用户关注适配显示屏输出的方法和系统。实施例采用视线跟踪(gaze tracking)来确定显示屏区的处于用户关注焦点的子区域，并且自适应地确定为显示屏的受关注 的和不受关注的子区域提供的数据量，其方式是分别处理这两个组来改善应用程序/平台的功能性和/或者减少用于传输或处理所收集的图像数据帧所需的带宽。尽管为彻底理解本专利技术的实施例陈述了很多具体细节，本领域技术人员将理解的是，在没有这些具体细节的情况下可以实施其他实施例。在其他实例中，并没有详细地描述众所周知的方法、进程、部件和电路，以便不使本专利技术不清楚。此处描述的某些部分根据算法和在计算机存储器内的数据比特或者二进制数字信号上的操作的符号表示来呈现。这些算法描述和表示可能是数据处理领域技术人员所使用的技术以将其工作的实质传达给本领域有些技术人员。如此处所使用的算法是导致期望结果的行为或操作的自相一致序列。这些包括物理量的物理操纵。通常、可是并非必要地，这些量采取能够被存储、传递、组合、比较以及另外操纵的电或者磁信号的形式。主要出于习惯用语的原因，将这些信号称为比特、值、元素、符号、字符、术语、数字等等已经证明有时是方便的。除非特别声明或者另外从以下讨论中为明显的，应当理解的是，在整个描述中，利用诸如“处理”、“计算”、“转换”、“调解”、“确定”、或者“识别”术语的讨论，均指计算平台的行为和处理，该计算平台是包含处理器的电子计算设备，该处理器将在处理器的寄存器和可访问的平台存储器内表示为物理(例如电子)量的数据操纵并变换为在计算机平台存储器、处理器寄存器或显示屏内类似地表示为物理量的其他数据。计算机程序可以被存储在计算机可读的存储介质中，例如、但不限于，任意类型的磁盘，包括软盘、光盘(例如光盘只读存储器(⑶-R0M)，数字视频光盘(DVD)，Blu-RayDiscs (蓝光光盘)等等)和磁光盘、只读存储器(ROM)、随机存取存储器(RAM)、EPROM、EEPR0M、磁或光卡，或者任意其他类型的适用于存储电子指令的非暂时介质。术语“耦合”和“连接”，连同其衍生词，可以在此用来描述用于执行这里的操作的装置的部件之间的结构关系。要理解的是，这些术语并不意指为彼此的同义词。相反地，在特定的实施例中，“连接”可以用于指示两个或多个元件之间彼此直接物理或者电接触。“耦合”可用于指示两个或多个元件之间彼此或者直接或者间接(通过其之间的其他居间元件)物理或者电接触，以及/或者两个或多个元件彼此协作或者通信(例如，如在因果关系(cause an effect relationship)中)。图1示出示范性自适应显示系统100，其包含耦合到显示屏110的计算平台105。计算平台105包含中央处理器，其至少负责为显示屏110生成输出106，并且可以进一步执行这里所述的视线跟踪、显示子区域确定以及视频解码/帧组装操作中的一个或多个。计算平台105可以为所要求的目的专门地被构造，或者可以包括通用计算机，该通用计算机通过在计算机中存储的计算机程序选择性地被激活或者重新配置。在一个实施例中，计算平台105是游戏控制台(例如，Sony Playstation ),其具有是任意常规显示器(例如IXD，OLED，CRT，等等)的显示屏110。在另一个实施例中，计算平台105是具有嵌入式显示屏IlOA (例如，IXD，0LED)的手持式游戏设备105A(例如，索尼便携式游戏机(SonyPlaystation Portable) (PSP )。在替换的实施例中，计算平台105是具有嵌入式显示屏110B (例如，LCD，0LED)的手持式电信设备105B (例如，索尼爱立信手机(Sony Ericssonmobile phone))。图2A和2B示出两个用于确定在显示屏中所呈现的信息帧的受关注的子区域的示范性方法。这些方法可应用于渲染的图形对象(例如CGI)或者成流的多媒体(例如视频)。图2A是说明用于确定图像数据帧的受关注的子区域的基于网格的方法200的实施例的流程图，该方法可以由自适应显示系统100执行。在操作205处，一个或多个对象被输出到显示屏110 (图1)。例本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】...

【专利技术属性】
技术研发人员：O卡林利，
申请(专利权)人：索尼电脑娱乐公司，
类型：
国别省市：