合成用户界面制造技术

技术编号:20596266 阅读:22 留言:0更新日期:2019-03-16 11:54
一种用于显示信息的系统,包括:中央处理单元,接收由波形和画面数据中的至少一个组成的实时图像数据以及web输入数据,并且产生web数据的第一图形层、格线数据的第二图形层以及实时数据的第三图形层;存储器,其连接于中央处理单元以存储第一图形层、第二图形层以及第三图形层;图形处理器,用以从存储器检索第一图形层、第二图形层和第三图形层并且生成显示窗口;以及显示装置,用以显示显示窗口。

Composite user interface

A system for displaying information includes: a central processing unit that receives real-time image data consisting of at least one waveform and picture data and web input data, and generates the first graphics layer of web data, the second graphics layer of grid data and the third graphics layer of real-time data; a memory connected to the central processing unit to store the first graphics layer and the third graphics layer of real-time data. Two graphics layers and a third graphics layer; a graphics processor for retrieving the first graphics layer, the second graphics layer and the third graphics layer from memory and generating a display window; and a display device for displaying a display window.

【技术实现步骤摘要】
【国外来华专利技术】合成用户界面
本公开涉及视频监控仪器,并且更特别地涉及产生合成用户界面的视频监控仪器。
技术介绍
视频监控仪器呈现实时数据,诸如在用户界面或者用户监控器上的被栅格化的波形和画面显示。这些仪器包括示波器和其它波形生成设备。还可以显示诸如视频会话和状态数据的文本数据。用以创建用于这样的仪器的用户界面的典型方法牵涉使用底层软件创建自定义菜单。虽然游戏行业中的产品可以将诸如玩家得分之类的一些Javascript/HTML组件与诸如游戏场景之类的所生成的数据进行组合,但是不存在用于将如波形和画面显示的实时数据与Javascript/HTML组件进行组合的已知方法。下面讨论的实施例应对现有系统的限制。附图说明图1示出了视频处理系统的实施例。图2示出了将各种图像数据组件组合成图像的方法的实施例的流程图。图3示出了使用纹理阵列处理器的阵列处理视频的系统的实施例。图4示出了处理视频帧的方法的实施例的流程图。具体实施方式现代桌面处理器典型地具有提供了在不需要具有昂贵的另添加GPU卡的情况下加速计算和渲染的机会的板载GPU。这样的板载GPU能够被用于创建将组合的实时波形和画面数据与基于用户接口数据的Javascript/HTML进行组合的用户界面。此外,GPU提供了用以实现不同的视频处理技术(如帧速率转换)的出色方式。2D纹理阵列是用以在GPU内部实现循环缓冲区的出色方式,其能够保留画面帧,允许实现各种帧速率转换算法。在此公开的实施例在使用GPU的2D纹理阵列作为循环缓冲区的时候,遵循其中在CPU和一个或多个GPU之间划分任务的分段方法。还可能的是使用在GPU外部的循环缓冲区,如果所使用的GPU不提供循环缓冲区的话。基于用户界面的HTML和Javascript是现代的并且灵活的,但是不幸的是其不提供用以访问构成被栅格化的波形和画面数据的获取数据的容易的方式。诸如AwesomiumandChromiumEmbeddedFramework(CEF)的嵌入工具提供了用以将Javascript/HTML组件覆盖在用户生成的纹理上的方式。纹理可以被认为是在GPU中表示的图像——例如视频游戏中的场景情景。在此的实施例创建简单、灵活并且可扩展的将Javascript/HTML组件覆盖在被栅格化的波形和画面数据上以创建由Javascript/HTML带动的用户界面的方式,并且其还提供在Javascript层中的“窗口”,通过该“窗口”,可以在将合成用户界面呈现给用户之前获取并且处理实时数据。如在图1和图2中示出那样,应用22例如通过基于自定义PCIe的卡获取由波形和画面数据中的至少一个组成的实时图像数据,并且所述实时图像数据被经PCIe总线传输到系统存储器14中的大的环形缓冲区中。该环形缓冲区是以共享存储器模式设置的,以便另外的外部应用能够检索波形或者画面、帧,每次检索一帧并且将它们作为纹理上传到GPU存储器中。在该讨论中的‘纹理’是在图形处理中被使用以创建图像的表面的抓取或映射。该外部应用然后使用GPU来以适当的顺序将其分层以实现用户界面的外观。基于web技术的用户界面18允许创建如菜单和按键的典型的用户界面图像组件,其将最终被覆盖到波形和画面上。用户界面被渲染到系统存储器14中的“离屏”(off-screen)空间中。如上面讨论那样,存储器14可以由被CPU使用的系统存储器组成,并且具有被设置为共享存储器的能力。这避免了在由GPU吸取之前复制波形和画面数据的需要。然而,在此的实施例仅提供了存储器架构的一个示例,并且既不意图限制于特定的实施例,也不应当将其暗指为特定的实施例。分离的应用24还生成格线,其也被称为格网,其不过是在监控设备的显示器上的线条网。例如,在用于示波器的显示器上,格线可以由具有相关联的刻度的一种量度关于另一量度的轴线组成。这些将被作为第三层添加到在显示器中使用的要素。GPU16访问存储器并且处理各单独的层32、34和36以生成在38处示出的图像。图像38具有HTML层,其中菜单信息在如用户所看到的“顶部”上,随后是用于显示的格线,并且然后是可以为来自示波器或者其它测试设备的跟踪的实时波形数据和/或在其后面的画面数据。该合成图像然后被生成到显示窗口40中。图2示出了本方法的一个实施例的流程图。如上面讨论那样,在42处CPU获取波形和画面数据并且在44处将数据存储在系统缓冲区中。然后GPU检索波形或者画面帧46,并且然后将其分层到用户界面48中。在该系统中,许多选项符合处理。例如,取决于输入视频信号的帧速率,画面数据的帧速率可以是诸如23.97Hz、30Hz、50Hz、59.94Hz或者60Hz的任何速率。各帧也可以是逐行的或隔行的。用于显示用户界面的监控器的显示速率是固定的,例如为60Hz,但是也可以可调整为其它速率。这意味着可能需要在由GPU合成以用于显示之前对画面数据流进行帧速率转换。图3图示了使用CPU和一个或多个GPU这两者来划分帧速率转换任务的示例实施例。如图3中图示那样,去往CPU处理块12的输入信号包括帧数据信号,其除了实际的画面帧数据之外还可以包含输入视频帧速率、显示帧编号、扫描类型中的至少一个。帧速率信号允许系统确定帧数据是隔行的还是逐行的。在54处画面帧数据被以由CPU加载的纹理单元的形式表示在GPU内部。在此的用于GPU的实施例还提供了使用纹理单元56的阵列的方式,该阵列的每个元件可以被独立地更新。GPU的2D纹理阵列特征被用于建立画面帧的小的循环缓冲区。图4示出了使用2D纹理阵列处理视频帧的方法的实施例。在70处从缓冲区检索画面数据。CPU利用画面数据加载2D纹理阵列的元件。每个元件可以是GPU中的处理元件、GPU处理器的分区等。2D纹理阵列被设置为循环缓冲区。GPU可以使用来自循环缓冲区中的一个或多个纹理条目的数据来生成显示帧。在76处光栅化器然后将经计算的显示帧输出到显示装置。CPU处理块更新GPU中的2D纹理阵列的各单独的元件。输入视频帧速率、扫描类型(逐行的或者隔行的)以及输出显示帧编号确定阵列中的索引是否将被利用新的画面数据更新。GPU渲染循环典型地以输出显示扫描速率(诸如60Hz)运行,同时维持表示正被显示的当前帧编号的帧编号计数器。例如,输入视频帧速率为60p,即60Hz逐行扫描。在这种情况中,诸如经PCIe源自于获取硬件的每一画面帧被推送到可以在CPU侧具有可配置大小的先入先出(FIFO)50缓冲区中。针对GPU渲染循环的每次迭代,上面提到的CPU处理块从软件FIFO弹出一帧并且将其推送到2D纹理阵列60的相继的索引中,该2D纹理阵列60被设置为循环缓冲区,并且将索引返回到循环缓冲区中以用于由GPU着色器代码使用。GPU着色器62(其还被称为片段着色器)执行帧速率转换以转换至适当的输出帧速率。进入循环缓冲区中的索引被传递到GPU16中。在GPU内部,可以是处理像素色彩的GPU处理块的片段着色器代码对在上面的索引处的数据进行采样并且将其传递给GPU的光栅化器64。然后GPU将采样的数据输出至显示监控器66。如果GPU不提供片段着色器,则人们可以能够使用在GPU外部的帧交织器,这实现相似的结果。在另一示例中,输入视频帧速率为30p,意思是30Hz逐行扫描。源自于获取本文档来自技高网...

【技术保护点】
1.一种用于显示信息的系统,包括:中央处理单元,该中央处理单元接收由波形和画面数据中的至少一个组成的实时图像数据以及web输入数据,并且产生web数据的第一图形层、格线数据的第二图形层以及实时数据的第三图形层;存储器,其连接于中央处理单元以存储第一图形层、第二图形层以及第三图形层;图形处理器,用以从存储器检索第一图形层、第二图形层和第三图形层并且生成显示窗口;以及显示装置,用以显示显示窗口。

【技术特征摘要】
【国外来华专利技术】2016.07.21 US 62/365290;2016.12.22 US 15/3888011.一种用于显示信息的系统,包括:中央处理单元,该中央处理单元接收由波形和画面数据中的至少一个组成的实时图像数据以及web输入数据,并且产生web数据的第一图形层、格线数据的第二图形层以及实时数据的第三图形层;存储器,其连接于中央处理单元以存储第一图形层、第二图形层以及第三图形层;图形处理器,用以从存储器检索第一图形层、第二图形层和第三图形层并且生成显示窗口;以及显示装置,用以显示显示窗口。2.如权利要求1所述的系统,其中图形处理器包括纹理处理元件的阵列。3.如权利要求1所述的系统,其中中央处理单元接收帧数据信号。4.如权利要求3所述的系统,其中帧数据信号由帧速率、帧编号和扫描类型中的至少一个组成。5.如权利要求1所述的系统,进一步包括连接于中央处理单元的web开发前端。6.如权利要求1所述的系统,其中图形处理单元进一步包括片段着色器。7.如权利要求1所述的系统,其中图形处理单元进一步包括光栅化器。8.一种组合不同类型的显示数据的方法,包括:在中央处理单元处接收web数据和由波形和画面数据中的至少一个组成的实时图像数据;由中央处理单元生成来自web数据的web数据的第一图形层、格线数据的第二图形层、以及实时数据的第三层;在存储器中存储第...

【专利技术属性】
技术研发人员:L戈皮尚卡
申请(专利权)人:特克特朗尼克公司
类型:发明
国别省市:美国,US

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1