用附加信息补充媒体流制造技术

操作包括提取和呈现与从源设备发送到目标设备的媒体流相关联的数据。媒体流可以包括由源设备显示的视频帧的流。在源设备上执行的屏幕共享应用可以捕获视频帧的流。屏幕共享应用可以将视频帧的流发送到在目标设备上执行的目标应用。当媒体流从源设备被接收时，目标设备(或中间设备)分析媒体流。目标设备可以执行模式匹配，以从媒体流中提取包括文本、图像和音频剪辑的信息。目标设备可以呈现提取出的信息或者使用提取出的信息来执行诸如填写表格之类的任务。

【技术实现步骤摘要】
用附加信息补充媒体流
本公开涉及数据提取和处理。特别地，本公开涉及用基于从媒体流提取的数据的信息来补充媒体流。权益要求本申请要求于2017年8月2日提交的美国非临时申请No.15/667,434的权益和优先权，该申请通过引用并入本文。
技术介绍
屏幕共享涉及在一个或多个其它屏幕上显示在第一屏幕上显示的内容的全部或部分。屏幕共享可以包括显示用户动作，诸如鼠标的移动或在屏幕上键入的内容。屏幕共享还可以涉及将第一屏幕的控制权交给另一个设备，诸如通过放弃对鼠标的控制。屏幕共享通常用于视频会议、培训和客户服务应用。客户服务代理可以通过基于视频的屏幕共享应用与客户交谈。在这种交谈期间，客户可以呈现其屏幕的视图，其屏幕包含对解决客户的请求有用的信息。客户服务代理可以将其注意力从桌面共享应用切换到搜索将使用从读取屏幕获得的信息用于诸如研究或记录的目的的在线工具。文本识别(也称为文本提取或光学字符识别(OCR))是将键入或手写的字符转换为机器编码的文本。文本识别通常用来处理经扫描的文档，或者使文档可被计算机搜索。有几种文本识别的方法，诸如基于像素的、基于密度的和固定位置的文本提取。本节中描述的方法是可本文档来自技高网...

【技术保护点】
1.一种包括指令的非暂态计算机可读介质，所述指令在由一个或多个硬件处理器执行时使得执行包括以下的操作：在通信会话期间获得从源设备流传输到目标设备的媒体，所述媒体包括音频流或视频流中的至少一个；与媒体从源设备流传输到目标设备的同时：当媒体从源设备流传输到目标设备时，从媒体中提取文本数据；从提取出的文本数据中确定呈现数据；以及使目标设备上的呈现数据的显示与目标设备上的媒体的至少一部分显示同时进行。

【技术特征摘要】
2017.08.02 US 15/667,4341.一种包括指令的非暂态计算机可读介质，所述指令在由一个或多个硬件处理器执行时使得执行包括以下的操作：在通信会话期间获得从源设备流传输到目标设备的媒体，所述媒体包括音频流或视频流中的至少一个；与媒体从源设备流传输到目标设备的同时：当媒体从源设备流传输到目标设备时，从媒体中提取文本数据；从提取出的文本数据中确定呈现数据；以及使目标设备上的呈现数据的显示与目标设备上的媒体的至少一部分显示同时进行。2.如权利要求1所述的介质，其中所述操作还包括：将提取出的文本数据存储到多个向量；其中所述多个向量在媒体被流传输时被累积；基于累积的所述多个向量生成呈现数据；以及基于上下文确定呈现数据；其中所述上下文是从与来自媒体的相应多个帧对应的多个向量确定的。3.如权利要求1所述的介质，其中使呈现数据在目标设备上显示包括以下一个或多个：将呈现数据发送到目标设备；或者在目标设备上显示呈现数据。4.如权利要求1所述的介质，其中所述操作还包括基于以下之一选择提取出的文本数据的子集，以确定呈现数据：要用提取出的文本数据的子集填充的变量集合；或者表征与源设备相关联的用户应用的元数据，其中选择提取出的文本数据的所述子集响应于检测与用户应用相关联的、选择提取出的文本数据的所述子集的手势。5.如权利要求1所述的介质，其中所述操作还包...

【专利技术属性】
技术研发人员：K·V·维卡塔纳戈拉维，
申请(专利权)人：甲骨文国际公司，
类型：发明
国别省市：美国,US