用于嵌入信息卡定位和内容提取的视频处理制造技术

可从嵌入于视频流中的一个或多个卡图像中提取所述视频流的一个或多个精彩片段的元数据。所述精彩片段可为特别令人感兴趣的所述视频流的区段，例如体育赛事的广播。根据一种方法，存储所述视频流的视频帧。可通过分析一个或多个预定视频帧区域来检测嵌入于经解码视频帧中的一个或多个信息卡。接着可对识别出的视频帧区域执行图像分割、边缘检测和/或闭合轮廓识别。进一步处理可包含获得封闭所有其余区段的最小矩形周界区，接着可对所述最小矩形周界区进行进一步处理以确定信息卡的精确边界。可分析所述卡图像以获得元数据，所述元数据可与所述视频帧中的至少一个相关联地存储。

【技术实现步骤摘要】
【国外来华专利技术】用于嵌入信息卡定位和内容提取的视频处理相关申请的交叉引用本申请要求于2018年5月18日提交的第62/673,412号美国临时申请“用于辨识和解释嵌入信息卡内容的机器学习(MachineLearningforRecognizingandInterpretingEmbeddedInformationCardContent)”(代理人案号：THU010-PROV)的权益，所述美国临时申请以全文引用的方式并入本文中。本申请要求于2018年5月18日提交的第62/673,411号美国临时申请“用于实现体育精彩片段生成的视频处理(VideoProcessingforEnablingSportsHighlightsGeneration)”(代理人案号：THU009-PROV)的权益，所述美国临时申请以全文引用的方式并入本文中。本申请要求于2018年5月18日提交的第62/673,413号美国临时申请“用于嵌入信息卡定位和内容提取的视频处理(VideoProcessingforEmbeddedInformationCardLocalizationandContentE本文档来自技高网...

【技术保护点】
1.一种用于从视频流中提取元数据的方法，所述方法包括：/n在数据存储区处，存储所述视频流的视频帧；/n在处理器处，通过执行以下中的至少一个，自动识别并提取嵌入于所述视频帧中的至少一个视频帧中的卡图像：/n识别所述视频帧内的预定位置，所述预定位置限定含有所述卡图像的视频帧区域；和/n依次处理所述视频帧的多个区域，以识别含有所述卡图像的所述视频帧区域；/n在所述处理器处，分析所述卡图像以获得元数据；和/n在数据存储区处，将所述元数据与所述视频帧中的至少一个相关联地存储。/n

【技术特征摘要】
【国外来华专利技术】20180518 US 62/673,412;20180518 US 62/673,411;20181.一种用于从视频流中提取元数据的方法，所述方法包括：
在数据存储区处，存储所述视频流的视频帧；
在处理器处，通过执行以下中的至少一个，自动识别并提取嵌入于所述视频帧中的至少一个视频帧中的卡图像：
识别所述视频帧内的预定位置，所述预定位置限定含有所述卡图像的视频帧区域；和
依次处理所述视频帧的多个区域，以识别含有所述卡图像的所述视频帧区域；
在所述处理器处，分析所述卡图像以获得元数据；和
在数据存储区处，将所述元数据与所述视频帧中的至少一个相关联地存储。


2.根据权利要求1所述的方法，其中：
所述视频流包括体育赛事的广播；
所述视频帧构成被视为一个或多个用户特别感兴趣的精彩片段；且
所述元数据描述所述体育赛事在所述精彩片段期间的状态。


3.根据权利要求2所述的方法，其进一步包括，在输出装置处，在观看所述精彩片段期间呈现所述元数据。


4.根据权利要求3所述的方法，其中对于精彩片段，在观看所述精彩片段期间自动识别并提取卡图像并分析所述卡图像以获得所述元数据。


5.根据权利要求1所述的方法，其进一步包括从所述视频帧区域定位并提取所述卡图像。


6.根据权利要求5所述的方法，其中从所述视频帧区域定位并提取所述卡图像包括裁剪所述视频帧以隔离所述视频帧区域。


7.根据权利要求5所述的方法，其中从所述视频帧区域定位并提取所述卡图像包括：
分割所述视频帧区域或所述视频帧区域的经处理版本，以生成分割图像；和
修改与所述分割图像的边界相邻的区段的像素值。


8.根据权利要求5所述的方法，其中从所述视频帧区域定位并提取所述卡图像包括从所述视频帧区域或所述视频帧区域的经处理版本去除背景。


9.根据权利要求5所述的方法，其中从所述视频帧区域定位并提取所述卡图像包括：
基于背景被去除的所述视频帧区域生成边缘图像；
在所述边缘图像中找出轮廓；
将所述轮廓近似为多边形；和
提取由包围所有所述轮廓的最小矩形周界封闭的区域，以生成周界矩形图像。


10.根据权利要求9所述的方法，其进一步包括迭代地：
针对所述周界矩形图像的每个边缘对颜色被修改的像素进行计数；和
向内移动颜色被修改的像素的数目超过阈值的任何边界边缘。


11.根据权利要求10所述的方法，其进一步包括通过以下操作来验证在所述区域内检测到的四边形：
对以下进行计数：
所述视频帧区域中的像素的第一数目；
周界矩形图像中的像素的第二数目；和
经调整周界矩形图像中的像素的第三数目；和
比较所述第一数目、所述第二数目和所述第三数目以确定在所述区域内采用的四边形是否可行。


12.根据权利要求5所述的方法，其中从所述视频帧区域定位并提取所述卡图像包括调整所述卡图像的左边界。


13.一种用于从视频流中提取元数据的非暂时性计算机可读介质，所述非暂时性计算机可读介质包括存储在其上的指令，所述指令在由处理器执行时执行以下步骤：
使得数据存储区存储所述视频流的视频帧；
通过执行以下中的至少一个，自动识别并提取嵌入于所述视频帧中的至少一个视频帧中的卡图像：
识别所述视频帧内的预定位置，所述预定位置限定含有所述卡图像的视频帧区域；和
依次处理所述视频帧的多个区域，以识别含有所述卡图像的所述视频帧区域；
分析所述卡图像以获得元数据；和
使得所述数据存储区将所述元数据与所述视频帧中的至少一个相关联地存储。


14.根据权利要求13所述的非暂时性计算机可读介质，其中：
所述视频流包括体育赛事的广播；
所述视频帧构成被视为一个或多个用户特别感兴趣的精彩片段；且
所述元数据描述所述体育赛...

【专利技术属性】
技术研发人员：M·斯托扬契奇，W·帕卡德，D·卡内金，
申请(专利权)人：图兹公司，
类型：发明
国别省市：美国;US