用于多流音频/视频同步的系统、方法和计算机可读存储介质技术方案

用于媒体流同步的方法、系统和计算机程序产品。在一个实施例中，可首先使用流的广播延迟在媒体流上执行粗同步。然后可利用每个流中相应的视频或音频提示来执行细同步。在媒体流表示相同内容的情况下偶下(例如来自不同提供商的相同内容)中，视频媒体流中的匹配瞬时动作可用于实现细同步。在媒体流不同的情况下(例如同一事件的不同广播)，可使用其它提示来实现细同步，其中这些其它提示是基本事件的一部分但与特定广播无关。后一提示的例子可以是裁判员的哨声或球棒击打棒球的击打声。

【技术实现步骤摘要】
【国外来华专利技术】用于多流音频/视频同步的系统、方法和计算机可读存储介质
技术介绍
在现代媒体环境中，多个媒体提供者可提供同一事件的广播覆盖。涉及与某一城市相关的团队的体育事件可由该城市内的电视站或无线电站覆盖，以及由国家电视网覆盖。本地无线电团队可与例如国家篮协团队一起行进，并广播每场比赛。比赛也可由若干竞争的国家网络中的一个电视播送。其它公共事件的覆盖也可由若干网络或站广播。公共无线电站可与例如主要电视网并行地广播总统演讲的覆盖。一些用户可能希望利用事件可由多个广播公司覆盖的事实。例如，用户可能希望收听他的家乡播音员对篮球比赛的详细报道（play-by-paly），这一般可经由无线电或因特网流获得，但还想要观看由国家电视网广播的比赛。(例如体育和新闻的)有规律的媒体消费者有时建立对这些媒体源的偏好和忠实。从广播公司的角度看，存在使广播供忠实消费者使用的商业理由。媒体源可通过建立和维持特定报告简介来对这些忠实性作出响应，以维持和增加它们的观众。该消费者偏好可驱动评级，评级则驱动广告销售。在数字传递和付费TV节目延迟可用之前，消费者可通过在广播期间手动减小TV上的音量并增大无线电广播上的音量而混合覆盖同一事件的音频/视频流。数字延迟(包括节目FCC延迟和机械处理和传递延迟)已显著地侵害了该“模拟解决方案”的功能性。现在，实况TV、有线电视（cable）和无线电广播常常具有高至10秒的不同步，这对于那些尝试以这种方式混合媒体流而言产生不可接受的媒体体验。这种情况因为国家广播对实况事件的馈送无法同步广播的这一事实而恶化。经常，来自一个有线电视提供商的馈送可领先或落后来自不同有线电视或卫星提供商的相同馈送若干秒。附图简述图1是示出根据一实施例的本文描述的系统的处理的流程图，在该实施例中媒体流是相同的。图2是示出根据一实施例的本文描述的系统的处理的流程图，在该实施例中媒体流是不同的。图3是示出媒体流针对对应提示的评价的流程图，其中媒体流之一是音频流。图4是示出媒体流针对对应提示的评价的流程图，其中媒体流之一是音频流而另一媒体流是音频/视频媒体流。图5示出藉此用户可访问本文描述的系统和进程的用户界面的实施例。图6是示出计算环境背景中的软件或固件实施例的方框图。在附图中，附图标记的最左侧的数字标识该附图标记首先出现在的附图。具体实施方式现在参照附图描述一个实施例，其中相同附图标记表示相同或功能相似的要素。尽管讨论了特定配置和构造，然而应当理解这样做只是为了解说目的。相关领域内技术人员将理解，可使用其它配置和构造而不脱离本说明书的精神和范围。对相关领域内技术人员很明显的是，这也可在本文描述以外的多种其它系统和应用中采用。本文披露了用于媒体流同步的方法、系统和计算机程序产品。媒体流可以是包括音频和/或视频数据的任何数字数据流，其中这些数据可描绘、描述或以其它方式关联于某事件。示例性事件可以是但不限于体育事件或新闻事件。同步可指对齐与同一事件相关的媒体流，按照需要引入或调整延迟，以使基本事件的动作与相应媒体流中描绘的一致。在一个实施例中，可首先使用流的广播延迟在媒体流上执行粗同步（grosssynchronization）。然后可利用每个流中相应的视频或音频提示来执行细同步（refinedsynchronization）。在媒体流表示相同内容的情况下(例如来自不同提供商的相同内容)中，视频媒体流中的匹配瞬时动作可用于实现细同步。在媒体流不同(例如，同一事件的不同广播)的情况下，可使用其它提示来实现细同步，其中这些其它提示是正被播放但与特定广播无关的事件的一部分。后面的这些提示的例子可以是裁判员的哨音或球棒击中棒球的击打声。在哨音例子中，该提示可例如发生在关联于同一比赛的任何广播媒体流中。对媒体流匹配的一个实施例的处理示出于图1中。这里，内容可以是相同的。在一个例子中，国家电视网可广播一场足球赛，其中广播是由一个城市内的有线电视提供商传播的，但在不同市场中通过不同的有线电视提供商传播。用户可能希望同步这些媒体流，由此用户能在不同城市同步观看这些媒体流。这允许用户在电话上或经由网络聊天彼此交互，其中每个用户在同一时刻将看到相同的事件。在110，两个媒体流中的每一个的广播延迟可被标识。广播延迟可表示实况视频或音频的捕捉和传播之间的节目延迟。广播延迟对于不同的传播商来说是不同的。在一个实施例中，这些延迟可通过检查伴随每个媒体流的时间码签名来确定。在120，一个媒体流可被标识为领先媒体流，而另一媒体流可被标识为滞后媒体流。领先媒体流可以是时间上最接近实际事件的流，即具有最短广播延迟。滞后媒体流可以是有较长广播延迟的流。在130，可计算两个广播延迟之间的差。在140，可使领先媒体流延迟与该差相等的时间量。这可被视为近似或粗同步，并且该时间量在本文中被称为粗同步延迟。在一个实施例中，可使用已知的数字视频录制(DVR)技术来施加粗同步延迟。在150，可执行媒体流的评估；这里，可检测两个媒体流中的特定提示，其中这些提示最终可被用来实现更精确或更细的同步。这里，可寻找瞬时动作，其中该瞬时动作在两媒体流中被捕捉。该瞬时动作可以视频或音频形式。其例子可包括足球比赛中开球的图像或者篮球或足球比赛中的时钟图像或者播音员的话语。假定两个媒体流表示相同的内容，这些提示将出现在这两个流中。在160，这一提示在各媒体流中出现之间的时间差可被确定。在170，可根据该后一时间差来调整在140产生的延迟，由此实现细同步。该后一时间差在本文中可被称为细同步延迟。在一个实施例中，可使用已知的DVR技术来施加细同步延迟。在180，如果出现商业广告，则在商业广告结束后重复细同步。这种细同步例程的重复可同样发生在媒体流中的任何中断之后，所述中断可以是商业广告、公共服务通告、站标识等等。如果媒体流不同，则需要不同的方法。例如，这可以是这种情况：如果希望在事件的地方广播和同一事件的国家广播之间具有同步或在不同电视网提供的事件广播之间具有同步。这里，不同的摄像机可在不同技术指导下用于每个媒体流，这导致对同一瞬时动作下不同的摄像机角度以及摄像机快门的不同切换。另外，音频解说可以是不同的。根据一个实施例，用于应对这种情况的方法示出于图2中。在210，两个媒体流中的每一个的广播延迟可被标识。在一个实施例中，这些延迟可通过检查伴随每个媒体流的时间码签名而确定，如同图1的情形。在220，一个媒体流可被标识为领先媒体流，而另一媒体流可被标识为滞后媒体流。在230，可计算两个广播延迟之间的差。在240，领先媒体流可延迟与该差相等的时间量，以实现粗同步。在一个实施例中，可使用已知的DVR技术来施加该粗同步延迟。在250，可检测两个媒体流中的特定提示，其中这些提示最终可被用来实现更精确或更细的同步。这里，可寻找相应媒体流的视频或音频中捕捉到的同一瞬时动作，其中这些瞬时动作是专门针对广播中的活动，而不是针对广播。其例子可包括足球比赛中开球的声音，其中开球时砰的一声在两媒体流的音频中被捕捉。视频领域的例子可以是在曲棍球比赛的开球时冰球下落之后发生的突然运动。在后一例子中，该突然运动可在任何广播中被捕捉，尽管在不同的广播中来自不同的摄像机角度。在260，这一提示在各媒体流中出现之间的时间差可被确定。在27本文档来自技高网...

【技术保护点】
一种方法，包括：执行领先媒体流和滞后媒体流的粗同步，其中所述媒体流与同一事件相关，所述同步基于相应媒体流的已知广播延迟，其中所述领先媒体流和所述滞后媒体流来自不同的媒体供应商；执行所述领先和滞后媒体流的细同步；以及同时呈现经细同步的所述领先媒体流和所述滞后媒体流中的一者的视频与经细同步的所述领先媒体流和所述滞后媒体流中的另一者的音频。

【技术特征摘要】
【国外来华专利技术】1.一种方法，包括：执行领先媒体流和滞后媒体流的粗同步，其中所述媒体流与同一事件相关，所述同步基于相应媒体流的已知广播延迟，其中所述领先媒体流和所述滞后媒体流来自不同的媒体供应商；执行所述领先和滞后媒体流的细同步；以及同时呈现经细同步的所述领先媒体流和所述滞后媒体流中的一者的视频与经细同步的所述领先媒体流和所述滞后媒体流中的另一者的音频。2.如权利要求1所述的方法，其特征在于，所述执行粗同步包括：使所述领先媒体流延迟与所述领先和滞后媒体流的广播延迟之间的差相等的粗同步延迟。3.如权利要求2所述的方法，其特征在于，所述执行细同步包括评估来自所述领先和滞后媒体流中的每一个的音频或视频信号以确定每个流中呈现同一瞬时动作的时间点；确定与所述领先和滞后媒体流呈现所述瞬时动作的时间之间的差相等的细同步延迟；以及通过所述细同步延迟来调整所述粗同步延迟。4.如权利要求3所述的方法，其特征在于，在生成所述领先或滞后媒体流期间添加的任何广播添加数据在所述评估任何音频信号之前被忽略。5.如权利要求3所述的方法，其特征在于，在生成所述领先或滞后媒体流期间添加的任何广播添加数据在所述评估任何视频信号之前被忽略。6.如权利要求1所述的方法，其特征在于，所述细同步在所述领先或滞后媒体流中的商业广告中断后被重复。7.一种系统，包括：处理器；以及与所述处理器通信的存储器设备，其中所述存储器存储被配置成引导所述处理器执行领先媒体流和滞后媒体流的粗同步的多个处理指令，其中所述媒体流与同一事件相关，所述同步基于相应媒体流的已知广播延迟，其中所述领先媒体流和所述滞后媒体流来自不同的媒体供应商；执行所述领先和滞后媒体流的细同步；以及同时呈现经细同步的所述领先媒体流和所述滞后媒体流中的一者的视频与经细同步的所述领先媒体流和所述滞后媒体流中的另一者的音频。8.如权利要求7所述的系统，其特征在于，所述粗同步包括：使所述领先媒体流延迟与所述领先和滞后媒体流的广播延迟之间的差相等的粗同步延迟。9.如权利要求7所述的系统，其特征在于，所述细同步包括：评估来自所述领先和滞后媒体流中的每一个的音频或视频信号以确定每个流...

【专利技术属性】
技术研发人员：T·舒李斯基，B·M·塞尔敏斯，
申请(专利权)人：英特尔公司，
类型：发明
国别省市：美国,US