将辅助数据同步到包括音频的内容制造技术

将辅助数据同步到包括音频的内容包括获取内容的音频的表示和与内容的音频的表示中的时刻相关联的辅助数据，以及将内容的音频的表示与内容的音频对准，以将与内容的音频的表示中的时刻相关联的辅助数据同步到内容。

【技术实现步骤摘要】
【国外来华专利技术】将辅助数据同步到包括音频的内容
技术介绍
媒体内容被生成、处理，然后传送给消费者。除传统媒体内容之外，电子通信技术的扩散使得大量传递与内容相关或增强内容的辅助数据。例如，诸如即时通讯的技术提供了一种媒介，通过该媒介非常快速地向大量的人传递电子信息。例如，包括个人计算机、移动电话、个人数字助理、智能手机和电视机顶盒(例如，有线机顶盒、卫星机顶盒等)的电子设备为信息消费者提供迅速访问。可以经由现代通信技术传递的辅助数据的类型和内容差别很大，并且包括从个人信息到广告的所有内容。辅助数据能够采用各种形式，从简单的文本到图形、到视频、到包含多个数据层的内容。但是目前的技术在提取用于后续处理的这种辅助数据时存在缺陷。例如，目前的同步内容和辅助数据的方法可能需要源和目标或消费者之间的显式数据连接，并且该方法经常是单向的。目前的其他同步方法可以依赖于可能会或可能不会一直存在于信号链中的元数据，因为不同的设备将使用可能或可能不支持元数据的各种工作流。
技术实现思路
本公开提供解决这些问题的方法和系统。本公开描述一种音频、元数据指纹识别和明确的元数据的动态组合，以触发将内容从制作传送到消费者的进行中的操作。这些操作选择性地保存原始内容和质量，确保未知内容的合规性和可接受的集成，提供用于有条件访问上游数据库的路径以及返回路径。本文公开的专利技术使用用于辅助数据同步的双路径，从而实现间接连接和绕过数据障碍。添加本地指纹识别以比较实时事件和存储在数据库中的事件，使得如果和当元数据不可用时能够绕过链，并且提供用于数据反馈的机制以指示同步，以及为数据库提供更新和额外的新信息。提供一种存储和检索关于内容的时间对准的特征丰富的数据的方法，其能够用于质量保存、电子商务和细粒度的受众测量。合并在说明书中并且构成说明书的一部分的附图示出各种示例系统、方法等，其示出本专利技术方面的各种示例实施例。应当理解，图中所示的元素边界(例如，框、框组或其他形状)代表边界的一个示例。本领域普通技术人员将理解一个元素可以被设计为多个元素或该多个元素可以被设计为一个元素。示为另一元素的内部部件的元素可以被实施为外部部件，反之亦然。此外，元素可能不按比例绘制。图1示出用于将辅助数据同步到包括音频的内容的示例性方法的示意图。图2示出用于将辅助数据同步到包括音频的内容的示例性系统的框图。图3示出包括广播者处的细节的示例性系统的框图。图4示出包括消费者处的细节的示例性系统的框图。图5示出包括存储位置处的细节的示例性系统的框图。图6示出用于将辅助数据同步到包括音频的内容的示例性方法的流程图。图7示出用于将辅助数据同步到包括音频的内容的示例性方法的流程图。图8示出用于将辅助数据同步到包括音频的内容的示例性机器的框图。具体实施方式图1示出用于将辅助数据同步到包括音频的内容的示例性方法的示意图。图1示出在所示实施例中包括视频3和音频5内容1。内容1可以是电影、电视节目、体育赛事(例如，篮球比赛)、互联网视频等。图1还示出辅助数据7。辅助数据7是以某种方式与内容相关的数据并且可以包括描述内容的数据，例如内容名称或内容识别数据、关于内容中播放的剧本的数据、关于内容中角色所穿服装的数据、包括来自内容的表演者、制作者或导演的评论的数据、到包括关于内容的信息的资源的统一资源定位符(URL)、关于内容的音频中的音乐的数据等。辅助数据7可以包括例如广告数据的商业数据。辅助数据7还可以包括用户数据，例如来自内容的观看者的评论(例如，twitter消息等)。辅助数据7还可以包括专业和技术数据，例如内容的音频的统计数据，其包括例如内容的音频的音量或动态范围缩放等。从以上示例可以看出，辅助数据7的构成可以广泛变化并且可以从许多不同的源收集。然而，出于本公开的目的，辅助数据7的性质可能不如辅助数据7相对于内容1的时间安排那么重要。在图1的所示实施例中，辅助数据7a与内容1的时间tx对准(即它出现在内容1的时间tx或与内容1的时间tx有关)。辅助数据7b和7c出现在内容1的时间tx+1或与内容1的时间tx+1有关。辅助数据7d和7e出现在时间tx+2或与tx+2有关。辅助数据7f出现在内容1的时间tx+3或与内容1的时间tx+3有关，辅助数据7g出现在时间tx+4或与tx+4有关。例如，在tx处的辅助数据7a可以指示内容的名称，TrueBlood(真爱如血)第二季第二集。在时间tx+1处(例如，在12m2s)辅助数据7b描述由AnnaPaquin扮演的SookieStackhouse穿着ManoloBlahnikHangisi105缎面舞鞋，而辅助数据7c指示音乐是由伦敦交响乐团演奏的贝多芬的月光奏鸣曲。辅助数据7d和7e可以是在时刻tx+2接收到的表示用户对内容1或内容1中的特定场景的反应的twitter消息。辅助数据7f可以指示在tx+3由于广告插播而导致的内容音频的指定音量或动态范围缩放的变化。辅助数据7g可以指示在tx+4由于从广告插播返回到内容1导致的内容音频的指定音量或动态范围缩放的变化。因此，辅助数据7与内容1时间对准。关于作者或作品集，可以在播放、广播、分发或表演内容1之前获取或收集辅助数据7。例如，可以在对内容1进行制作、编辑、质量控制或母带后期处理期间获取或收集辅助数据7。也可以在播放、广播、分发或表演内容1期间获取或收集辅助数据7。例如，如果内容1是电视节目，则可以在电视节目的首次广播或后续广播期间获取或收集辅助数据7。关于存储和分发，收集的辅助数据7可以存储在数据库中，该数据库可以由内容1的未来用户或观看者访问。这样，当内容1稍后分发给这些用户或观看者时，辅助数据7可以与内容1同时被这些用户或观看者消费。辅助数据7表现为或显示其本身与内容1在时间上对准。出现的一个重要问题是同步；实际情况是，辅助数据7如何与内容1在时间上精确对准。目前同步内容和辅助数据的方法需要内容的源和目标或消费者之间的明确的数据连接。这种明确的时序数据将时序传送给消费者端的设备。这些方法通常也是单向的，从源或内容提供者到目标或消费者，这是一种限制。目前的其他同步方法依赖于附加到内容的元数据，该元数据可能会或可能不会一直存在于从源或内容提供者到目标或消费者的信号链中，因为不同的设备将使用可能或可能不支持元数据的各种工作流。如图1所示，内容1包括视频3和音频5。图1还示出了内容1的音频5的音频波形签名形式的表示9。表示9与内容1的音频5至少在一定程度上相匹配，使得能够沿时间t根据表示9识别音频5。在图1的实施例中，辅助数据7分别在表示9的时刻处关联到表示9，所述表示9的时刻对应于与辅助数据7对准的音频5的时刻。在图1的示例中，辅助数据A关联到表示9的与内容1的时间tx对应的时刻。辅助数据7b和7c关联到表示9的与内容1的时间tx+1对应的时刻。辅助数据7d和7e关联到表示9的与时间tx+2对应的时刻。辅助数据7f关联到表示9的与内容1的时间tx+3对应的时刻，辅助数据7g关联到表示9的与内容1的时间tx+4对应的时刻。然后，可以将每个辅助数据7和表示9存储在数据库中，该数据库可以由内容1的未来用户或观看者访问。这样，当内容1被分发给这些用户或观看者时，表示9以及与表示9关联的辅助数据7对这些用户或观众是可用的。在本文档来自技高网...

【技术保护点】
1.一种用于将辅助数据同步到包括音频的内容的机器或机器组，包括：预同步器，其被配置为获取辅助数据和内容的音频的表示，并且将辅助数据与内容的音频的表示中的、与内容中的时刻对应的时刻相关联，使得内容的音频的表示与内容的音频的后续对准将与内容的音频的表示中的时刻相关联的辅助数据同步到所述内容；和收发器，其被配置为将内容的音频的表示和与内容的音频的表示中的时刻相关联的辅助数据传送到存储位置。

【技术特征摘要】
【国外来华专利技术】2016.04.08 US 15/094,5381.一种用于将辅助数据同步到包括音频的内容的机器或机器组，包括：预同步器，其被配置为获取辅助数据和内容的音频的表示，并且将辅助数据与内容的音频的表示中的、与内容中的时刻对应的时刻相关联，使得内容的音频的表示与内容的音频的后续对准将与内容的音频的表示中的时刻相关联的辅助数据同步到所述内容；和收发器，其被配置为将内容的音频的表示和与内容的音频的表示中的时刻相关联的辅助数据传送到存储位置。2.根据权利要求1所述的机器或机器组，其中，预同步器被配置为接收以下形式的辅助数据：关于音频中音乐的数据，关于内容中播放的剧本的数据，关于内容中角色所穿服装的数据，描述内容的数据，包括来自内容的表演者、制作者或导演的评论的数据，包括来自内容的观看者的评论的数据，包括到资源的统一资源定位符(URL)的数据，所述资源包括关于内容的信息，或广告数据。3.根据权利要求1所述的机器或机器组，其中：收发器被配置为将内容的音频的表示和与内容的音频的表示中的时刻相关联的辅助数据传送给内容的消费者能够访问的数据库。4.根据权利要求1所述的机器或机器组，其中：收发器被配置为将内容的音频的表示和与内容的音频的表示中的时刻相关联的辅助数据传送到内容的消费者能够访问的存储位置；和预同步器被配置为创建到存储位置的链接。5.根据权利要求1所述的机器或机器组，包括：音频处理器，其被配置为创建内容的音频的表示，其中：收发器被配置为将内容的音频的表示和与内容的音频的表示中的时刻相关联的辅助数据传送到内容的消费者能够访问的存储位置；预同步器被配置为创建到存储位置的链接；和音频处理器被配置为将到存储位置的链接插入到内容的音频的元数据中。6.根据权利要求1所述的机器或机器组，其中：预同步器被配置为在内容的先前播放或表演期间收集辅助数据，并将辅助数据与内容的音频的表示中的、与内容的音频中的时刻对应的时刻相关联。7.根据权利要求1所述的机器或机器组，包括：音频处理器，其被配置为创建内容的音频的表示，并将内容的音频的表示发送给预同步器。8.根据权利要求1所述的机器或机器组，包括：音频处理器，其被配置为通过创建内容的音频的音频波形签名来创建内容的音频的表示。9.根据权利要求1所述的机器或机器组，包括：创作工具，其被配置为在内容的播放或表演期间收集辅助数据，以用于将辅助数据与内容的音频的表示中的、与内容的音频中的时刻对应的时刻相关联。10.一种用于将辅助数据同步到包括音频的内容的机器或机器组，包括：收发器，其被配置为获取内容、内容的音频的表示以及与内容的音频的表示中的、与内容中的时刻对应的时刻相关联的辅助数据；和后同步器，其被配置为将内容的音频的表示与内容的音频对准，从而将与内容的音频的表示中的时刻相关联的辅助数据同步到所述内容。11.根据权利要求10所述的机器或机器组，其中，收发器被配置为接收以下形式的辅助数据：关于音频中音乐的数据，关于内容中播放的剧本的数据，关于内容中角色所穿服装的数据，描述内容的数据，包括来自内容的表演者、制作者或导演的评论的数据，包括来自内容的观看者的评论的数据，包括到资源的统一资源定位符(URL)的数据，所述资源包括关于内容的信息，或广告数据。12.根据权利要求10所述的机器或机器组，包括：交互工具，其被配置为在内容的播放或表演期间收集辅助数据，以用于将辅助数据与内容的音频的表示中的、与内容的音频中的时刻对应的时刻相关联。13.根据权利要求10所述的机器或机器组，包括：音频处理器，其被配置为从收发器...

【专利技术属性】
技术研发人员：蒂莫西·卡罗尔，亨利·弗雷孔三世，帕特里克·格林，迈克尔·菲利普斯，
申请(专利权)人：源数码有限公司，
类型：发明
国别省市：美国,US