视听内容项数据流制造技术

发射设备生成视听内容项数据流（例如，传输流），其包括具有内容项的视听分量的多个个别视听数据流。生成器（301‑307）生成包括用于音频表示的强制性音频数据和可替换音频数据二者的第一流，其中可替换音频数据是能够利用备选音频数据来替换的数据。组合器（309）将由此产生的流包括在内容项数据流中。接收设备包括从接收的流中提取强制性音频数据的提取器（403）。替换器（415）可以利用备选音频数据来替换可替换音频数据，以及输出（415）能够从强制性音频数据和备选音频数据中生成音频信号。该方案可以具体地为视听内容提供改进的且更灵活的数据流。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及视听内容项数据流并且特别地、但不完全涉及诸如MPEG-2 Transport Stream（传输流）之类的视听内容项数据流。
技术介绍
随着数字信号表示和通信已日益替换模拟表示和通信，各种源信号的数字编码在过去的几十年里已变得日益重要。例如，移动电话系统诸如Global System for Mobile communication（全球移动通信系统）以数字语音编码为基础。诸如视频和音乐之类的媒体内容的分发也日益以数字内容编码为基础。典型地，视听内容项包括许多不同的视听分量和类型的数据。例如，与电影或电视节目相对应的内容项可以包括至少一个视频信号分量、典型地多个不同的音频分量、控制数据、同步数据、例如表征内容等等的元数据。例如，电影可以包括主视频分量、辅助视频分量、多个音轨（audio track）（例如，针对不同语言）、字幕数据、识别例如电影标题、主要演员等等的元数据。因而，时常相对大数量的不同数据类型需要被包括在视听内容项的单个组合数据流中。为了适应包括一系列不同类型数据的视听内容项的表示，可以时常生成视听内容项数据流，其包括为视听内容项提供视听分量的多个（子）视听数据流。另外，可以包括这样的数据流，其包括控制数据、元数据等等。视听内容项数据流能够包括与内容项的渲染有关的所有数据。视听内容项数据流典型地被称为传输流或可能被称为系统流、程序流或容器流。个别视听数据流典型地被称为基本数据流。为了提供视听内容项的有效表示，重要的是：为视听内容项数据流定义高效的数据结构。包括许多单独视听数据流的数据结构的使用提供灵活而有效的方案，其中每一个视听数据流代表视听分量。该方案例如允许针对给定视频分量的不同音轨的灵活包含，例如，可以在不同的视听数据流中提供与不同语言相对应的音频信号。用于视听内容项数据流的许多不同的结构已被标准化。一种最广泛且频繁使用的视听内容项数据流的结构是用于例如数字电视广播或Blu-ray（蓝光）的MPEG-2 Transport Stream。MPEG-2 Transport Stream是其中数据流由多个相继的时分复用数据分组构成的数据结构的示例。每一个数据分组可以为视听内容项的特定分量提供数据。然而，用于视听内容项数据流的常规方案具有的问题是：该数据结构对于某些目的而言是次优的，并且特别地往往不提供最佳的灵活性。例如，诸如MPEG-2 Transport Stream之类的视听内容项数据流通过虑及将在不同的基本流中提供的不同的音频表示而的确支持针对给定场景的备选音频表示。接收机随后可以在这些备选基本流之间进行选择来提供所希望的的音轨。例如，MPEG-2 Transport Stream可以包括基本流，其连同两个基本流一起包括视频分量，其中每一个基本流提供能够与视频分量一起渲染的音频表示。例如，一个基本音频流可以包括采用原始语言的视频分量的音频，而另一基本音频流可以包括视频分量的音频，但是其具有采用不同语言配音的语音。解码器或渲染器随后可以通过选择恰当的基本流而在视频的备选音轨之间选择。然而，这样的方案并没有为音频提供最佳的灵活性，并且也由于利用备选基本流所提供的并行音频表示而导致相对高的数据速率。提供针对视听内容项数据流的改进方案相应地将是所希望的，并且特别地提供附加的灵活性和/或降低的数据速率的方案将是所希望的。然而，关键的挑战在于：在保持与现有方案的高度通用性的同时，这样的增强如何是可能的。例如，所希望的是能够进一步增强MPEG-2 Transport Stream，但是这样的增强应该优选地尽可能保持向后兼容性。增强用于视听内容项数据流的方案所需的考虑此外可能并不只是限于应该如何或以哪种格式来提供哪些附加数据。相反，在确定应该如何在视听内容项数据流中包括这样的数据来不仅实现有效的视听内容项数据流而且也虑及有效的操作与优选优化的向后兼容性中存在附加的挑战。因此，用于视听内容项数据流的改进方案将是有利的。
技术实现思路
相应地，本专利技术试图优选地单个地或以任何组合来减轻、缓解或消除上述缺陷之中的一个或多个缺陷。根据本专利技术的一方面，提供生成包括多个个别视听数据流的视听内容项数据流的方法，多个个别视听数据流包括视听内容项的视听分量；每一个视听数据流包括代表至少一个视听分量的编码数据和同步数据；该方法包括：生成第一视听数据流，其包括视听内容项的音频表示的第一音频数据，第一音频数据包括音频表示的强制性音频数据和音频表示的可替换音频数据，可替换音频数据是利用备选音频数据可替换的数据；以及将第一视听数据流包括在视听内容项数据流中。本专利技术可以提供改进的视听内容项数据流。特别地，在许多情景中可以实现具有增加的灵活性和/或降低的数据速率的传输流。在许多情景中能够实现更有效的备选音频的供应（provision）。该方案可以典型地被实现为针对现有传输流的增强或被实现为现有传输流的进一步发展，同时需要相对低水平的修改。时常能够实现增加的向后兼容性。作为特定示例，该方案可以允许有效且实用的传输流诸如MPEG-2 Transport Stream的增强。传输流可以保持该方案以及传统MPEG-2 Transport Stream的总体设计理念，同时允许这个被增强来提供备选音频表示的更灵活且有效的表示。可替换音频数据能够利用备选音频数据来替换/代替/交换/改变成备选音频数据。因而，传输流为内容项提供备选音频表示，其中一种备选表示例如是利用强制性音频数据和可替换音频数据来代表的默认表示，而另一备选表示是利用强制性音频数据和备选音频数据来代表的备选表示。在许多情景中，该方案可以进一步包括：将备选音频数据包括在传输流中，时常包括在第一视听数据流中或包括在多个视听数据流之中的另一视听内容项数据流中。因而，备选音频数据可以被包括在多个个别视听数据流之中的视听数据流中。强制性音频数据可以定义用于音频表示的强制性音频分量。可替换音频数据可以定义用于音频表示的可替换音频分量。备选音频数据可以定义用于音频表示的备选音频分量。因而，第一音频数据可以包括该表示的强制性音频分量的强制性音频数据以及该表示的可替换音频分量的可替换音频数据，可替换音频分量是可以利用备选音频分量的备选音频数据来代替成可替换音频分量的数据。可替换音频数据可以对应于内容项的默认音轨。传输流可以包括内容项的一个或多个音频表示的指定（designation）。音频表示可以对应于一组足以提供内容项的音频输出的音频分量。传输流可以相应地为内容项指定至少一个音频声轨（sound track）/表示。在许多实施例中，在传输流中指定（或定义）的至少一个音频表示包括多个音频分量，其中至少一个音频分量是强制性音频分量，并且至少一个音频分量是可替换音频分量。强制性音频分量利用强制性音频数据来代表，而可替换音频分量利用可替换音频数据来代表。在选择该表示时，强制性音频分量必须被包括在内容项的音频输出中。然而，在接收机选择这个表示时，可替换音频分量可以被包括或者可以利用备选音频分量来代替。备选音频分量利用备选音频数据来代表，时常（但是不是总是/必定）被包括在传输流本身中。在该方案中，用于在传输流中定义/规定/描述/指定的音频表示的音频数据可以相应地包括用本文档来自技高网...

【技术保护点】
一种生成包括多个个别视听数据流的视听内容项数据流的方法，所述多个个别视听数据流包括视听内容项的视听分量；每一个视听数据流包括代表至少一个视听分量的编码数据和同步数据；所述方法包括：生成第一视听数据流，其包括所述视听内容项的音频表示的第一音频数据，第一音频数据包括所述音频表示的强制性音频数据和所述音频表示的可替换音频数据，所述可替换音频数据是利用备选音频数据可替换的数据；以及将第一视听数据流包括在所述视听内容项数据流中。

【技术特征摘要】
【国外来华专利技术】2014.03.18 EP 14160403.3;2014.06.30 US 62/018,8011.一种生成包括多个个别视听数据流的视听内容项数据流的方法，所述多个个别视听数据流包括视听内容项的视听分量；每一个视听数据流包括代表至少一个视听分量的编码数据和同步数据；所述方法包括：生成第一视听数据流，其包括所述视听内容项的音频表示的第一音频数据，第一音频数据包括所述音频表示的强制性音频数据和所述音频表示的可替换音频数据，所述可替换音频数据是利用备选音频数据可替换的数据；以及将第一视听数据流包括在所述视听内容项数据流中。2.根据权利要求1所述的方法，进一步包括将所述备选音频数据包括在第一视听数据流中的步骤。3.根据权利要求2所述的方法，其中将所述备选音频数据包括在第一视听数据流中的步骤包括：将所述备选音频数据包括在所述多个个别视听数据流之中与第一视听数据流不同的视听数据流中。4.根据权利要求1所述的方法，其中所述可替换音频数据代表采用第一语言的语音音频分量，而所述备选音频数据代表采用第二语言的语音音频分量。5.根据权利要求1所述的方法，其中所述强制性音频数据代表背景音频分量，而所述可替换音频数据代表语音音频分量。6.根据权利要求1所述的方法，其中所述可替换音频数据和所述备选音频数据代表使用不同的编码特征编码的相同的音频内容。7.根据权利要求1所述的方法，进一步包括将渲染控制数据包括在所述视听内容项数据流中的步骤，与用于使用所述备选音频数据进行的渲染相比，所述渲染控制数据提供不同的渲染参数用于使用所述可替换音频数据进行的渲染。8.根据权利要求1所述的方法，进一步包括在所述视听内容项数据流中包括第一视听数据流包括可替换音频数据的指示的步骤。9.根据权利要求1所述的方法，进一步包括在所述视听内容项数据流中包括用于所述可替换音频数据的提取数据的步骤。10.根据权利要求1所述的方法，进一步包括以下步骤：生成内容项映射表，内容项的所述内容项映射表包括链接至所述内容项的视听数据流的数据分组的视听数据流分组识别符的列表；以及将所述内容项映射表包括在所述视听内容项数据流中；其中生成内容项映射表的所述步骤包括：生成所述内容项映射表，以便对于所述多个个别视听数据流之中的至少两个个别视听数据流的集合包括所述内容项的公共数据流分组识别符。11.根据权利要求10所述的方法，其中生成内容项映射表的步骤包括：在所述内容项映射表中只包括所述内容项的一个视听数据流分组识别符。12.根据权利要求10所述的方法，其中生成内容项映射表的步骤包括：对于公共数据流分组识别符，包括多个辅助分组识别符，每一个辅助分组识别符识别所述多个个别视听数据流之中的至少两个个别视听数据流的集合中的个别视听数据流。13.根据权利要求10所述的方法，进一步包括以下步骤：为至少一个视听数据流的第二音频数据生成音频数据处理描述符，所述音频数据处理描述符指示第二音频数据被指定为备选音频数据还是附加音频数据；以及将所述内容项映射表包括在所述视听内容项数据流中。14.根据权利要求13所述的方法，进一步包括生成内容项映射表的步骤，内容项的所述内容项映射表包括链接至所述内容项的视听数据流的数据分组的视听数据流分组识别符的列表；以及其中生成内容项映射表的步骤包括：生成所述内容项映射表来包括所述音频数据处理描述符。15.一种为视听内容项生成音频信号的方法，所述方法包括：接收包括多个个别视听数据流的视听内容项数据流，所述多个个别视听数据流包括视听内容项的视听分量；每一个视听数据流包括代表至少一个视听分量的编码数据和同步数据；其中所述视听内容项数据流包括第一视听数据流，第一视听数据流包括所述视听内容项的音频表示的第一音频数据，第一音频数据包括所述音频表示的强制性音频数据和所述表示的可替换音频数据；所述方法进一步包括：从第一音频数据中提取所述强制性音频数据；检索备选音频数据；利用所述备选音频数据来替换所述可替换音频数据；从所述强制性音频数据和所述备选音频数据中生成所述音频信号。16.根据权利要求15所述的方法，进一步包括：接收包括多个视听数据流的第二视听内容项数据流，所述多个视听数据流包括视听分量；以及其中所述检索包括从第二视听内容项数据流之中的视听数据流中检索所述备选音频数据。17.根据权利要求15所述的方法，其中生成音频信号的所述步骤包括：在第一音频解码器中解码所述强制性音频数据，以生成第一解码音频信号；在第二音频解码器中解码所述备选音频数据，以生成第二解码音频信号；以及生成所述音频信号，以响应组合至少第一解码音频信号与第二解码音频信号。18.根据权利要求15所述的方法，其中所述视听内容项数据流包括内容项映射表，内容项的所述内容项映射表包括链接至...

【专利技术属性】
技术研发人员：RA布龙迪克，AWJ奥门，FMJ德邦特，
申请(专利权)人：皇家飞利浦有限公司，
类型：发明
国别省市：荷兰;NL