用于传送与节目相关联的数据来为音频内容生成相应视觉显示的方法和装置制造方法及图纸

一个ＭＰＥＧ音频流与一个ＭＰＥＧ视频流一起被传输。所述音频流包括一个音频信号和与其相关联的音频描述数据作为辅助数据。所述视频流包括一个视频信号和视频描述数据（如，视频剪接部分，静态图像，图形，文本等）作为专用数据，所述视频描述数据不必与和它一起传输的所述视频数据有关系。在接收时，所述音频和视频流被解码。所述视频描述数据被存储在一个存储器中。所述音频信号被播放。所述音频描述数据被用来从所述存储器或其他存储，或从当前输入的视频描述数据中为所述特定的音频信号选择合适的视频描述数据。当所述音频信号播放时，它就被显示。（*该技术在2023年保护过期，可自由使用*）

【技术实现步骤摘要】

本专利技术涉及提供一个音频信号，其带有一个相关联的视频信号。更特别地，涉及音频描述数据的使用，其作为音频流的一部分与一个音频信号被传输，来选择一个合适的视频信号在重放过程中伴随所述音频信号。
技术介绍
在数字音乐媒介和广播应用中，如MP3播放器和数字音频广播，一般都是单独音频的体验。当听音乐时，人们通常倾向于只是倾听，而不看什么东西。所述音频节目一般不提供给收听者任何有趣的视觉显示。在一些标准中，辅助数据可以被携带在一个音频基本码流内用于在音频媒介内的广播或存储。辅助数据最普通的使用是与节目相关联的数据，其是与所述音频信号密切关联的数据。与节目相关联的数据的例子是与节目相关的文本，演讲或音乐的指示，到一个接收机的专门的命令用于同步所述音频节目，以及动态范围控制信息。所述与节目相关联的数据可以包括一般信息，如歌曲名称，歌手以及音乐公司名称。它给出相关信息，但是除此之外无用。在当前数字电视发展中，携带文本和互动服务的与节目相关联的数据可以为所述电视节目开发。这些解决方案包括实施要点，包含协议、通用应用程序接口语言，接口以及推荐技术标准。所述与节目相关联的数据被与所述视频和音频内容一起传输，多路复用在所述数字节目或传输流中。在这样的实施中，相应的与节目相关联的数据必须为每一个电视节目开发，并且还必须对所述多路复用过程进行持续的监控。另外，这个方法占用传输带宽。为与节目相关联的数据开发内容要求巨大的人力资源。因此，传送这样的应用需要的成本很高，尤其当需要为不同的电视节目开发不同的内容。还期望，这样的与节目相关联的数据内容可以被不同的视频、音频和电视节目重新使用。进行了其他的尝试，这些尝试涉及有时在音频重放中显示一些内容，特别是为卡拉OK。日本专利No.JP10-124071公开了一种硬盘驱动，具有一个乐曲数据存储部分，其在卡拉OK乐曲上存储乐曲数据，以及一个乐曲信息数据库，其存储关于包括这些乐曲的专辑的信息。在所述乐曲数据中，提供一个标记，显示该乐曲是否包含在专辑中。一个控制器确定一首歌曲是否是能够得到所述专辑信息的歌曲。在一首歌的间歇时间内，对该歌曲可得到所述信息，关于所述专辑名称和乐曲的数据被显示为一个静态的图画。日本专利No.JP10-268880公开了一个系统来减少存储各自的图像数据所需的所述存储容量，通过根据特定的参考数据一起显示静态图画数据和动态图画数据。在卡拉OK乐曲演奏数据的首部中的类型数据被用来指向一个静态图像数据表来选择在所述导言、间歇和终曲中被显示的静态图像数据。所述类型数据还被用来指向一个动态图像数据表，在对应于文本数据的时段内选择和显示动态图像数据。根据专利JP2001-350482A，卡拉OK数据可以包括时间间歇信息，其指示非演唱间歇的时间。对于一个表演，这个信息与表演时间信息比较，该表演时间信息关联于一个定点节目。所述定点节目的表演时间最接近于所述非演唱间歇时间，其在所述非演唱间歇被显示。日本专利No.JP7-271，387公开了一种记录媒介，其一起记录音频和视频信息以便于避免一种情况，即，当卡拉OK演唱设备播放前奏和间奏时，一个歌手只聆听所述乐曲并等待下一步。一个记录媒介包括音频信息，用来伴奏一首歌的乐曲，以及图画信息，用于显示所述歌曲的文本的图画。它还包括文本图画信息，用于一个文本图画而不是所述歌曲的文本。根据日本专利NO.JP2001-350,482，卡拉OK数据可以包括时间间歇信息，指示非演唱间歇的时间。在重放时，这个信息与关联于一个定点节目的表演时间信息比较。所述定点节目的表演时间最接近于所述非演唱间歇时间，其被在所述非演唱间歇中播放。
技术实现思路
本专利技术目的在于提供生成令人兴奋和有趣的视觉显示的可能性。可能希望生成相应于所述音频节目的变化的视觉内容，例如相应于乐曲的美丽的景色，以及对于不同主题音乐，歌曲和抒情诗的相应的视觉内容。根据本专利技术的一个方面，提供一种方法，该方法提供带有相关联视频信号的一个音频信号，包括以下步骤解码一个被编码的音频流来提供一个音频信号和音频描述数据；以及提供一个相关联的第一视频信号，其至少一部分内容根据所述音频描述数据被选择。优选地，所述提供步骤包括使用所述音频描述数据来选择合适于所述音频信号内容的视觉描述数据；以及从所述被选择的视觉描述数据创建视频内容；以及提供包括所述被创建的视频内容的所述第一视频信号。该方法可能进一步包括从一个传输流中提取所述视觉描述数据的步骤，例如一个MPEG流包括音频，视频和所述视觉描述数据。根据本专利技术的第二个方面，提供一种方法，来传送与节目相关联的数据来为音频内容生成相应的视觉显示，所述方法包括以下步骤编码一个音频信号和相关联的音频描述数据到一个被编码的音频流中；编码视觉描述数据；以及合成所述被编码的音频流和所述视觉描述数据。所述第一和第二方面可以被合并。根据本专利技术的第三个方面，提供一种装置来提供带有一个相关联视频信号的一个音频信号，包括音频解码装置，用来解码一个被编码的音频流来提供一个音频信号和音频描述数据；以及第一视频信号装置，用来提供一个相关联的第一视频信号，其至少一部分内容根据所述音频描述数据选择。根据本专利技术的第四个方面，提供一个系统来提供带有一个相关联视频信号的一个音频信号，包括音频编码装置，用来编码一个音频信号和音频描述数据到一个被编码的音频流中；描述数据编码装置，用来编码视觉描述数据；以及合成装置，用来合成所述被编码的音频流和所述视觉描述数据。所述第三和第四方面可以合并。根据本专利技术的第五个方面，提供一个系统来传送与节目相关联的数据来为音频内容生成相应的视觉显示，所述系统包括音频编码装置，用来编码一个音频信号和与其相关联的音频描述数据到一个被编码的音频流中；视频编码装置，用来编码视觉描述数据到一个被编码的视频流中；以及合成装置，用来合成所述被编码的音频和视频流。在如上所述的任何一个方面中，所述视觉描述数据能够包括一个或多个以下的组视频剪接部分，静态图像，图形和文本描述。可选地或另外，所述视觉描述数据可以被分类，与以下至少一种使用至少一种风格的音频内容，至少一种主题的音频内容，以及至少一种类型的活动，对于该活动所述数据是合适的。所述音频描述数据可以包括相关于以下至少一组的数据歌手识别，组合识别，音乐公司识别，服务提供商识别和卡拉OK文本。可选地或另外，所述音频描述数据可以包括相关于所述音频信号的风格的数据。可选地或另外，所述音频描述数据可以包括相关于所述音频信号的主题的数据。另一种可能性，所述音频描述数据可以包括相关于所述活动类型的数据，对于该活动，所述音频信号是合适的。所述音频描述数据可以在所述被编码的音频流的帧内，所述帧也包括所述音频信号。所述被编码的音频流可以是一个MPEG音频流。当两种都发生时，所述音频描述数据可以是在所述MPEG音频流内部的辅助数据。在本专利技术的另一个方面，上述的任何装置或系统根据上述的任何一种方法都是可操作的。这样，本专利技术提供带有相关联的视频信号的一个音频信号。特别地，它提供一个音频描述数据，作为音频流的一部分与所述音频信号一起传输，来选择一个合适的视频信号来伴随所述音频信号。本专利技术提供一种有效的装置，来添加相关于所述音频节目的进一步的信息。它为所述内容提供商生成一个选本文档来自技高网...

【技术保护点】
一个方法，提供带有相关联视频信号的一个音频信号，包括以下步骤：解码一个被编码的音频流来提供一个音频信号和音频描述数据；以及提供一个相关联的第一视频信号，其至少一部分内容根据所述音频描述数据被选择。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：谭易通，申盛眉，
申请(专利权)人：松下电器产业株式会社，
类型：发明
国别省市：JP[日本]