多媒体显示系统技术方案

用于演示多媒体作品的显示系统（５０，１５０），其中的多媒体作品包括图象数据和与图象数据相关的声音数据。该系统包括用于显示从所述图象数据得出的图象的显示器（７０），一个用来组合并播放第一和第二音频轨迹（５４，５５，１５４，１５５）的音频播放系统（６６，１６６），以及用来根据显示系统（５０，１５０）的用户命令在显示器（７０）上选择一个图象区域的定位系统（６５，１６５）。该系统还包括播放处理器（５３，６３，６４，１５３，１６３，１６４）用于根据选出新区域的定位系统（６５，１６５）改变被音频播放系统（６６，１６６）播放的第一和第二音频轨迹（５４，５５，１５４，１５５）的组合。播放处理器（５３，６３，６４，１５３，１６３，１６４）还改变显示器（７０）使得被定位系统（６５，１６５）选出的图象部分位于显示器（７０）的中心。（*该技术在2018年保护过期，可自由使用*）

【技术实现步骤摘要】
【国外来华专利技术】 本专利技术涉及用于播放多媒体作品的显示系统，更特别的，涉及根据与音轨相关的图象的剪切而改变音轨的声音处理系统。包括具有叙述、背景声音、背景音乐的静止或运动图象的多媒体作品变得普遍起来。这种作品可以在互连网或CD-ROM上找到。用于在计算机上播放带有声音的运动画面的系统和其它数据处理系统普遍用例如VIDEO FOR WINDOWS的程序在计算机上重现作品。此外，声音的三维建模可以在VRML2.0中详细说明。在VRML2.0兼容浏览器中，通过为每个声源提供独立的音轨以及声源在情景中的定位，可以指定由情景中的各元素产生的声音。在相对于声源的任何位置上面向任何方向的听众所接收到的声音可以通过将各个声源组合来再生。不同于固定的显示系统，基于计算机的显示系统允许观众剪切、放大并显示数字图象的一部分，卷动被放大的图象，并在另一个剪切帧中显示放大的图象。然而，对于静止图象或运动图象来说，以前技术的音频数据处理系统并不能根据被播放的图象中的变化来改变音轨。通常，同样的声音被再现而不考虑用户所选择的剪切帧。VIDEO FOR WINDOWS并不提供能够剪切运动画面图象和在屏幕上显示被剪切的图象的功能。出于该原因，作为被VIDEO FOR WINDOWS所使用运动画面文件的常规AVI文件，通常并不包括用于根据剪切帧在运动画面图象中的位置来控制多个音频流的数据。因此，如果视频流与多个音频流相关，传统的程序如VIDEO FOR WINDOWS缺乏根据用户对剪切帧在运动画面图象中的位置进行定义的情况来控制从多个音频流中解码得出的音频信号的能力。虽然VRML2.0提供了产生相应于用户的视点的音轨所需的数据并因而创建了可以根据剪切等操作被改变的三维声音图象，利用VRML2.0的系统并不能根据视觉图象中的改变来改变“声音图象”。此外，VRML2.0实现的声音模型被定制以便实现三维声音效果，而非常不适合于处理与二维图象链接的音频数据的应用。因此，没有一个现存的程序可以自动地控制音频从而符合用户对运动画面图象中剪切帧的定义。更广泛地说，本专利技术的目标是提供一种改进的音频处理系统以用于多媒体作品。本专利技术的另一个目标是提供一个音频处理系统，能够根据用户选出的情景中的改变而改变音频的播放。根据下述对本专利技术的详细描述和附图，本专利技术的所有目标对于该领域的技术人员将变得很清晰。本专利技术是一种显示系统，用于演示包括表示静止或运动图象的图象数据以及与图象数据相关的声音数据的多媒体作品。该系统包括用于显示从图象数据得出的图象的显示器，用于将与该图象链接的第一和第二音频轨迹组合并播放的音频播放系统，用于根据显示系统的用户命令来选择显示器上图象的一个区域的定位系统。该系统还包括一个播放处理器，用于根据定位系统选出图象的新区域的情况改变被音频播放系统播放的第一和第二音频轨迹的组合。播放处理器还改变显示使得定位系统选出的图象部分在中央显示。在本专利技术的一个实施方案中，第一和第二音频轨迹包括在播放之前要被混合的音轨。在该实施方案中，图象包括当所选出的显示区域在图象的预定位置中被居中时，指定用于音轨混合的增益的数据。如果预定位置中不包括选出区域的中心，播放系统内插预定位置数据以提供将被用于音轨混合的增益。在本专利技术的另一个实施方案中，多媒体作品包括用于以多个分辨率指定图象的数据。在该实施方案中，定位系统还根据用户的输入选择其中一个分辨率。播放处理器然后根据选出的区域和选出的分辨率来改变被音频播放系统播放的第一和第二音频轨迹的组合。本专利技术也是一种在多媒体作品播放过程中操作数据处理系统的方法，其中的多媒体作品包括图象数据和与图象数据相关的声音数据。在该方法中，从图象数据得出的图象被显示。与图象链接的第一和第二音频轨迹被组合并播放。数据被从选出显示图象的一个区域的用户处接收。根据所接收的数据，显示图象的所选出区域被居中显示并且第一和第二音频轨迹的组合被更改。图1表示简单的多媒体显示。图2是根据本专利技术一个实施方案的图象显示系统的简图。图3是根据本专利技术另一个实施方案的声音和图象处理系统的方框图。图4表示内插为图象中选出象素而存储的声音处理参数以获得新的声音处理参数。参考图1，本专利技术实现其优越之处的方式会更容易被理解，其中图1说明了简单的多媒体显示。该显示包括由钢琴15和贝斯16组成的图象11和这两个乐器产生的音乐作品的音轨。该音轨是通过包括扬声器17和18的立体声系统来播放的。该立体声轨迹是由两个音频轨迹构成的，一个是钢琴的，一个是贝斯的。每个音频轨迹都有右分量和左分量，它们被混合以产生发送到扬声器17和18的信号。与图象11一致的信号的混合产生一个“声象”，其中钢琴显得离扬声器17近一些，而贝斯显得离扬声器18近一些。很多播放系统允许用户通过在期望部分周围定义一个剪切帧来放大显示的各个部分。剪切的图象以其自己的帧的形式被重新显示。在一些系统中，剪切的图象被放大以填充原始帧。如上面提到的，以前技术的系统不能改变声象以考虑新的视觉图象。作为结果，剪切帧12中显示的被剪切图象将有一个声象，其中钢琴15在剪切帧中的位置仍然与它在原始帧中所占的位置相同。即，钢琴15仍然与扬声器17更近，即使它现在位于新帧的中间。这种声象和视觉图象中的不一致性对于人类观察者是一种干扰。本专利技术解决了以前技术中显示的这一问题，其方式是根据对原始图象的剪切来改变声象。因此，在本专利技术中，当用户定义一个剪切帧例如帧14时，音轨被重新混合使得视声源同样在声象中运动位置。因此，在本专利技术中，当观察帧从原始帧11切换到剪切帧14中时，贝斯的声音将被运动使得它与扬声器17和18的距离相等。现在参考图2，该图是根据本专利技术一个实施方案的图象显示系统50的一个简图。在该实施方案中，用户用例如施加到图象数据57的指针65来指定一个剪切帧，其中的图象数据在显示器70上显示。被剪切的图象边界通过剪切控制器51被输入，其中的剪切控制器51将新帧的限值发送到显示系统中适当的剪切子程序52。新图象边界还被送到增益控制器53，该控制器控制为每个音频轨迹产生的右和左扬声器信号分量的混合。在本专利技术的这个实施方案中，音频轨迹被独立处理并通过求和放大器58和59在播放系统66中被混合以给出最终被送往立体声系统中的左右声道61和62的左右信号。示例性的音频轨迹在54-56中给出。每个音频轨迹包括左、右分量，它们的相对增益由施加给相应放大器对的增益设置来确定。对应于音频轨迹54的放大器在63和64给出。通过调整左、右音频轨迹的相对增益，帧中该轨迹的声象的视位置可以从一边移到另一边。在图2的实施方案中，对应于情景中N个声学源存在N个这种音频轨迹。在图1中给出的简单图象中，只存在两个这种音频轨迹，一个用于钢琴，一个用于贝斯。考虑剪切帧12中的图象，由于钢琴图象在接近中央处显示而贝斯图象在右边显示，两个乐器声音的立体声定位必须被改变使得钢琴声音表现为来自于靠近中央的位置，而贝斯声音表现为来自较远的右边位置。因此，图2中(R1，L1)和(R2，L2)受增益控制器的控制使得例如，左、右声道的相对增益现在是(R1，L1)＝(0.5，0.5)和(R2，L2)＝(1.0，0.0)。如果通过来自用户的指令图象的显示位置改变到剪切帧14，那麽钢琴图象将在左边显示而贝斯本文档来自技高网...

【技术保护点】
用于播放多媒体作品的显示系统［５０，１５０］，其中的多媒体作品包括图象数据和与所述图象数据相关的声音数据，所述系统包括： 用于显示从所述图象数据获得的图象的显示器［７０］； 用于组合并播放与所述图象链接的第一和第二音频轨迹［５４，５５，１５４，１５５］的音频播放系统［６６，１６６］； 用于在所述显示器［７０］上选出所述图象中一个区域的定位系统［６５，１６５］，所述选出区域由所述显示系统［５０，１５０］的用户命令指定； 用于根据定位系统［６５，１６５］在显示器［７０］上选出新区域的情况来改变被所述音频播放系统［６６，１６６］播放的所述第一和第二音频轨迹［５４，５５，１５４，１５５］的组合并用来显示位于所述显示器［７０］中心的所述新区域的播放处理器［５３，６３，６４，１５３，１６３，１６４］。

【技术特征摘要】
【国外来华专利技术】JP 1997-8-12 217281/97的限制。权利要求1.用于播放多媒体作品的显示系统[50，150]，其中的多媒体作品包括图象数据和与所述图象数据相关的声音数据，所述系统包括用于显示从所述图象数据获得的图象的显示器[70]；用于组合并播放与所述图象链接的第一和第二音频轨迹[54，55，154，155]的播放系统[66，166]；用于在所述显示器[70]上选出所述图象中一个区域的指针[65，165]，所述选出区域由所述显示系统[50，150]的用户命令指定；剪切控制器[51]，用于输入被剪切的图像位置，并将其送至播放处理器[53，63，64，153，163，164]；以及播放处理器[53，63，64，153，163，164]，用于根据指针[65，165]在显示器[70]上选出新区域的情况来改变被所述播放系统[66，166]播放的所述第一和第二音频轨迹[54，55，154，155]的组合，并显示位于所述显示器[70]中心的所述新区域。2.权利要求1的显示系统[50，150]，其中所述第一和第二音频轨迹[54，55，154，155]包括在播放之前要被混合的音轨，并且其中所述图象包括当所述显示器[70]的所述选出区域在所述图象的预定位置中被居中时，指定将被用于所述混合的增益的数据。3.权利要求2的显示系统[50，150]，其中所述播放处理器[53，63，64，153，163，164]为所述预定位置内插所述数据以便当所述选出区域在不同于所述预定位置的点上被居中时为所述音轨提供增益。4.权利要求3的显示系统[50，150]，其中所述多媒体作品包括用于在多个分辨率下指定图象的数据，其中所述指针[65，165]还根据所述用户的输入来选出其中一个分辨率，并且其中所述的播放处理器[53，63，64，153，163，164]根据所述选出区域和所述选出分辨率改变被所述播放系统[66，166]播放的第一和第二音频轨迹[54，55，154，155]的组合。5.权利要求4的显示系统[50，150]，其中所述图象包括当所述显示器[70]的所述选出区域在预定分辨率下在所述图象的预定位置被居中时，指定用于所述音轨混合的增益的数据。6.权利要求5的显示系统[50，150]，其中所述内插处理器针对所述预定定位和分辨率内插所述数据以便当所述选出区域在不同于所述预定位置和分辨率的点上被居中时为所述音轨提供增益。7.权利要求1的显示系统[50，150]，其中对于每个所述音轨[54，55]，所述播放处理器[53，63，64，153，163，164]包括一个可变增益放大器，所述放大器的增益被根据所述图象的所述选出区域中的...

【专利技术属性】
技术研发人员：K纳高，
申请(专利权)人：惠普公司，
类型：发明
国别省市：US[美国]