多相机设备制造技术

本说明书描述了：使用多相机设备的第一相机来获得第一区域的第一视频数据；使用多相机设备的第二相机来获得第二区域的第二视频数据；从第一视频数据和第二视频数据生成多相机视频输出，通过使用第一视频映射以将第一视频数据映射到多相机视频输出的第一部分并且使用第二视频映射以将第二视频数据映射到多相机视频输出的第二部分，来生成多相机视频输出；以及从所获得的音频数据生成音频输出，该音频输出包括具有在视频输出的第一部分内的方向分量的音频输出以及具有在视频输出的第二部分内的方向分量的音频输出，其中生成音频输出包括：使用第一音频映射以将具有在第一区域内的方向分量的音频数据映射到具有在视频输出的第一部分内的方向分量的音频输出，并且使用第二音频映射以将具有在第二区域内的方向分量的音频数据映射到具有在视频输出的第二部分内的方向分量的音频输出。

【技术实现步骤摘要】
【国外来华专利技术】多相机设备
本说明书涉及使用多相机设备(诸如，合适的移动通信设备)捕获视频和音频内容。
技术介绍
包括摄像机的移动通信设备是已知的。而且，已知在移动通信设备的前面和后面设置这种相机。来自前置和后置相机的内容然后可以彼此相邻地呈现。视觉数据的这种呈现对于与这种视觉数据有关的一些音频数据的呈现具有影响。
技术实现思路
在第一方面中，本说明书描述了一种方法，该方法包括：使用多相机设备的第一相机获得第一区域的第一视频数据；使用多相机设备的第二相机获得第二区域的第二视频数据，该第二相机被定向在与第一相机不同的方向上，使得第一区域和第二区域至少部分地不同；从第一视频数据和第二视频数据生成多相机视频输出，通过使用第一视频映射以将第一视频数据映射到多相机视频输出的第一部分并且使用第二视频映射以将第二视频数据映射到多相机视频输出的第二部分，来生成该多相机视频输出；使用多相机设备获得音频数据，该音频数据的至少一些音频数据具有方向分量；以及从所获得的音频数据生成音频输出，该音频输出包括具有在视频输出的第一部分内的方向分量的音频输出以及具有在视频输出的第二部分内的方向分量的音频输出，其中生成音频输出包括：使用第一音频映射以将具有在第一区域内的方向分量的音频数据映射到具有在视频输出的第一部分内的方向分量的音频输出，并且使用第二音频映射以将具有在第二区域内的方向分量的音频数据映射到具有在视频输出的第二部分内的方向分量的音频输出，其中第一音频映射和第二音频映射分别与第一视频映射和第二视频映射相对应。多相机输出的第一部分和第二部分可以并排呈现。多相机输出的第一部分和第二部分可以以一项数据输出在另一数据输出之上的方式被呈现。第一相机可以是前置相机。第二相机可以是后置相机。第一和第二视频映射可以包括：修改第一和第二视频数据，使得视频输出的第一部分比第一视频数据窄并且第二部分比第二视频数据窄。在第一和第二区域两者外具有方向分量的音频数据可以从音频输出中被排除。备选地，在第一和第二区域两者外具有方向分量的音频数据可以被包括在音频输出中，作为不具有方向分量的音频输出。在又一备选方案中，在第一区域和第二区域两者外具有方向分量的音频数据可以被包括在音频输出中，作为具有方向分量的音频输出，其中在第一和第二区域两者外具有方向分量的音频数据经历第三音频映射。在第一区域和第二区域两者外具有方向分量的音频数据可以通过第三音频映射而被拉伸，使得与第一区域和第二区域外的面积相对应的音频输出的面积比所述第一区域和第二区域外的所述面积宽。备选或者另外地，第一音频映射、第二音频映射和第三音频映射可以使得音频输出提供360度的音频输出。在一些实施例中，使用多相机设备获得音频数据可以包括：使用一个或多个空间麦克风或麦克风阵列。该方法可以还包括：用户指示与多相机视频输出的第一部分或第二部分相关联的音频数据是否将被增强和/或衰减。用户指示可以通过用户分别接触多相机视频输出的第一部分和/或第二部分而被执行。在第二方面中，本说明书描述了一种装置，该装置被配置为执行参照第一方面描述的任何方法。在第三方面中，本说明书描述了计算机可读指令，该计算机可读指令在由计算装置执行时使计算装置执行参照第一方面描述的任何方法。在第四方面中，本说明书描述了一种计算机可读介质，在其上存储有计算机可读代码，该计算机可读代码在由至少一个处理器执行时引起以下项的执行：使用多相机设备的第一相机来获得第一区域的第一视频数据；使用多相机设备的第二相机来获得第二区域的第二视频数据，该第二相机被定向在与第一相机不同的方向上，使得第一区域和第二区域至少部分地不同；从第一视频数据和第二视频数据生成多相机视频输出，通过使用第一视频映射将第一视频数据映射到多相机视频输出的第一部分并且使用第二视频映射将第二视频数据映射到多相机视频输出的第二部分，来生成多相机视频输出；使用多相机设备获得音频数据，该音频数据中的至少一些音频数据具有方向分量；以及从所获得的音频数据生成音频输出，该音频输出包括具有在视频输出的第一部分内的方向分量的音频输出以及具有在视频输出的第二部分内的方向分量的音频输出，其中生成音频输出包括：使用第一音频映射将具有在第一区域内的方向分量的音频数据映射到具有在视频输出的第一部分内的方向分量的音频输出，并且使用第二音频映射将具有在第二区域内的方向分量的音频数据映射到具有在视频输出的第二部分内的方向分量的音频输出，其中第一音频和第二音频映射分别与第一视频映射和第二视频映射相对应。在第五方面中，本说明书描述了一种装置，该装置包括：至少一个处理器；以及包括计算机程序代码的至少一个存储器，该计算机程序代码在由至少一个处理器执行时使该装置：使用多相机设备的第一相机获得第一区域的第一视频数据；使用多相机设备的第二相机获得第二区域的第二视频数据，该第二相机被定向在与第一相机不同的方向上，使得第一区域和第二区域至少部分地不同；从第一视频数据和第二视频数据生成多相机视频输出，通过使用第一视频映射将第一视频数据映射到多相机视频输出的第一部分并且使用第二视频映射将第二视频数据映射到多相机视频输出的第二部分，来生成多相机视频输出；使用多相机设备获得音频数据，该音频数据中的至少一些音频数据具有方向分量；以及从所获得的音频数据生成音频输出，该音频输出包括具有在视频输出的第一部分内的方向分量的音频输出以及具有在视频输出的第二部分内的方向分量的音频输出，其中生成音频输出包括：使用第一音频映射将具有在第一区域内的方向分量的音频数据映射到具有在视频输出的第一部分内的方向分量的音频输出，并且使用第二音频映射将具有在第二区域内的方向分量的音频数据映射到具有在视频输出的第二部分内的方向分量的音频输出，其中第一音频映射和第二音频映射分别与第一视频映射和第二视频映射相对应。在第六方面中，本说明书描述了一种装置，该装置包括：用于使用多相机设备的第一相机来获得第一区域的第一视频数据的部件；用于使用多相机设备的第二相机来获得第二区域的第二视频数据的部件，该第二相机被定向在与第一相机不同的方向上，使得第一区域和第二区域至少部分地不同；用于从第一和第二视频数据生成多相机视频输出的部件，通过使用第一视频映射将第一视频数据映射到多相机视频输出的第一部分并且使用第二视频映射将第二视频数据映射到多相机视频输出的第二部分，来生成该多相机视频输出；用于使用多相机设备获得音频数据的部件，该音频数据中的至少一些音频数据具有方向分量；以及用于从所获得的音频数据生成音频输出的部件，该音频输出包括具有在视频输出的第一部分内的方向分量的音频输出以及具有在视频输出的第二部分内的方向分量的音频输出，其中生成音频输出包括：使用第一音频映射将具有在第一区域内的方向分量的音频数据映射到具有在视频输出的第一部分内的方向分量的音频输出，并且使用第二音频映射将具有在第二区域内的方向分量的音频数据映射到具有在视频输出的第二部分内的方向分量的音频输出，其中第一音频映射和第二音频映射分别与第一视频映射和第二视频映射相对应。多相机输出的第一部分和第二部分可以并排呈现。本文档来自技高网...

【技术保护点】
1.一种装置，包括：/n用于使用多相机设备的第一相机来获得第一区域的第一视频数据的部件；/n用于使用所述多相机设备的第二相机来获得第二区域的第二视频数据的部件，所述第二相机被定向在与所述第一相机不同的方向上，使得所述第一区域和所述第二区域至少部分地不同；/n用于从所述第一视频数据和所述第二视频数据生成多相机视频输出的部件，通过使用第一视频映射以将所述第一视频数据映射到所述多相机视频输出的第一部分并且使用第二视频映射以将所述第二视频数据映射到所述多相机视频输出的第二部分，来生成多所述相机视频输出；/n用于使用所述多相机设备来获得音频数据的部件，所述音频数据中的至少一些音频数据具有方向分量；以及/n用于从所获得的所述音频数据生成音频输出的部件，所述音频输出包括具有在所述视频输出的所述第一部分内的方向分量的音频输出以及具有在所述视频输出的所述第二部分内的方向分量的音频输出，其中生成所述音频输出包括：使用第一音频映射以将具有在所述第一区域内的方向分量的音频数据映射到具有在所述视频输出的所述第一部分内的方向分量的所述音频输出，并且使用第二音频映射以将具有在所述第二区域内的方向分量的音频数据映射到具有在所述视频输出的所述第二部分内的方向分量的所述音频输出，其中所述第一音频映射和所述第二音频映射分别与所述第一视频映射和所述第二视频映射相对应。/n...

【技术特征摘要】
【国外来华专利技术】20171220 EP 17208720.71.一种装置，包括：
用于使用多相机设备的第一相机来获得第一区域的第一视频数据的部件；
用于使用所述多相机设备的第二相机来获得第二区域的第二视频数据的部件，所述第二相机被定向在与所述第一相机不同的方向上，使得所述第一区域和所述第二区域至少部分地不同；
用于从所述第一视频数据和所述第二视频数据生成多相机视频输出的部件，通过使用第一视频映射以将所述第一视频数据映射到所述多相机视频输出的第一部分并且使用第二视频映射以将所述第二视频数据映射到所述多相机视频输出的第二部分，来生成多所述相机视频输出；
用于使用所述多相机设备来获得音频数据的部件，所述音频数据中的至少一些音频数据具有方向分量；以及
用于从所获得的所述音频数据生成音频输出的部件，所述音频输出包括具有在所述视频输出的所述第一部分内的方向分量的音频输出以及具有在所述视频输出的所述第二部分内的方向分量的音频输出，其中生成所述音频输出包括：使用第一音频映射以将具有在所述第一区域内的方向分量的音频数据映射到具有在所述视频输出的所述第一部分内的方向分量的所述音频输出，并且使用第二音频映射以将具有在所述第二区域内的方向分量的音频数据映射到具有在所述视频输出的所述第二部分内的方向分量的所述音频输出，其中所述第一音频映射和所述第二音频映射分别与所述第一视频映射和所述第二视频映射相对应。


2.根据权利要求1所述的装置，还包括：用于修改所述第一视频数据和所述第二视频数据以实现所述第一视频映射和所述第二视频映射来使得所述视频输出的所述第一部分和所述第二部分比所述第一视频数据和所述第二视频数据窄的部件。


3.根据权利要求1或权利要求2所述的装置，其中具有在所述第一区域和所述第二区域两者之外的方向分量的音频数据从所述音频输出被排除。


4.根据权利要求1或权利要求2所述的装置，其中具有在所述第一区域和所述第二区域两者之外的方向分量的音频数据被包括在所述音频输出中，作为不具有方向分量的音频输出。


5.根据权利要求1或权利要求2所述的装置，其中具有在所述第一区域和所述第二区域二者之外的方向分量的音频数据被包括在所述音频输出中，作为具有方向分量的音频输出，其中具有在所述第一区域和所述第二区域两者之外的方向分量的所述音频数据经历第三音频映射。


6.根据权利要求5所述的装置，还包括：用于通过所述第三音频映射拉伸具有在所述第一区域和所述第二区域两者之外的方向分量的所述音频数据来使得所述音频输出的、与所述第一区域和所述第二区域之外的面积相对应的面积比所述第一区域和所述第二区域之外的所述面积宽的部件。


7.根据权利要求5或权利要求6所述的装置，其中所述第一音频映射、所述第二音频映射和所述第三音频映射使得所述音频输出提供360度的音频输出。


8.根据前述权利要求中任一项所述的装置，其中所述多相机输出的所述第一部分和所述第二部分被并排呈现。


9.根据前述权利要求中任一项所述的装置，其中所述多相机输出的所述第一部分和所述第二部分以一个数据输出在另一数据输出之上的方式被呈现。


10.根据前述权利要求中任一项所述的装置，其中用于使用所述多相机设备获得音频数据的所述部件包括使用一个或多个空间麦克风或者麦克风阵列。


11.根据前述权利要求中任一项所述的装置，还包括：用于获得对与所述多相机视频输出的所述第一部分或所述第二部分相关联的音频输出是否将被增强和/或衰减的用户指示的部件。


12.根据权利要求11所述的装置，其中所述用户指示通过用户分别接触所述多相机视频输出的所述第一部分和/或所述第二部分而被执行。


13.根据前述权利要求中任一项所述的装置，其中所述第一相机是前置相机和/或所述第二相机是后置相机。


14.根据前述权利要求中任一项所述的装置，其中所述部件...

【专利技术属性】
技术研发人员：J·勒帕南，A·勒蒂涅米，S·S·马特，A·埃罗南，
申请(专利权)人：诺基亚技术有限公司，
类型：发明
国别省市：芬兰;FI