声音记录设备，声音系统，声音记录方法和载体装置制造方法及图纸

一种设备，系统，以及方法，其配置为：获取从在多个麦克风收集的多个声音信号生成的声音数据；从一个或多个传感器获取在收集多个声音信号的时间段期间的时间点检测声音记录设备的位置的结果；以及在存储器中互相关联地存储表示在该时间点检测到的声音记录设备的位置的位置数据，以及基于在检测到该位置的时间点在麦克风处收集的多个声音信号生成的声音数据。

Sound recording equipment, sound system, sound recording method and carrier device

A device, a system, and a method configured to: obtain sound data generated from a plurality of sound signals collected in a plurality of microphones; obtain a result of detecting the position of a sound recording device at a time point during a time period when a plurality of sound signals are collected from one or more sensors; and store a sound represented at the time point detected in a memory in association with each other The position data of the recording device and the sound data generated based on a plurality of sound signals collected at the microphone at a time point when the position is detected.

【技术实现步骤摘要】
【国外来华专利技术】声音记录设备，声音系统，声音记录方法和载体装置
本专利技术涉及声音记录设备，声音系统，声音记录方法和诸如记录介质的载体装置。
技术介绍
例如，在相关技术中已知高保真度立体声响复制及波面合成法(WFS)，作为用于再现全方位音场的立体音响技术。高保真度立体声响复制和WFS是试图根据音响理论再现高精度音场的技术。例如，在高保真度立体声响复制中，对使用多个麦克风记录的音执行预定的信号处理，以再现在收听声音的位置处的声音的方向性。在这些声场再现方法中，通常，需要高精度地准备声音拾取条件，例如麦克风的布置。例如，在高保真度立体声响复制中，麦克风称为高保真度立体声响复制麦克风，需要高精度地配置麦克风及其朝向。关于声音技术，专利文献1为人们所公知。专利文献1公开了一种用于实时分发全方位动画的动画(视频)分发系统。所述动画分发系统获取与由照相机执行图像捕获同步的立体声，通过使用分发服务器分发所述全方位动画和所述立体声，并且，根据由用户观看的显示范围再现声音数据。然而，专利文献1未能克服再生无不自然声音的课题。引文列表专利文献【专利文献1】日本专利No.5777185
技术实现思路
技术问题鉴于上述情况，本专利技术的专利技术人发现需要一种能够在没有不自然的情况下再现声音的系统。解决问题的方案本专利技术的示例实施例包括一种声音记录设备，其包括控制器，用于：获取从在多个麦克风处收集的多个声音信号生成的声音数据；从一个或多个传感器获取在收集多个声音信号的时间段期间的时间点检测声音记录设备的位置的结果；以及在存储器中互相关联地存储表示在该时间点检测到的声音记录设备的位置的位置数据，以及基于在检测到该位置的时间点在麦克风处收集的多个声音信号生成的声音数据。本专利技术的示例实施例包括一种声音系统，包括：所述声音记录设备以及声音再生设备；其中，所述声音记录设备的控制器进一步配置为对所述声音数据进行编码，以生成编码的立体声声音数据，并根据所述声音再生设备的规格对所述编码的立体声声音数据进行解码，以生成用于输出到所述声音再生设备的扬声器驱动信号。本专利技术的示例实施例包括一种由声音记录设备执行的声音记录方法，该方法包括：获取从在多个麦克风收集的多个声音信号生成的声音数据；从一个或多个传感器获取在收集多个声音信号的时间段期间的时间点检测声音记录设备的位置的结果；以及在存储器中互相关联地存储表示在该时间点检测到的声音记录设备的位置的位置数据，以及基于在检测到该位置的时间点在麦克风处收集的多个声音信号生成的声音数据。本专利技术的示例实施例包括诸如用于使一个或多个处理器执行上述方法的控制程序的载体装置(carriermeans)，以及通过执行上述方法而生成的数据的数据结构。本专利技术的效果利用上述配置，成功地再现没有不自然的声音。附图说明附图旨在描述本专利技术的示例实施例，而不应被解释为限制其范围。除非明确指出，否则附图不应视为按比例绘制。而且，相同或相似的附图标记在若干视图中表示相同或相似的部件。图1是表示根据实施例的全天球图像捕获设备的硬件配置图。图2是在根据实施例的全天球图像捕获设备上实现的与图像及声音的记录功能关联的功能方框图。图3是表示由根据实施例的全天球图像捕获设备记录的文件的数据结构图。图4是表示根据实施例的全天球图像捕获设备执行的图像-声音记录方法的流程图。图5是表示根据实施例的全天球图像捕获设备执行的图像-声音再生方法的流程图。图6A是表示在采用高保真度立体声响复制作为立体声技术的例子中从声音数据的获取到再生的流程的流程图，图6B是表示在采用高保真度立体声响复制作为立体声技术的例子中从声音数据的获取到再生的流程的流程图。图7A至图7E是根据实施例的立体音响的坐标轴的图。图8是在根据另一实施例的全天球图像捕获设备上实现的与图像及声音的记录功能关联的功能方框图。具体实施方式这里使用的术语仅用于描述特定实施例的目的，并不意图限制本专利技术。如这里所使用的单数形式“一”、“一个”、“该”也旨在包括复数形式，除非上下文另有明确说明。在描述附图中所示的实施例时，为了清楚起见采用了特定的术语。然而，本说明书的公开内容并不旨在限于如此选择的特定术语，并且应当理解，每个特定元件包括具有类似功能、以类似方式操作并且实现类似结果的所有技术等同物。下面将描述实施例，但是实施例并不限于下面描述的实施例。在以下描述的实施例中，全天球图像捕获设备110具有声音记录功能，作为声音记录设备(soundrecordingapparatus)和声音系统(soundsystem)的一个例子说明。然而，声音记录设备和声音系统并不限于下面描述的特定实施例。在下面描述的实施例中，全天球图像捕获设备110包括多个图像捕获光学系统，每个图像捕获光学系统包括图像形成光学系统和成像元件。全天球图像捕获设备110捕获来自对应于各个图像捕获光学系统以生成捕获图像的方向的图像。各个图像捕获光学系统具有大于180度(＝360度/N，N＝2)的全视角，优选具有等于或大于185度的全视角，更优选具有等于或大于190度的全视角。全天球图像捕获设备110合成由多个图像捕获光学系统分别捕获的图像，生成立体角4π球面度的图像(下文中，称为“全天球图像”)。全天球图像成为从图像捕获点可以看到的所有方向上捕获的图像。可以通过使用单一的光学系统捕获半球图像。根据本实施例的全天球图像捕获设备110还包括诸如多个麦克风的声音拾取装置。全天球图像捕获设备110基于由各麦克风获取的声音信号，记录声音数据。由于所记录的声音数据可以形成立体声，因此，通过使用具有预定构成的扬声器组或耳机，再现包含声音方向性的声场。下面将首先参考图1描述全天球图像捕获设备110的硬件配置。图1是表示根据该实施例的全天球图像捕获设备110的硬件配置图。图1中所示的全天球图像捕获设备110构成为双透镜的全天球图像捕获设备，其组合具有大于180度的全视角的两个光学系统。全天球图像捕获设备110包括中央处理单元(CPU)112，只读存储器(ROM)114，图像处理块116，动画块118，经由DRAM接口120连接到总线152的动态随机存取存储器(DRAM)132，以及经由传感器接口124连接到总线152的传感器(包括加速度传感器、陀螺传感器、地磁传感器中至少一个)136。CPU112控制全天球图像捕获设备110的各硬件，以控制全天球图像捕获设备110的全体动作。ROM114存储以CPU112可解码的代码编写的控制程序和各种参数。全天球图像捕获设备110包括两个成像元件(第一成像元件和第二成像元件)130A和130B(每一个都可以由电荷耦合器件(CCD)传感器或互补金属氧化物半导体(CMOS)传感器实现)，以及两个光学系统(第一光学系统和第二光学系统)131A和131B。在这里描述的实施例中，光学系统131A和131B中的每一个包括本文档来自技高网...

【技术保护点】
1.一种声音记录设备，包括：/n控制器，配置为：/n获取从在多个麦克风收集的多个声音信号生成的声音数据；/n从一个或多个传感器获取在收集多个声音信号的时间段期间的时间点检测声音记录设备的位置的结果；以及/n在存储器中互相关联地存储表示在该时间点检测到的声音记录设备的位置的位置数据，以及基于在检测到该位置的时间点在麦克风处收集的多个声音信号生成的声音数据。/n

【技术特征摘要】
【国外来华专利技术】20170314 JP 2017-048769;20180223 JP 2018-0307691.一种声音记录设备，包括：
控制器，配置为：
获取从在多个麦克风收集的多个声音信号生成的声音数据；
从一个或多个传感器获取在收集多个声音信号的时间段期间的时间点检测声音记录设备的位置的结果；以及
在存储器中互相关联地存储表示在该时间点检测到的声音记录设备的位置的位置数据，以及基于在检测到该位置的时间点在麦克风处收集的多个声音信号生成的声音数据。


2.根据权利要求1所述的声音记录设备，
其中，声音数据包括分别从在多个麦克风处收集的多个声音信号生成的多项声音数据，或者从在多个麦克风处收集的多个声音信号编码的立体声声音数据。


3.根据权利要求1或2所述的声音记录设备，
进一步包括至少一个配置为捕获图像的图像捕获光学系统；
其中，所述控制器进一步配置为：与位置数据及各对应于检测到位置的时间点的声音数据相关联地，存储基于在检测到位置的时间点捕获的一个或多个图像而生成的图像数据。


4.根据权利要求3所述的声音记录设备，
其中，控制器配置为：使用在上述时间点检测到的声音记录设备的位置，对于对应于检测到位置的时间点的声音数据和图像数据中的至少一个，执行投影变换。


5.根据权利要求4所述的声音记录设备，
进一步包括操作单元，其配置为接受指示是否执行天顶校正和旋转校正中的至少一个的选择；
其中，控制器基于指示执行天顶校正和旋转校正中的至少一个的选择执行投影变换。


6.根据权利要求1至5中任一项所述的声音记录设备，
其中，检测到位置的时间点是捕获图像的帧组单位期间的任何时间点。


7.根据权利要求1至6中任一项所述的声音记录设备，
其中，位置数据包括以下之一：声音记录装置相对于基准方向的倾斜角度，以及一组所述声音记录设备的所述倾斜角度和水平面相对于预定正面方向的旋转角度，每个都是根据检测位置的结果计算而得。


8.根据权利要求3至7中任一项所述的声音记录设备，
其中，所述图像捕获光学系统包括至少一个设有广角透镜的光学系统。

【专利技术属性】
技术研发人员：松浦笃，
申请(专利权)人：株式会社理光，
类型：发明
国别省市：日本;JP