多波束会议拾音系统及方法技术方案

本发明专利技术提供了一种多波束会议拾音系统及方法，系统包括摄像头、控制设备和拾音器，其中：摄像头采集拾音场所的俯视图像；控制设备显示拾音场所的俯视图像，识别拾音器的位置；控制设备获取用户在俯视图像中的圈取动作，根据圈取动作的类型确定对应的圈取区域的类型；控制设备分别计算各个圈取区域相对于拾音器的相对位置；拾音器根据各个圈取区域的相对位置处理输入音频。本发明专利技术通过采用摄像头获取拾音场所的俯视图像，并展示给用户，用户可以自己在图像中圈取拾音区域和降噪区域，用户可以自定义拾音区域、降噪区域以及圈取区域的大小，操作更加方便，在拾音的过程中同时对突出的潜在噪声干扰源进行降噪，拾音效果更加贴合实际需求。

【技术实现步骤摘要】
多波束会议拾音系统及方法
本专利技术涉及音频处理
，尤其涉及一种多波束会议拾音系统及方法。
技术介绍
随着信息时代的到来，计算机多媒体技术的迅猛发展，网络技术的普遍应用，各种会议的进行对多媒体音频的要求越来越高。现有技术中的会议拾音方案中，往往仅采用单纯的降噪方案，对声音进行滤波等简单处理。然而采用该种方式，无法很好地区分音源，也无法针对性地对需要降噪的位置进行合理降噪，无法获得很好的会议拾音效果。
技术实现思路
针对现有技术中的问题，本专利技术的目的在于提供一种多波束会议拾音系统及方法，用户可以自行定义拾音区域和降噪区域，有针对性地对拾音区域的声源进行增强，对降噪区域的声源进行抑制。本专利技术实施例提供一种多波束会议拾音方法，包括摄像头、控制设备和拾音器，其中：所述摄像头采集拾音场所的俯视图像，并发送至所述控制设备；所述控制设备显示所述拾音场所的俯视图像，识别所述拾音器的位置；所述控制设备获取用户在所述俯视图像中的圈取动作，根据所述圈取动作的类型确定对应的圈取区域的类型，其中，第一类圈取动作的圈取区域为拾音区域，第二类圈取动作的圈取区域为降噪区域；所述控制设备分别计算各个所述圈取区域相对于所述拾音器的相对位置，并发送至所述拾音器；所述拾音器根据各个所述圈取区域的相对位置处理输入音频，对所述拾音区域对应的声源进行增强，对所述降噪区域对应的声源进行抑制。可选地，所述第一类圈取动作为沿顺时针方向圈取一区域，所述第二类圈取动作为逆时针方向圈取一区域；或所述第一类圈取动作为逆时针方向圈取一区域，所述第二类圈取动作为顺时针圈取一区域。可选地，所述拾音器的表面设置有至少两个特征点，所述控制设备于所述拾音场所的俯视图像中识别所述拾音器的特征点，并根据所述拾音器的特征点的连线方向确定所述拾音器所处位置和基准指向。可选地，所述拾音器的表面设置有两个特征点：中心特征点和边缘特征点，所述拾音器的0°指向基准角为：其中，(xc,yc)为所述拾音器的中心特征点的坐标，(xe,ye)为所述边缘特征点的坐标。可选地，所述拾音器上设置有移动侦测传感器，所述移动侦测传感器检测到移动信号时发送至所述拾音器，所述拾音器通知所述控制设备重新识别所述拾音器的特征点，重新确定所述拾音器所处位置和基准指向，并重新确定各个所述圈取区域相对于所述拾音器的相对位置，所述拾音器根据重新确定的各个所述圈取区域的相对位置处理输入音频。可选地，所述拾音器的特征点处设置有发光件，所述发光件具有两种发光状态；所述拾音器初始化时，所述发光件为第一发光状态，所述拾音器获取到所述圈取区域的相对位置后，使所述发光件进入第二发光状态；所述拾音器获取到移动信号时，控制所述发光件重新进入第一发光状态；所述控制设备识别到所述发光件处于第一发光状态时，识别所述拾音器的特征点，定义所述拾音器的指向基准方向，并计算各个圈取区域相对于所述拾音器的相对位置。可选地，所述拾音器为包括多个单指向性麦克风的可变指向数字拾音器或包括多个全指向性麦克风的多波束阵列数字拾音器。可选地，所述拾音器为可变指向数字拾音器时，所述圈取区域相对于所述拾音器的相对位置包括所述拾音区域相对于所述拾音器的指向角和所述降噪区域相对于所述拾音器的指向角；所述拾音器根据各个所述圈取区域的相对位置处理输入音频，包括：所述拾音器基于指向性阵元的子带差分算法处理输入的音频，对与所述拾音区域最接近的声源进行增强，与所述降噪区域最接近的声源进行抑制。可选地，所述圈取区域相对于所述拾音器的相对位置还包括所述拾音区域相对于所述拾音器的张角和所述降噪区域相对于所述拾音器的张角；所述拾音器根据各个所述圈取区域的相对位置处理输入音频，还包括：所述拾音器根据所述拾音区域的张角和所述降噪区域的张角选择拾音的波束宽度，以与所述拾音区域的张角和所述降噪区域的张角相适应。可选地，所述拾音器为多波束阵列数字拾音器时，所述圈取区域相对于所述拾音器的相对位置包括所述拾音区域相对于所述拾音器的指向角和张角以及所述降噪区域相对于所述拾音器的指向角和张角；所述拾音器根据各个所述圈取区域的相对位置处理输入音频，包括：所述拾音器根据所述圈取区域的相对位置进行波束构型，每个波束的指向角为对应的拾音区域的指向角，每个波束的零陷角包括的两个角度以及所有降噪区域的指向角，其中，θ为与所对应拾音区域的指向角，为与所对应拾音区域的张角，K为预设的束宽控制参数。本专利技术实施例还提供一种多波束会议拾音方法，其特征在于，采用所述的多波束会议拾音系统，所述方法包括如下步骤：所述摄像头采集拾音场所的俯视图像，并发送至所述控制设备；所述控制设备显示所述拾音场所的俯视图像，识别所述拾音器的位置；所述控制设备获取用户在所述俯视图像中的圈取动作，根据所述圈取动作的类型确定对应的圈取区域的类型，其中，第一类圈取动作的圈取区域为拾音区域，第二类圈取动作的圈取区域为降噪区域；所述控制设备分别计算各个所述圈取区域相对于所述拾音器的相对位置，并发送至所述拾音器；所述拾音器根据各个所述圈取区域的相对位置处理输入音频，对所述拾音区域对应的声源进行增强，对所述降噪区域对应的声源进行抑制。本专利技术所提供的多波束会议拾音系统及方法具有下列优点：本专利技术通过采用摄像头获取拾音场所的俯视图像，并展示给用户，用户可以自己在图像中圈取拾音区域和降噪区域，通过识别用户不同的圈取动作可以进行不同区域的区分，并且计算圈取区域相对于拾音器的相对位置，拾音器可以根据拾音区域和降噪区域的相对位置进行音频处理，得到对拾音区域的声音增强，对降噪区域的声音抑制的音频；用户可以自定义拾音区域、降噪区域以及圈取区域的大小，操作更加方便，在拾音的过程中同时对突出的潜在噪声干扰源进行降噪，拾音效果更加贴合实际需求。附图说明通过阅读参照以下附图对非限制性实施例所作的详细描述，本专利技术的其它特征、目的和优点将会变得更明显。图1是本专利技术的多波束会议拾音系统的结构示意图；图2是本专利技术一实施例的多波束会议拾音方法的流程图；图3是本专利技术一实施例的手持控制设备中拾音区域和降噪区域圈取方式的示意图；图4是本专利技术一实施例的圈取区域角度转换示意图；图5是本专利技术另一实施例的数字麦克风波束虚拟通道指向性示意图；图6是本专利技术的多波束会议拾音方法应用于具体实例的流程图。具体实施方式现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的实施方式；相反，提供这些实施方式使得本专利技术将全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。在图中相同的附图标记表示相同或类似的结构，因而将省略对它们的重复描述。如图1所示，本专利技术实施例提供一种多波束会议拾音系统，包括摄像头100、控制设备300和拾音器200。在该实施例中，摄像头100为吸顶式广角数字摄像头，用于采集拾音场所的俯视图；控制设备300为手持式控制设备，用于对拾音区域进行控制；拾音器200为数字麦克风拾音器，用于声音的采集，由多个麦克风按特定方式排列而成，各麦克风拾取声音信号后经处理后输出。摄像头100、控制设备300和拾音器200之间可以通过无线射频网络进行数据传输。如图2所示，本专利技术实施例提供一种多波束会议拾音方法，采用所述的多波束会议拾音系统，所述方法包括如下步骤：本文档来自技高网...

【技术保护点】
1.一种多波束会议拾音系统，其特征在于，包括摄像头、控制设备和拾音器，其中：所述摄像头采集拾音场所的俯视图像，并发送至所述控制设备；所述控制设备显示所述拾音场所的俯视图像，识别所述拾音器的位置；所述控制设备获取用户在所述俯视图像中的圈取动作，根据所述圈取动作的类型确定对应的圈取区域的类型，其中，第一类圈取动作的圈取区域为拾音区域，第二类圈取动作的圈取区域为降噪区域；所述控制设备分别计算各个所述圈取区域相对于所述拾音器的相对位置，并发送至所述拾音器；所述拾音器根据各个所述圈取区域的相对位置处理输入音频，对所述拾音区域对应的声源进行增强，对所述降噪区域对应的声源进行抑制。

【技术特征摘要】
1.一种多波束会议拾音系统，其特征在于，包括摄像头、控制设备和拾音器，其中：所述摄像头采集拾音场所的俯视图像，并发送至所述控制设备；所述控制设备显示所述拾音场所的俯视图像，识别所述拾音器的位置；所述控制设备获取用户在所述俯视图像中的圈取动作，根据所述圈取动作的类型确定对应的圈取区域的类型，其中，第一类圈取动作的圈取区域为拾音区域，第二类圈取动作的圈取区域为降噪区域；所述控制设备分别计算各个所述圈取区域相对于所述拾音器的相对位置，并发送至所述拾音器；所述拾音器根据各个所述圈取区域的相对位置处理输入音频，对所述拾音区域对应的声源进行增强，对所述降噪区域对应的声源进行抑制。2.根据权利要求1所述的多波束会议拾音系统，其特征在于，所述第一类圈取动作为沿顺时针方向圈取一区域，所述第二类圈取动作为逆时针方向圈取一区域；或所述第一类圈取动作为逆时针方向圈取一区域，所述第二类圈取动作为顺时针圈取一区域。3.根据权利要求1所述的多波束会议拾音系统，其特征在于，所述拾音器的表面设置有至少两个特征点，所述控制设备于所述拾音场所的俯视图像中识别所述拾音器的特征点，并根据所述拾音器的特征点的连线方向确定所述拾音器所处位置和基准指向。4.根据权利要求3所述的多波束会议拾音系统，其特征在于，所述拾音器的表面设置有两个特征点：中心特征点和边缘特征点，所述拾音器的0°指向基准角为：其中，(xc,yc)为所述拾音器的中心特征点的坐标，(xe,ye)为所述边缘特征点的坐标。5.根据权利要求3所述的多波束会议拾音系统，其特征在于，所述拾音器上设置有移动侦测传感器，所述移动侦测传感器检测到移动信号时发送至所述拾音器，所述拾音器通知所述控制设备重新识别所述拾音器的特征点，重新确定所述拾音器所处位置和基准指向，并重新确定各个所述圈取区域相对于所述拾音器的相对位置，所述拾音器根据重新确定的各个所述圈取区域的相对位置处理输入音频。6.根据权利要求5所述的多波束会议拾音系统，其特征在于，所述拾音器的特征点处设置有发光件，所述发光件具有两种发光状态；所述拾音器初始化时，所述发光件为第一发光状态，所述拾音器获取到所述圈取区域的相对位置后，使所述发光件进入第二发光状态；所述拾音器获取到移动信号时，控制所述发光件重新进入第一发光状态；所述控制设备识别到所述发光件处于第一发光状态时，识别所述拾音器的特征点，定义所述拾音器的指向基准方向，并计算各个圈取区域相对于所述拾音器的相对...

【专利技术属性】
技术研发人员：浦宏杰，鄢仁祥，曹李军，陈卫东，
申请(专利权)人：苏州科达科技股份有限公司，
类型：发明
国别省市：江苏,32