信号处理方法、信号处理装置及信号处理程序制造方法及图纸

本发明专利技术提供一种不会给利用者带来不适感且提高信号处理的精度的信号处理方法、信号处理装置及信号处理程序。信号处理方法对与经由网络连接的其他装置的网络延迟时间进行测量，取得输入信号，基于测量出的所述网络延迟时间和可容许的总延迟时间，对在由于进行信号处理而相对于所述输入信号在输出信号产生的延迟时间中的可容许的上限值进行计算，选择在所述上限值以下具有最长的延迟时间的信号处理，通过所选择的所述信号处理对所述输入信号进行处理，将进行了信号处理后的所述输入信号作为所述输出信号而发送至所述其他装置。所述输出信号而发送至所述其他装置。所述输出信号而发送至所述其他装置。

【技术实现步骤摘要】
信号处理方法、信号处理装置及信号处理程序


[0001]本专利技术的一个实施方式涉及一种对声音信号或影像信号进行处理的信号处理方法、信号处理装置及信号处理程序。

技术介绍

[0002]专利文献1公开了如下结构，即，对无线通信的延迟时间进行测定，对多个编码器参数中的延迟时间最小的编码器参数进行设定。
[0003]专利文献1：日本特开2014－120830号公报
[0004]与远程的其他装置的通信中的延迟包含网络延迟时间和由信号处理引起的延迟时间。如果这些延迟时间的总和超过规定时间，则利用者会感觉到不适感。
[0005]专利文献1的结构是设定最小的延迟时间的编码器参数，因此感觉到不适感的情况较少。但是，专利文献1的结构是设定最小的延迟时间的编码器参数，因此信号处理的精度有可能下降。

技术实现思路

[0006]因此，本专利技术的一个实施方式的目的之一在于，提供一种不会给利用者带来不适感且提高信号处理的精度的信号处理方法、信号处理装置及信号处理程序。
[0007]本专利技术的一个实施方式的信号处理方法对与经由网络而连接的其他装置的网络延迟时间进行测量，取得输入信号，基于测量出的所述网络延迟时间和可容许的总延迟时间，对由于进行信号处理而相对于所述输入信号在输出信号产生的延迟时间中的可容许的上限值进行计算，选择在所述上限值以下具有最长的延迟时间的信号处理，通过所选择的所述信号处理对所述输入信号进行处理，将进行了信号处理后的所述输入信号作为所述输出信号而发送至所述其他装置。
[0008]专利技术的效果
[0009]根据本专利技术的一个实施方式，不会给利用者带来不适感且能够提高信号处理的精度。
附图说明
[0010]图1是表示信号处理装置1的结构的框图。
[0011]图2A是表示处理器12的功能性结构的框图。
[0012]图2B是表示处理器12的功能性结构的框图。
[0013]图3是表示信号处理程序141的动作的流程图。
[0014]图4是表示网络延迟时间的测量的详细动作的流程图。
[0015]图5是表示变形例涉及的网络延迟时间的测量动作的流程图。
[0016]图6是表示变形例1涉及的信号处理装置1A的结构的框图。
[0017]图7是表示信号处理装置1A的处理器12的功能性结构的框图。
具体实施方式
[0018]图1是表示信号处理装置1的结构的框图。信号处理装置1具有通信部11、处理器12、RAM 13、闪存14、传声器15、放大器16、及扬声器17。
[0019]信号处理装置1例如构成与远程地的其他装置连接而进行语音数据的收发的远程对话装置。信号处理装置1对由传声器15取得的声音信号实施规定的信号处理。信号处理装置1将实施了信号处理的声音信号作为语音数据而发送至远程端侧。另外，信号处理装置1基于从远程端侧接收到的语音数据的声音信号，从扬声器17输出声音。
[0020]通信部11经由网络与远程端侧的远程对话装置连接，与远程端侧的远程对话装置进行语音数据的收发。
[0021]处理器12从作为存储介质的闪存14读出程序，临时存储于RAM 13，由此进行各种动作。程序包含信号处理程序141。闪存14除了上述程序之外还对固件等处理器12的动作用程序进行存储。
[0022]传声器15是输入信号取得部的一个例子，取得讲话者的语音及杂音等各种声音作为声音信号。传声器15对取得的声音信号进行数字转换。传声器15将数字转换后的声音信号输出至处理器12。
[0023]处理器12针对由传声器15取得的声音信号，进行规定的信号处理。例如，处理器12针对由传声器15取得的声音信号，进行杂音去除处理。另外，处理器12针对由传声器15取得的声音信号，进行回声去除处理。处理器12将信号处理后的声音信号经由通信部11而作为语音数据发送至远程端侧。另外，处理器12将经由通信部11接收到的语音数据作为声音信号输出至放大器16。
[0024]放大器16对从处理器12接收到的声音信号进行模拟转换而放大。放大器16将放大后的声音信号输出至扬声器17。扬声器17基于从放大器16输出的声音信号，输出声音。
[0025]处理器12实施本专利技术的声音信号处理方法。图2A是表示处理器12的功能性结构的框图。处理器12在功能上构成缓存器121、杂音去除部122、发送部123、接收部124、测量部125、及延迟时间计算部126。这些结构由信号处理程序141实现。
[0026]缓存器121将由传声器15取得的声音信号以规定时间临时储存。杂音去除部122是信号处理部的一个例子，使用储存于缓存器121的声音信号，进行杂音去除处理。发送部123将由杂音去除部122进行杂音去除后的声音信号作为语音数据发送至连接目标的装置。接收部124从连接目标的装置接收语音数据，作为声音信号输出至放大器16。测量部125对网络延迟时间进行测量。延迟时间计算部126基于网络延迟时间，对通过由信号处理程序141进行信号处理而针对输入信号在输出信号产生的延迟时间中的可容许的上限值进行计算。另外，延迟时间计算部126选择在上限值以下具有最长的延迟时间的信号处理。
[0027]图3是表示信号处理程序141的动作的流程图。测量部125对网络延迟时间进行测量(S11)。图4是表示网络延迟时间的测量的详细动作的流程图。测量部125首先经由发送部123向连接目标的装置发送第一DTMF(Dual
‑
Tone Multi
‑
Frequency)信号作为测试用的信号，并且对发送时刻进行记录(S101)。第一DTMF信号例如嵌入于VoIP(Voice over Internet Protocol)的有效载荷内。
[0028]连接目标的装置接收第一DTMF信号(S201)。连接目标的装置返送出第二DTMF信号，作为针对第一DTMF信号的响应(S202)。第二DTMF信号例如也嵌入于VoIP的有效载荷内。
测量部125经由接收部124而接收第二DTMF信号，对接收时刻进行记录(S102)。测量部125根据所记录的发送时刻及接收时刻之差，测量出网络延迟时间(S103)。
[0029]网络延迟时间对应于从发送某个数据起至该数据被连接目标的装置接收为止的时间差。测量部125记录的发送时刻及接收时刻之差是从发送某个数据起至接收到响应为止的时间差。因此，测量部125将记录的发送时刻及接收时刻之差的一半的时间设为网络延迟时间。
[0030]此外，网络延迟时间的测量可以在对话中进行，但优选在建立了装置间的连接之后马上进行。由此，测量部125不会由于DTMF信号产生的声音而妨碍对话。
[0031]在对话中进行网络延迟时间的测量的情况下，测量部125例如优选通过在高频段(例如20kHz左右的频段)嵌入测试用的信号，由此不会给利用者的对话带来影响。
[0032]另外，测量部125也可以通过向对话音的声音信号附加特定的本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种信号处理方法，其对与经由网络连接的其他装置的网络延迟时间进行测量，取得输入信号，基于测量出的所述网络延迟时间和可容许的总延迟时间，对由于进行信号处理而相对于所述输入信号在输出信号产生的延迟时间中的可容许的上限值进行计算，选择在所述上限值以下具有最长的延迟时间的信号处理，通过所选择的所述信号处理对所述输入信号进行处理，将进行了信号处理后的所述输入信号作为所述输出信号而发送至所述其他装置。2.根据权利要求1所述的信号处理方法，其中，所述信号处理包含将所述输入信号临时储存的处理，所述选择包含有在所述上限值以下以最长的时间将所述输入信号临时储存的处理。3.根据权利要求1或2所述的信号处理方法，其中，所述信号处理包含基于所述输入信号进行是否是目标信号的判定、使所述目标信号通过的处理。4.根据权利要求3所述的信号处理方法，其中，所述判定是由机器训练好的神经网络进行的。5.根据权利要求3或4所述的信号处理方法，其中，所述判定包含是语音还是杂音的判定。6.根据权利要求5所述的信号处理方法，其中，所述信号处理包含将所述杂音去除的处理。7.根据权利要求3至6中任一项所述的信号处理方法，其中，所述判定包含脸部识别，所述输入信号包含影像信号，进行自动取帧处理，该自动取帧处理在所述影像信号中对通过所述脸部识别而识别出的脸部图像进行剪切。8.根据权利要求1至7中任一项所述的信号处理方法，其中，所述网络延迟时间是基于在与所述其他装置的通信中使用的协议所包含的信息进行测量的。9.根据权利要求1至8中任一项所述的信号处理方法，其中，所述测量在与所述其他装置的连接开始时进行。10.一种信号处理装置，其具有：测量部，其对与经由网络连接的其他装置的网络延迟时间进行测量；输入信号取得部，其取得输入信号；时间计算部，其基于由所述测量部测量出的所述网络延迟时间和可容许的总延迟时间，对由于进行信号处理而相对于所述输入信号在输出信号产生的延迟时间中的可容许的上限值进行计算；信号处理部，其选择在由所述时间...

【专利技术属性】
技术研发人员：鹈饲训史，
申请(专利权)人：雅马哈株式会社，
类型：发明
国别省市：