影像控制系统及影像控制方法技术方案

影像控制系统具有：推定部，其基于针对表示乐曲的演奏的音响信号的输入的来自训练好的模型的输出，推定所述音响信号的与所述乐曲中的演奏相关的演奏信息；取得部，其取得表示由用户输入的操作且与影像的播放相关的操作的操作信息；以及影像控制部，其基于推定出的所述演奏信息而控制所述影像的播放。所述影像控制部在由所述取得部取得了所述操作信息的情况下，基于所述操作信息而控制所述影像的播放。

【技术实现步骤摘要】
【国外来华专利技术】影像控制系统及影像控制方法
本专利技术涉及影像控制系统及影像控制方法。本申请要求以2019年1月7日申请的日本特愿2019－000686为基础的优先权，在这里引入其公开的全部内容。
技术介绍
以往，在活动会场等中通过与乐曲相匹配地播放影像而实现了效果性的影像演出。例如，在专利文献1中公开了能够由用户直观地进行影像的播放顺序等的编辑的技术。专利文献1：日本特开2010－141461号公报
技术实现思路
但是，在音乐会等活动的情况下，必须与现场演奏相匹配地控制影像。在现场演奏中演奏者很少按照乐谱那样进行演奏，有时节奏会变慢或变快。为了与如上所述的现场演奏相匹配地控制影像而需要特别的训练、技术。即，难以由不具有技术的用户与现场演奏相匹配地控制影像。本专利技术就是鉴于如上所述的状况而提出的。本专利技术的目的的一个例子提供即使是不具有特别的技术的用户，也能够与乐曲相匹配地控制影像的影像控制系统。本专利技术的一个方式是一种影像控制系统，其具有：推定部，其基于针对表示乐曲的演奏的音响信号的输入的来自训练好的本文档来自技高网...

【技术保护点】
1.一种影像控制系统，其具有：/n推定部，其基于针对表示乐曲的演奏的音响信号的输入的来自训练好的模型的输出，推定所述音响信号的与所述乐曲中的演奏相关的演奏信息；/n取得部，其取得表示由用户输入的操作且与影像的播放相关的操作的操作信息；以及/n影像控制部，其基于推定出的所述演奏信息而控制所述影像的播放，/n所述影像控制部在由所述取得部取得了所述操作信息的情况下，基于所述操作信息而控制所述影像的播放。/n

【技术特征摘要】
【国外来华专利技术】20190107 JP 2019-0006861.一种影像控制系统，其具有：
推定部，其基于针对表示乐曲的演奏的音响信号的输入的来自训练好的模型的输出，推定所述音响信号的与所述乐曲中的演奏相关的演奏信息；
取得部，其取得表示由用户输入的操作且与影像的播放相关的操作的操作信息；以及
影像控制部，其基于推定出的所述演奏信息而控制所述影像的播放，
所述影像控制部在由所述取得部取得了所述操作信息的情况下，基于所述操作信息而控制所述影像的播放。


2.根据权利要求1所述的影像控制系统，其中，
所述训练好的模型是通过执行机器学习而对在学习中使用的演奏数据即学习用演奏数据和所述学习用演奏数据所示的乐曲中的演奏的位置或速度的对应关系进行了学习的模型。


3.根据权利要求1或2所述的影像控制系统，其中，
所述推定部推定所述音响信号的与所述乐曲中的演奏的位置或速度相关的信息而作为所述演奏信息。


4.根据权利要求1至3中任一项所述的影像控制系统，其中，
所述取得部取得指示信息，该指示信息指示从基于所述操作信息而进行所述影像的播放的控制向基于所述演奏信息而进行所述影像的播放的控制的切换，
所述影像控制部在由所述取得部取得了所述指示信息的情况下，向所述推定部输出与所述影像的播放的位置相关的播放信息，
所述推定部基于所取得的所述播放信息而设定所述演奏信息。


5.根据权利要求...

【专利技术属性】
技术研发人员：前泽阳，田邑元一，藤岛琢哉，桐山孝司，越田乃梨子，桑原寿行，上平晃代，薄羽凉弥，
申请(专利权)人：雅马哈株式会社，国立大学法人东京艺术大学，
类型：发明
国别省市：日本;JP