对乐音演奏进行实时跟随的方法及相关产品技术

本申请实施例公开了一种对乐音演奏进行实时跟随的方法及相关产品，通过在演奏者演奏目标曲目的过程中，获取演奏者的乐音数据，得到当前已演奏的第一乐音数据，对目标曲目对应的预设乐谱进行分析，得到参考乐音特征轨迹，对第一乐音数据进行分析，得到第一乐音特征轨迹，对参考乐音特征轨迹与第一乐音特征轨迹进行匹配，得到匹配结果；根据匹配结果确定演奏者实时演奏的第一演奏位置，在预设乐谱中标记第一演奏位置，如此，在演奏者演奏的过程中不需看电子设备的屏幕上的乐谱，电子设备可跟主动随着演奏者的演奏，实时确定当前演奏到的第一演奏位置。

Method of Real-time Following up Music Performance and Related Products

【技术实现步骤摘要】
对乐音演奏进行实时跟随的方法及相关产品
本申请涉及乐音处理
，具体涉及一种对乐音演奏进行实时跟随的方法及相关产品。
技术介绍
音乐学习领域中，用户学习乐器，通常是通过专业的音乐老师进行面对面教学，而用户在课后练习，一般是独立练习，或者，由家长陪同练习乐器，但是，家长通常不属于音乐专业人员，家长陪同练习，难以给用户进行指导，而聘请专业陪练人员进行陪练，费用较高，因此，如何帮助用户更加智能、高效地进行乐器学习成为需要解决的问题。
技术实现思路
本申请实施例提供了一种对乐音演奏进行实时跟随的方法及相关产品，能够主动跟随用户的演奏，更加智能地指导用户演奏。第一方面，本申请实施例提供一种对乐音演奏进行实时跟随的方法，应用于电子设备，所述方法包括：在演奏者演奏目标曲目的过程中，获取所述演奏者的第一乐音数据，得到当前已演奏的第一乐音数据；对所述目标曲目对应的预设乐谱进行分析，得到参考乐音特征轨迹，所述参考乐音特征轨迹为按照时间顺序进行排列的乐音特征轨迹；对所述第一乐音数据进行分析，得到第一乐音特征轨迹，所述第一乐音特征轨迹为按照时间顺序进行排列的乐音特征轨迹；对所述参考乐音特征轨迹与所述第一乐音特征轨迹进行匹配，得到匹配结果；根据所述匹配结果确定演奏者实时演奏的第一演奏位置；在所述预设乐谱中标记所述第一演奏位置。第二方面，本申请实施例提供了一种对乐音演奏进行实时跟随的装置，应用于电子设备，所述对乐音演奏进行实时跟随的装置包括：获取单元，用于在演奏者演奏目标曲目的过程中，获取所述演奏者的第一乐音数据，得到当前已演奏的第一乐音数据；分析单元，用于对所述目标曲目对应的预设乐谱进行分析，得到参考乐音特征轨迹，所述参考乐音特征轨迹为按照时间顺序进行排列的乐音特征轨迹；以及，对所述第一乐音数据进行分析，得到第一乐音特征轨迹，所述第一乐音特征轨迹为按照时间顺序进行排列的乐音特征轨迹；匹配单元，用于对所述参考乐音特征轨迹与所述第一乐音特征轨迹进行匹配，得到匹配结果；确定单元，用于根据所述匹配结果确定演奏者实时演奏的第一演奏位置；标记单元，用于在所述预设乐谱中标记所述第一演奏位置。第三方面，本申请实施例提供一种电子设备，包括处理器、存储器、通信接口，以及一个或多个程序，其中，上述一个或多个程序被存储在上述存储器中，并且被配置由上述处理器执行，上述程序包括用于执行本申请实施例第一方面中的步骤的指令。第四方面，本申请实施例提供了一种计算机可读存储介质，其中，上述计算机可读存储介质存储用于电子数据交换的计算机程序，其中，上述计算机程序使得计算机执行如本申请实施例第一方面中所描述的部分或全部步骤。第五方面，本申请实施例提供了一种计算机程序产品，其中，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如本申请实施例第一方面中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。可以看出，本申请实施例中所描述的对乐音演奏进行实时跟随的方法及相关产品，通过在演奏者演奏目标曲目的过程中，获取演奏者的乐音数据，得到当前已演奏的第一乐音数据，对目标曲目对应的预设乐谱进行分析，得到参考乐音特征轨迹，对第一乐音数据进行分析，得到第一乐音特征轨迹，对参考乐音特征轨迹与第一乐音特征轨迹进行匹配，得到匹配结果；根据匹配结果确定演奏者实时演奏的第一演奏位置，在预设乐谱中标记第一演奏位置，如此，在演奏者演奏的过程中不需看电子设备的屏幕上的乐谱，电子设备可跟主动随着演奏者的演奏，实时确定当前演奏到的第一演奏位置。附图说明为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1A是本申请实施例提供的一种对乐音演奏进行实时跟随的方法的流程示意图；图1B是本申请实施例公开的一种乐音测评应用的应用界面的演示示意图；图2是本申请实施例公开的另一种对乐音演奏进行实时跟随的方法的流程示意图；图3是本申请实施例公开的另一种对乐音演奏进行实时跟随的方法的流程示意图；图4是本申请实施例公开的一种电子设备的结构示意图；图5A是本申请实施例公开的一种对乐音演奏进行实时跟随的装置的结构示意图；图5B是本申请实施例公开的图5A所示的对乐音演奏进行实时跟随的装置的变型结构。具体实施方式为了使本
的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。本申请实施例所涉及到的电子设备可以包括各种具有无线通信功能的手持设备、车载设备、无线耳机、计算设备或连接到无线调制解调器的其他处理设备，以及各种形式的用户设备(userequipment，UE)，移动台(mobilestation，MS)，终端设备(terminaldevice)等等，电子设备例如可以为智能手机、平板电脑、笔记本电脑、掌上电脑、耳机盒等等。为方便描述，上面提到的设备统称为电子设备。下面对本申请实施例进行详细介绍。请参阅图1A，图1A是本申请实施例公开的一种对乐音演奏进行实时跟随的方法的流程示意图，应用于电子设备，该对乐音演奏进行实时跟随的方法包括如下步骤：101、在演奏者演奏目标曲目的过程中，获取所述演奏者的第一乐音数据，得到当前已演奏的第一乐音数据。其中，上述目标曲目为用户通过乐器进行演奏的曲目，乐器可以包括以下任意一种：小提琴、钢琴、大提琴、吉他、手风琴、古筝等等，本申请不做限制。其中，上述第一乐音数据可以是麦克风获取的音频信号、在乐器上设置的振动传感器获取的振动乐音信号，通过乐器数字接口(musicalinstrumentdigitalinterface，MIDI)获取的数字乐音信号等等，本申请不做限制。本申请实施例中，获取所述演奏者的第一乐音数据，可通过电子设备上的麦克风获取演奏者演奏的音频信号；还可通过将电子设备与乐器上的振动传感器进行连接，通过乐器上的振动传感器获取乐器振动的信号，例如，用户拨动琴弦，可检测琴弦的振动信号；或者，可通过将电子设备与乐器上的MIDI进行连接，当本文档来自技高网...

【技术保护点】
1.一种对乐音演奏进行实时跟随的方法，其特征在于，应用于电子设备，所述方法包括：在演奏者演奏目标曲目的过程中，获取所述演奏者的第一乐音数据，得到当前已演奏的第一乐音数据；对所述目标曲目对应的预设乐谱进行分析，得到参考乐音特征轨迹，所述参考乐音特征轨迹为按照时间顺序进行排列的乐音特征轨迹；对所述第一乐音数据进行分析，得到第一乐音特征轨迹，所述第一乐音特征轨迹为按照时间顺序进行排列的乐音特征轨迹；对所述参考乐音特征轨迹与所述第一乐音特征轨迹进行匹配，得到匹配结果；根据所述匹配结果确定演奏者实时演奏的第一演奏位置；在所述预设乐谱中标记所述第一演奏位置。

【技术特征摘要】
1.一种对乐音演奏进行实时跟随的方法，其特征在于，应用于电子设备，所述方法包括：在演奏者演奏目标曲目的过程中，获取所述演奏者的第一乐音数据，得到当前已演奏的第一乐音数据；对所述目标曲目对应的预设乐谱进行分析，得到参考乐音特征轨迹，所述参考乐音特征轨迹为按照时间顺序进行排列的乐音特征轨迹；对所述第一乐音数据进行分析，得到第一乐音特征轨迹，所述第一乐音特征轨迹为按照时间顺序进行排列的乐音特征轨迹；对所述参考乐音特征轨迹与所述第一乐音特征轨迹进行匹配，得到匹配结果；根据所述匹配结果确定演奏者实时演奏的第一演奏位置；在所述预设乐谱中标记所述第一演奏位置。2.根据权利要求1所述的方法，其特征在于，所述对所述参考乐音特征轨迹与所述第一乐音特征轨迹进行匹配之前，所述方法还包括：在所述电子设备上展示所述预设乐谱；获取所述演奏者在所述预设乐谱上标记的起始演奏位置；从所述起始演奏位置开始，对所述参考乐音特征轨迹与所述第一乐音特征轨迹进行匹配，得到所述第一乐音特征轨迹中的起始乐音特征位置；根据所述起始乐音特征位置与所述起始演奏位置的对应关系，继续执行所述对所述参考乐音特征轨迹与所述第一乐音特征轨迹进行匹配的操作，得到匹配结果。3.根据权利要求2所述的方法，其特征在于，所述对所述参考乐音特征轨迹与所述第一乐音特征轨迹进行匹配，包括：在所述参考乐音特征轨迹中选取与最近匹配的参考乐音特征邻近的部分参考特征轨迹；在所述第一乐音特征轨迹中选取最新演奏的目标乐音特征位置；将所述目标乐音特征位置，与所述部分参考特征轨迹中的各个参考乐音特征位置逐个匹配，得到匹配度曲线；所述根据所述匹配结果确定演奏者实时演奏的第一演奏位置，包括：对所述匹配度曲线进行分析，得到所述部分参考特征轨迹中匹配度最大的位置；根据所述参考乐音特征轨迹，将所述匹配度最大的位置进行转换，得到所述第一演奏位置。4.根据权利要求2或3任一项所述的方法，其特征在于，所述方法还包括：从所述第一乐音特征轨迹与所述参考乐音特征轨迹进行匹配的匹配结果中选取邻近所述第一演奏位置的预设时间长度的第二乐音数据对应的部分匹配结果；根据所述部分匹配结果中包含的所述第二乐音数据中存在的乐音特征错误率，若所述乐音特征错误率高于预设阈值，停止执行获取所述乐音数据的操作。5.根据权利要求4所述的方法，其特征在于，在停止执行所述获取所述乐音数据的操作后，所述方法还包括：得到第三乐音数据；对所述第三乐音数据进行分析，得到第二乐音特征轨迹；根据所述第二乐音特征轨迹确定所述第三乐音数据中的最后一个乐音特征；确定所述乐谱中与所述最后一个乐音特征对应的结束演奏位置；从所述参考乐音特征轨迹中选取从所述起始音符位置到所...

【专利技术属性】
技术研发人员：段志尧，刘纯阳，李博琛，
申请(专利权)人：深圳芒果未来教育科技有限公司，
类型：发明
国别省市：广东,44