一种视频配乐的方法和系统技术方案

本说明书实施例提供一种视频配乐的方法和系统，该方法包括确定待处理视频的至少一个待匹配关键点；基于至少一个待匹配关键点从关系图谱中确定多个候选关键点，其中，关系图谱中包含多个节点和连接多个节点的至少一个边，该多个节点代表参考视频的视频关键点，对于该至少一个边中的一个，边代表连接的两个节点对应的视频关键点同时与至少一个参考视频相关，边的值由相关的参考视频的数量确定；基于多个候选关键点和待处理视频的相关特征，从音乐库中确定与待处理视频匹配的至少一个目标音乐，并将该至少一个目标音乐作为待处理视频的配乐音乐，其中，音乐库中包括多个参考音乐及与该多个参考音乐对应的音乐关键点。该多个参考音乐对应的音乐关键点。该多个参考音乐对应的音乐关键点。

【技术实现步骤摘要】
一种视频配乐的方法和系统


[0001]本说明书涉及计算机领域，特别涉及一种视频配乐方法和系统。

技术介绍

[0002]随着互联网及移动网络的发展，短视频越来越成为热点。人们希望使用短视频来分享自己的人生，经历等；许多公司也希望使用短视频来达到提升公司知名度、推广公司产品等目的。想要高质量地完成一个的短视频制作，从选材，剪辑，配乐多个方面都需要比较专业的人士进行制作。对于许多非专业人士而言，一般直接采用软件模板进行制作，整个制作过程不可见，不可控，重复性高，尤其是在短视频配乐方面。对于一个高质量的短视频来说，配乐是十分重要的，现有的短视频配乐依赖于制作者本身的音乐素养和视频制作经验来挑选配合，或者是自动生成。但是，依赖于制作者本身进行配乐，对于非专业人士来说繁琐、困难；而自动生成的配乐匹配度低，重复性高。
[0003]因此，希望提供一种视频配乐方法和系统。

技术实现思路

[0004]本说明书实施例之一提供一种视频配乐的方法。所述方法包括：确定待处理视频的至少一个待匹配关键点；基于所述至少一个待匹配关键点从关系图谱中确定多个候选关键点，其中，所述关系图谱中包含多个节点和连接所述多个节点的至少一个边，所述多个节点代表参考视频的视频关键点，对于所述至少一个边中的一个，所述边代表连接的两个节点对应的视频关键点同时与至少一个所述参考视频相关，所述边的值由相关的所述参考视频的数量确定；基于所述多个候选关键点和所述待处理视频的相关特征，从音乐库中确定与所述待处理视频匹配的至少一个目标音乐，并将所述至少一个目标音乐作为所述待处理视频的配乐音乐，其中，所述音乐库中包括多个参考音乐及与所述多个参考音乐对应的音乐关键点。
[0005]本说明书实施例之一提供一种视频配乐的系统，包括待匹配关键点确定模块、候选关键点确定模块和配乐音乐确定模块；所述待匹配关键点确定模块用于确定待处理视频的至少一个待匹配关键点；所述候选关键点确定模块基于所述至少一个待匹配关键点从关系图谱中确定多个候选关键点，其中，所述关系图谱中包含多个节点和连接所述多个节点的至少一个边，所述多个节点代表参考视频的视频关键点，对于所述至少一个边中的一个，所述边代表连接的两个节点对应的视频关键点同时与至少一个所述参考视频相关，所述边的值由相关的所述参考视频的数量确定；所述配乐音乐确定模块用于基于所述多个候选关键点和所述待处理视频的相关特征，从音乐库中确定与所述待处理视频匹配的至少一个目标音乐，并将所述至少一个目标音乐作为所述待处理视频的配乐音乐，其中，所述音乐库中包括多个参考音乐及与所述多个参考音乐对应的音乐关键点。
[0006]本说明书实施例之一提供一种计算机可读存储介质，所述存储介质存储计算机指令，当计算机读取存储介质中的计算机指令后，计算机执行所述视频配乐的方法。
附图说明
[0007]本说明书将以示例性实施例的方式进一步说明，这些示例性实施例将通过附图进行详细描述。这些实施例并非限制性的，在这些实施例中，相同的编号表示相同的结构，其中：
[0008]图1是根据本说明书一些实施例所示的视频配乐的系统的应用场景示意图；
[0009]图2是根据本说明书一些实施例所示的视频配乐的系统的示意图；
[0010]图3是根据本说明书一些实施例所示的视频配乐的方法的示例性流程图；
[0011]图4是根据本说明书一些实施例所示的更新关系图谱的方法的示例性流程图；
[0012]图5是根据本说明书一些实施例所示的确定节点关联度的方法的示例性流程图；
[0013]图6是根据本说明书一些实施例所示的视频配乐的方法的示意图。
具体实施方式
[0014]为了更清楚地说明本说明书实施例的技术方案，下面将对实施例描述中所需要使用的附图作简单的介绍。显而易见地，下面描述中的附图仅仅是本说明书的一些示例或实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图将本说明书应用于其它类似情景。除非从语言环境中显而易见或另做说明，图中相同标号代表相同结构或操作。
[0015]应当理解，本文使用的“系统”、“装置”、“单元”和/或“模块”是用于区分不同级别的不同组件、元件、部件、部分或装配的一种方法。然而，如果其他词语可实现相同的目的，则可通过其他表达来替换所述词语。
[0016]如本说明书和权利要求书中所示，除非上下文明确提示例外情形，“一”、“一个”、“一种”和/或“该”等词并非特指单数，也可包括复数。一般说来，术语“包括”与“包含”仅提示包括已明确标识的步骤和元素，而这些步骤和元素不构成一个排它性的罗列，方法或者设备也可能包含其它的步骤或元素。
[0017]本说明书中使用了流程图用来说明根据本说明书的实施例的系统所执行的操作。应当理解的是，前面或后面操作不一定按照顺序来精确地执行。相反，可以按照倒序或同时处理各个步骤。同时，也可以将其他操作添加到这些过程中，或从这些过程移除某一步或数步操作。
[0018]在一些应用场景中，视频配乐的系统可以包括服务器和用户终端，视频配乐的系统可以通过处理设备等实施本说明书中披露的方法和/或过程，实现对来自用户终端的视频自动生成配乐方案，用户可以基于该配乐方案为视频生成配乐，从而实现对视频和配乐的匹配，减轻视频制作者的工作负担，提高视频配乐的匹配准确性，从而获得配乐与视频特征高度匹配的短视频的制作，并满足视频制作者的需求。
[0019]图1是根据本说明书一些实施例所示的视频配乐的系统的应用场景示意图。
[0020]如图1所示，在一些实施例中，系统100可以包括服务器110、网络120、终端130、用户终端140和存储设备150。
[0021]服务器110可以处理数据和/或信息。服务器110可以处理从系统100中至少一个组件(例如，终端130、用户终端140和存储设备150)或外部设备中获得的数据和/或信息，基于这些数据、信息和/或处理结果执行本说明书一些实施例中所示的视频配乐的方法，以完成
一个或多个本说明书一些实施例中描述的功能。在一些实施例中，服务器110可以是单个服务器或服务器组。服务器群可以是集中式的或分布式的(例如，服务器110可以是分布式的系统)。在一些实施例中，服务器110可以是本地的或远程的。例如，服务器110可以通过网络120存取储存于终端130、用户终端140和/或存储设备150中的信息和/或数据。又例如，服务器110可以直接连接到终端130、用户终端140和/或存储设备150，以存取储存的信息和/或数据。在一些实施例中，服务器110可以在云端平台上实现。仅作为示例，所述云平台可以包括私有云、公共云、混合云、小区云、分布云、跨云、多云等或上述举例的任意组合。
[0022]网络120可以促进信息及/或数据的交换。在一些实施例中，系统100中的至少一个组件(例如，服务器110、终端130、用户终端140和存储设备150)可以通过网络120向系统100中的其他组件发送信息和/或数据。例如，本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频配乐的方法，包括：确定待处理视频的至少一个待匹配关键点；基于所述至少一个待匹配关键点从关系图谱中确定多个候选关键点，所述关系图谱中包含多个节点和连接所述多个节点的至少一个边，所述多个节点代表参考视频的视频关键点，对于所述至少一个边中的一个，所述边代表连接的两个节点对应的视频关键点同时与至少一个所述参考视频相关，所述边的值由相关的所述参考视频的数量确定；基于所述多个候选关键点和所述待处理视频的相关特征，从音乐库中确定与所述待处理视频匹配的至少一个目标音乐，并将所述至少一个目标音乐作为所述待处理视频的配乐音乐，所述音乐库中包括多个参考音乐及与所述多个参考音乐对应的音乐关键点。2.如权利要求1所述的方法，所述视频关键点和/或所述音乐关键点包括：内容分类和情绪分类中的至少一种。3.如权利要求1所述的方法，所述待处理视频的相关特征包括视频的长度、场景变换节点和场景特征。4.如权利要求1所述的方法，还包括：对所述关系图谱进行多轮更新，所述多轮更新中的每一轮更新包括：基于预设规则处理所述关系图谱中所述至少一个边的值，使得所述至少一个边的值增大；获取新的参考视频，基于所述新的参考视频的视频关键点，对所述关系图谱中所述多个节点和所述至少一个边进行更新；和/或对于所述关系图谱中所述至少一个边中的一个，基于所述边连接的两个节点之间的第一关联度，对所述边的值进行更新。5.如权利要求4所述的方法，确定所述边连接的两个节点之间的第一关联度，包括：对于所述两个节点中的一个节点，确定所述节点的关联概率分布，所述关联概率分布代表所述节点与所述关系图谱中任意一个节点之间的第二关联度的概率分布；基于所述两个节点的所述关联概率分布之间的差异和所述两个节点之间的最短距离，确定所述两个节点之间的第一关联度。6.如权利要求5所述的方法，所述确定所述节点的关联概率分布，包括：若所述任意一个节...

【专利技术属性】
技术研发人员：毛冰城，马天翼，谌明，
申请(专利权)人：浙江核新同花顺网络信息股份有限公司，
类型：发明
国别省市：