生成转场视频的方法、装置、电子设备、存储介质制造方法及图纸

本发明专利技术提供一种生成转场视频的方法、装置、电子设备、存储介质，方法包括：接收图像对，图像对包括第一图像和第二图像；分别自第一图像和第二图像中提取n个关键特征点，以形成第一点集和第二点集；根据第一点集形成第一图像的第一三角剖分区域集合；根据第二点集形成第二图像的第二三角剖分区域集合；确定第一三角剖分区域集合和第二三角剖分区域集合中的匹配关系；分别计算第一仿射矩阵和第二仿射矩阵；基于第一仿射矩阵和第二仿射矩阵，根据第一三角剖分区域集合和第二三角剖分区域集合生成中间三角剖分区域集合；生成中间帧；基于第一图像、中间帧以及第二图像生成转场视频。本发明专利技术实现转场视频的生成。本发明专利技术实现转场视频的生成。本发明专利技术实现转场视频的生成。

【技术实现步骤摘要】
生成转场视频的方法、装置、电子设备、存储介质


[0001]本专利技术涉及计算机应用
，尤其涉及一种生成转场视频的方法、装置、电子设备、存储介质。

技术介绍

[0002]随着互联网信息的发展和网络技术的不断升级，传统的图片和文字已经不能满足用户快速获取信息的需求，移动视频技术飞速发展。对于OTA(在线旅游公司)来说，基于视频来准确美观地展示待售产品的信息，能够有效地提升用户体验。因此，视频作为重要的信息媒介，制作高质量的视频尤为重要，视频的形式分为多种，可主要分为通过图片生成视频和、实际拍摄的视频两大类。由于实拍视频需要专业的设备和镜头处理技巧，导致实拍视频的成本高昂，历史积累量远远不如优质图片数量。因此，基于现有的图片通过机器来自动生成视频，挖掘图像合成视频的转场模式，能够极大的节省视频生成的成本，提高图片合成视频的丰富度，具有较高的应用价值。
[0003]由此，如何基于图像生成转场视频，是本领域亟待解决的技术问题。

技术实现思路

[0004]本专利技术为了克服上述现有技术存在的缺陷，提供一种生成转场视频的方法、装置、电子设备、存储介质，从而能够基于图像生成转场视频。
[0005]根据本专利技术的一个方面，提供一种生成转场视频的方法，包括：
[0006]接收图像对，所述图像对包括第一图像和第二图像；
[0007]分别自所述第一图像和第二图像中提取n个关键特征点，以形成第一点集和第二点集，n为大于0的整数；
[0008]根据所述第一点集形成所述第一图像的第一三角剖分区域集合；
[0009]根据所述第二点集形成所述第二图像的第二三角剖分区域集合；
[0010]根据所述第一点集和所述第二点集确定所述第一三角剖分区域集合和所述第二三角剖分区域集合中的三角剖分区域的匹配关系；
[0011]分别计算匹配的第一三角剖分区域和所述第二三角剖分区域转换至所述中间三角剖分区域的第一仿射矩阵和第二仿射矩阵；
[0012]基于第一仿射矩阵和第二仿射矩阵，根据第一三角剖分区域集合和第二三角剖分区域集合生成中间三角剖分区域集合；
[0013]根据所生成的中间三角剖分区域集合，生成一中间帧；
[0014]基于所述第一图像、中间帧以及第二图像生成转场视频。
[0015]在本申请的一些实施例中，所述分别自所述第一图像和第二图像中提取n个关键特征点之前，包括：
[0016]获取所述图像对的相似度评分；
[0017]根据所述图像对的相似度评分计算关键特征点的数量n。
[0018]在本申请的一些实施例中，所述根据所述图像对的相似度评分计算关键特征点的数量n包括：
[0019]当所述图像对的相似度评分s小于0.5时，使n为9；
[0020]当所述图像对的相似度评分s大于等于0.5时，使n为10*s+4。
[0021]在本申请的一些实施例中，所述第一点集和第二点集分别包括图像的四个角点、四个边的中心点以及图像重心点，所述图像重心点根据图像零阶矩阵和一阶矩阵计算获得。
[0022]在本申请的一些实施例中，当所述图像对的相似度评分s大于等于0.5时，所述分别自所述第一图像和第二图像中提取n个关键特征点包括：
[0023]提取图像的四个角点、四个边的中心点以及图像重心点；
[0024]基于特征点匹配算法提取n
‑
9个特征点。
[0025]在本申请的一些实施例中，所述分别计算匹配的第一三角剖分区域和所述第二三角剖分区域转换至所述中间三角剖分区域的第一仿射矩阵和第二仿射矩阵包括：
[0026]选取一对匹配的第一三角剖分区域和所述第二三角剖分区域；
[0027]根据所选取的第一三角剖分区域的顶点坐标和所述第二三角剖分区域的顶点坐标计算中间三角剖分区域的顶点坐标；
[0028]根据所述所选取的第一三角剖分区域的顶点坐标、所述第二三角剖分区域的顶点坐标以及中间三角剖分区域的顶点坐标，分别计算所述第一仿射矩阵和第二仿射矩阵。
[0029]在本申请的一些实施例中，所述中间三角剖分区域的顶点坐标、第一仿射矩阵、第二仿射矩阵基于融合系数计算，所述方法还包括：
[0030]基于不同的融合系数，生成多个中间帧，以形成中间帧序列；
[0031]基于所述第一图像、中间帧序列以及第二图像生成转场视频。
[0032]根据本申请的又一方面，还提供一种生成转场视频的装置，包括：
[0033]接收模块，用于接收图像对，所述图像对包括第一图像和第二图像；
[0034]提取模块，用于分别自所述第一图像和第二图像中提取n个关键特征点，以形成第一点集和第二点集，n为大于0的整数；
[0035]第一剖分模块，用于根据所述第一点集形成所述第一图像的第一三角剖分区域集合；
[0036]第二剖分模块，用于根据所述第二点集形成所述第二图像的第二三角剖分区域集合；
[0037]匹配模块，用于根据所述第一点集和所述第二点集确定所述第一三角剖分区域集合和所述第二三角剖分区域集合中的三角剖分区域的匹配关系；
[0038]仿射矩阵计算模块，用于分别计算匹配的第一三角剖分区域和所述第二三角剖分区域转换至所述中间三角剖分区域的第一仿射矩阵和第二仿射矩阵；
[0039]中间剖分生成模块，用于基于第一仿射矩阵和第二仿射矩阵，根据第一三角剖分区域集合和第二三角剖分区域集合生成中间三角剖分区域集合；
[0040]中间帧生成模块，用于根据所生成的中间三角剖分区域集合，生成一中间帧；
[0041]转场模块，用于基于所述第一图像、中间帧以及第二图像生成转场视频。
[0042]根据本专利技术的又一方面，还提供一种电子设备，所述电子设备包括：处理器；存储
介质，其上存储有计算机程序，所述计算机程序被所述处理器运行时执行如上所述生成转场视频的方法的步骤。
[0043]根据本专利技术的又一方面，还提供一种存储介质，所述存储介质上存储有计算机程序，所述计算机程序被处理器运行时执行如上所述生成转场视频的方法的步骤。
[0044]相比现有技术，本专利技术的优势在于：
[0045]通过提取图像关键可匹配的特征点，将特征点和图轮廓点组成点集，获取图像的三角剖分区域。再基于对应匹配点得到对应，两张图的三角剖分区域，通过仿射变化构建中间过渡图像并进行组合，从而生成转场视频。由此，本申请基于现有的图像数据构建模型，能够高效提取图片关键点，得到匹配区域，通过形状渐变生成转场视频，可大幅度节省视频制作和拍摄的人力成本，保证图像生成视频的丰富性，提升用户体验。
附图说明
[0046]通过参照附图详细描述其示例实施方式，本专利技术的上述和其它特征及优点将变得更加明显。
[0047]图1示出了根据本专利技术实施例的生成转场视频的方法的流程图。
[0048]图2示出了根据本专利技术一实施例的图像的关键特征点的示意图。
[0049]图本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种生成转场视频的方法，其特征在于，包括：接收图像对，所述图像对包括第一图像和第二图像；分别自所述第一图像和第二图像中提取n个关键特征点，以形成第一点集和第二点集，n为大于0的整数；根据所述第一点集形成所述第一图像的第一三角剖分区域集合；根据所述第二点集形成所述第二图像的第二三角剖分区域集合；根据所述第一点集和所述第二点集确定所述第一三角剖分区域集合和所述第二三角剖分区域集合中的三角剖分区域的匹配关系；分别计算匹配的第一三角剖分区域和所述第二三角剖分区域转换至所述中间三角剖分区域的第一仿射矩阵和第二仿射矩阵；基于第一仿射矩阵和第二仿射矩阵，根据第一三角剖分区域集合和第二三角剖分区域集合生成中间三角剖分区域集合；根据所生成的中间三角剖分区域集合，生成中间帧；基于所述第一图像、中间帧以及第二图像生成转场视频。2.如权利要求1所述的生成转场视频的方法，其特征在于，所述分别自所述第一图像和第二图像中提取n个关键特征点之前，包括：获取所述图像对的相似度评分；根据所述图像对的相似度评分计算关键特征点的数量n。3.如权利要求2所述的生成转场视频的方法，其特征在于，所述根据所述图像对的相似度评分计算关键特征点的数量n包括：当所述图像对的相似度评分s小于0.5时，使n为9；当所述图像对的相似度评分s大于等于0.5时，使n为10*s+4。4.如权利要求3所述的生成转场视频的方法，其特征在于，所述第一点集和第二点集分别包括图像的四个角点、四个边的中心点以及图像重心点，所述图像重心点根据图像零阶矩阵和一阶矩阵计算获得。5.如权利要求4所述的生成转场视频的方法，其特征在于，当所述图像对的相似度评分s大于等于0.5时，所述分别自所述第一图像和第二图像中提取n个关键特征点包括：提取图像的四个角点、四个边的中心点以及图像重心点；基于特征点匹配算法提取n
‑
9个特征点。6.如权利要求1所述的生成转场视频的方法，其特征在于，所述分别计算匹配的第一三角剖分区域和所述第二三角剖分区域转换至所述中间三角剖分区域的第一仿射矩阵和第二仿射矩阵包括：选取一...

【专利技术属性】
技术研发人员：成丹妮，罗超，邹宇，李巍，
申请(专利权)人：携程旅游信息技术上海有限公司，
类型：发明
国别省市：