基于三维动画的视频对照方法、装置、设备及存储介质制造方法及图纸

本申请公开了一种基于三维动画的视频对照方法、装置、设备及存储介质，该方法包括：读取真人运动的视频，并将视频根据帧率分割成多张图片；在统一引擎中针对模型添加固定的虚拟摄像头，在模型运动的过程中对虚拟摄像头的画面进行实时提取；对分割成的图片进行轮廓提取处理，获得第一轮廓图片，同时对实时提取出的画面进行轮廓提取处理，获得第二轮廓图片；将第一轮廓图片与第二轮廓图片进行匹配，找出匹配度高的两张轮廓图片，并同步显现与匹配度高的两张轮廓图片对应的分割成的图片与实时提取出的画面。这样可以实现模型动画与视频人物动作实时同步，使模型动画可以和真人视频对照查看。

Video comparison method, device, equipment and storage medium based on three-dimensional animation

【技术实现步骤摘要】
基于三维动画的视频对照方法、装置、设备及存储介质
本专利技术涉及视频对照领域，特别是涉及一种基于三维动画的视频对照方法、装置、设备及存储介质。
技术介绍
模型动画是通过改变一个时间段各个模型在空间的位置及其旋转角度产生的。视频里的真人做的动作是在真实的环境里完成的，由于模型动画是虚拟的，和真人动作多少会有差异，为了让人更好的理解，需要真人动作视频作为辅助参考。目前，模型动画的播放通常是通过引擎自带的接口控制模型动画的时间轴进行播放的。但是，由于时间轴为固定的，不能跳跃式地播放模型动画。另外，真人视频完成动作各个部分的时间点和模型完成动作各个部分的时间点不匹配，造成了实时对照的时候出现不同的画面，容易给人造成错误的理解。因此，如何解决模型动画和真人视频不能同步问题，是本领域技术人员亟待解决的技术问题。
技术实现思路
有鉴于此，本专利技术的目的在于提供一种基于三维动画的视频对照方法、装置、设备及存储介质，可以实现模型动画与视频人物动作实时同步。其具体方案如下：一种基于三维动画的视频对照方法，包括：读取真人运动的视频，并将所述视频根据帧率分割成多张图片；在统一引擎中针对模型添加固定的虚拟摄像头，在模型运动的过程中对所述虚拟摄像头的画面进行实时提取；对分割成的图片进行轮廓提取处理，获得第一轮廓图片，同时对实时提取出的画面进行轮廓提取处理，获得第二轮廓图片；将所述第一轮廓图片与所述第二轮廓图片进行匹配，找出匹配度高的两张轮廓图片，并同步显现与匹配度高的两张轮廓图片对应的分割成的图片与实时提取出的画面。优选地，在本专利技术实施例提供的上述基于三维动画的视频对照方法中，对分割成的图片进行轮廓提取处理，获得第一轮廓图片，具体包括：将分割成的图片中的人物提取出来，得到人物图片；对所述人物图片进行灰度处理，得到第一灰度图片；通过所述第一灰度图片边界的围绕关系，确定第一外边界和第一孔边界；根据所述第一外边界、所述第一孔边界，以及所述第一外边界和所述第一孔边界的层次关系，获得第一轮廓图片。优选地，在本专利技术实施例提供的上述基于三维动画的视频对照方法中，对实时提取出的画面进行轮廓提取处理，获得第二轮廓图片，具体包括：对实时提取出的画面进行灰度处理，得到第二灰度图片；通过所述第二灰度图片边界的围绕关系，确定第二外边界和第二孔边界；根据所述第二外边界、所述第二孔边界，以及所述第二外边界和所述第二孔边界的层次关系，获得第二轮廓图片。优选地，在本专利技术实施例提供的上述基于三维动画的视频对照方法中，在将所述第一轮廓图片与所述第二轮廓图片进行匹配之前，还包括：对所述第一轮廓图片与所述第二轮廓图片进行灰度处理。优选地，在本专利技术实施例提供的上述基于三维动画的视频对照方法中，将所述第一轮廓图片与所述第二轮廓图片进行匹配，找出匹配度高的两张轮廓图片，具体包括：将所述第一轮廓图片处理为第一直方图，同时将所述第二轮廓图片处理为第二直方图；对所述第一直方图和所述第二直方图进行归一化处理；将归一化处理后的所述第一直方图和所述第二直方图进行比较，找出匹配度高的两张轮廓图片。优选地，在本专利技术实施例提供的上述基于三维动画的视频对照方法中，将归一化处理后的所述第一直方图和所述第二直方图进行比较，找出匹配度高的两张轮廓图片，具体包括：计算归一化处理后的所述第一直方图和所述第二直方图之间的距离；根据计算出的距离，得到一个比较数值；选取出与所述比较数值最接近0对应的两张直方图，判定这两张直方图对应的两张轮廓图片的匹配度最高。优选地，在本专利技术实施例提供的上述基于三维动画的视频对照方法中，所述虚拟摄像机的角度与拍摄视频人物的角度保持一致。本专利技术实施例还提供了一种基于三维动画的视频对照装置，包括：图片分割模块，用于读取真人运动的视频，并将所述视频根据帧率分割成多张图片；画面提取模块，用于在统一引擎中针对模型添加固定的虚拟摄像头，在模型运动的过程中对所述虚拟摄像头的画面进行实时提取；轮廓提取模块，用于对分割成的图片进行轮廓提取处理，获得第一轮廓图片，同时对实时提取出的画面进行轮廓提取处理，获得第二轮廓图片；图片匹配模块，用于将所述第一轮廓图片与所述第二轮廓图片进行匹配，找出匹配度高的两张轮廓图片，并同步显现与匹配度高的两张轮廓图片对应的分割成的图片与实时提取出的画面。本专利技术实施例还提供了一种基于三维动画的视频对照设备，包括处理器和存储器，其中，所述处理器执行所述存储器中保存的计算机程序时实现如本专利技术实施例提供的上述基于三维动画的视频对照方法。本专利技术实施例还提供了一种计算机可读存储介质，用于存储计算机程序，其中，所述计算机程序被处理器执行时实现如本专利技术实施例提供的上述基于三维动画的视频对照方法。从上述技术方案可以看出，本专利技术所提供的一种基于三维动画的视频对照方法，包括：读取真人运动的视频，并将视频根据帧率分割成多张图片；在统一引擎中针对模型添加固定的虚拟摄像头，在模型运动的过程中对虚拟摄像头的画面进行实时提取；对分割成的图片进行轮廓提取处理，获得第一轮廓图片，同时对实时提取出的画面进行轮廓提取处理，获得第二轮廓图片；将第一轮廓图片与第二轮廓图片进行匹配，找出匹配度高的两张轮廓图片，并同步显现与匹配度高的两张轮廓图片对应的分割成的图片与实时提取出的画面。本专利技术首先通过在模型实时运动过程中对虚拟摄像头的画面提取出的轮廓图片与对视频分割的图片提取出的轮廓图片进行匹配，匹配完之后找出匹配度高的两张轮廓图片，最后同步显现了与匹配度高的两张轮廓图片对应的虚拟摄像头的画面与视频分割的图片，这样可以实现模型动画与视频人物动作实时同步，使模型动画可以和真人视频对照查看。此外，本专利技术还针对基于三维动画的视频对照方法提供了相应的装置、设备及计算机可读存储介质，进一步使得上述方法更具有实用性，该装置、设备及计算机可读存储介质具有相应的优点。附图说明为了更清楚地说明本专利技术实施例或相关技术中的技术方案，下面将对实施例或相关技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。图1为本专利技术实施例提供的基于三维动画的视频对照方法的流程图；图2为本专利技术实施例提供的实时监测模型运动画面的示意图；图3为本专利技术实施例提供的从虚拟摄像机中提取的一种画面；图4为本专利技术实施例提供的从虚拟摄像机中提取的另一种画面；图5为本专利技术实施例提供的第一灰度图片与第一轮廓图片的示意图；图6为图3对应的第二灰度图片与第二轮廓图片的示意图；图7为图4对应的第二灰度图片与第二轮廓图片的示意图；图8为图5对应处理得到的第一直方图；图9为图6对应处理得到的第二直方图；图10为图7本文档来自技高网...

【技术保护点】
1.一种基于三维动画的视频对照方法，其特征在于，包括：/n读取真人运动的视频，并将所述视频根据帧率分割成多张图片；/n在统一引擎中针对模型添加固定的虚拟摄像头，在模型运动的过程中对所述虚拟摄像头的画面进行实时提取；/n对分割成的图片进行轮廓提取处理，获得第一轮廓图片，同时对实时提取出的画面进行轮廓提取处理，获得第二轮廓图片；/n将所述第一轮廓图片与所述第二轮廓图片进行匹配，找出匹配度高的两张轮廓图片，并同步显现与匹配度高的两张轮廓图片对应的分割成的图片与实时提取出的画面。/n

【技术特征摘要】
1.一种基于三维动画的视频对照方法，其特征在于，包括：
读取真人运动的视频，并将所述视频根据帧率分割成多张图片；
在统一引擎中针对模型添加固定的虚拟摄像头，在模型运动的过程中对所述虚拟摄像头的画面进行实时提取；
对分割成的图片进行轮廓提取处理，获得第一轮廓图片，同时对实时提取出的画面进行轮廓提取处理，获得第二轮廓图片；
将所述第一轮廓图片与所述第二轮廓图片进行匹配，找出匹配度高的两张轮廓图片，并同步显现与匹配度高的两张轮廓图片对应的分割成的图片与实时提取出的画面。


2.根据权利要求1所述的基于三维动画的视频对照方法，其特征在于，对分割成的图片进行轮廓提取处理，获得第一轮廓图片，具体包括：
将分割成的图片中的人物提取出来，得到人物图片；
对所述人物图片进行灰度处理，得到第一灰度图片；
通过所述第一灰度图片边界的围绕关系，确定第一外边界和第一孔边界；
根据所述第一外边界、所述第一孔边界，以及所述第一外边界和所述第一孔边界的层次关系，获得第一轮廓图片。


3.根据权利要求2所述的基于三维动画的视频对照方法，其特征在于，对实时提取出的画面进行轮廓提取处理，获得第二轮廓图片，具体包括：
对实时提取出的画面进行灰度处理，得到第二灰度图片；
通过所述第二灰度图片边界的围绕关系，确定第二外边界和第二孔边界；
根据所述第二外边界、所述第二孔边界，以及所述第二外边界和所述第二孔边界的层次关系，获得第二轮廓图片。


4.根据权利要求3所述的基于三维动画的视频对照方法，其特征在于，在将所述第一轮廓图片与所述第二轮廓图片进行匹配之前，还包括：
对所述第一轮廓图片与所述第二轮廓图片进行灰度处理。


5.根据权利要求4所述的基于三维动画的视频对照方法，其特征在于，将所述第一轮廓图片与所述第二轮廓图片进行匹配，找出匹配度高的两张轮廓图片，具体包括：
将所述第一轮...

【专利技术属性】
技术研发人员：刘珂，张义，张娜，王艳，
申请(专利权)人：山东数字人科技股份有限公司，
类型：发明
国别省市：山东;37