一种动作图像处理方法、装置和终端制造方法及图纸

本发明专利技术提供了一种动作图像处理方法、移动终端，涉及图像处理技术领域。其中，该方法包括：确定第一视频图像中第一人体对象的第一关键点框架；将第二视频图像中第二人体对象的第二关键点框架转换为与第一关键点框架比例相同的参考关键点框架；根据第一关键点框架与参考关键点框架之间的差异，显示动作指导信息。在本发明专利技术中，终端可以按照特定动作学习者的身形比例，对视频中动作指导者的人体框架进行转换，进而可以根据动作学习者的人体框架与动作指导者转换后的人体框架之间的差异，显示针对不同人体部位的动作指导信息，从而可以对动作学习者进行针对性的动作纠正，如此，能够提高动作学习的准确度，以及动作学习的效率。

An Action Image Processing Method, Device and Terminal

The invention provides an action image processing method and a mobile terminal, which relates to the field of image processing technology. Among them, the method includes: determining the first key point frame of the first human body object in the first video image; transforming the second key point frame of the second human body object in the second video image into the reference key point frame with the same proportion as the first key point frame; displaying the action guidance information according to the difference between the first key point frame and the reference key point frame. In the present invention, the terminal can convert the human body frame of the motion instructor in the video according to the figure proportion of the specific action learner, and then according to the difference between the human body frame of the action learner and the transformed human body frame of the action instructor, display the action guidance information for different human body parts, so that the action learner can perform targeted actions. Correction, in this way, can improve the accuracy of action learning, as well as the efficiency of action learning.

【技术实现步骤摘要】
一种动作图像处理方法、装置和终端
本专利技术涉及图像处理
，尤其涉及一种动作图像处理方法、装置和终端。
技术介绍
在工作生活中，出于职业或爱好等需求，人们通常会学习很多连贯成套的肢体动作，例如舞蹈、体操、健身、武术等等。随着网络媒介的广泛使用，越来越多的专业人士通过网络上传动作指导的教学视频，动作学习者们也可以通过网络上的教学视频进行动作学习。然而在实际应用中，动作学习者们在对教学视频中的动作进行模仿时，往往缺乏专业性的指导，动作模仿不标准时，难以得到专业性的动作纠正，如此，动作学习的准确度较为低下，进而将会降低动作学习的效率。
技术实现思路
本专利技术提供一种动作图像处理方法、装置和终端，以解决动作学习者通过动作教学视频进行学习时，动作准确度和学习效率较为低下的问题。为了解决上述技术问题，本专利技术是这样实现的：一种动作图像处理的方法，应用于终端，包括：确定第一视频图像中第一人体对象的第一关键点框架；将第二视频图像中第二人体对象的第二关键点框架转换为与所述第一关键点框架比例相同的参考关键点框架；所述第二视频图像和所述第一视频图像分别属于不同视频，且所述第二视频图像与所述第一视频图像属性对应；根据所述第一关键点框架与所述参考关键点框架之间的差异，显示动作指导信息。第一方面，本专利技术实施例还提供了一种动作图像处理装置，该装置包括：第一确定模块，用于确定第一视频图像中第一人体对象的第一关键点框架；转换模块，用于将第二视频图像中第二人体对象的第二关键点框架转换为与所述第一关键点框架比例相同的参考关键点框架；所述第二视频图像和所述第一视频图像分别属于不同视频，且所述第一视频图像与所述第二视频图像属性对应；显示模块，用于根据所述第一关键点框架与所述参考关键点框架之间的差异，显示动作指导信息。第二方面，本专利技术实施例还提供了一种终端，该终端包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现本专利技术所述的动作图像处理方法的步骤。第三方面，本专利技术实施例还提供了一种计算机可读存储介质，该计算机可读存储介质上存储计算机程序，计算机程序被处理器执行时实现本专利技术所述的动作图像处理方法的步骤。在本专利技术实施例中，终端可以确定第一视频图像中第一人体对象的第一关键点框架，也即动作学习者的人体框架，然后终端可以将第二视频图像中第二人体对象的第二关键点框架，也即动作指导者的人体框架转换为与第一关键点框架比例相同的参考关键点框架，也即是可以按照特定动作学习者的身形比例，对动作指导者的人体框架进行转换，进而终端可以根据第一关键点框架与参考关键点框架之间的差异，显示动作指导信息。在本专利技术实施例中，终端可以按照特定动作学习者的身形比例，对动作教学视频中动作指导者的人体框架进行转换，进而可以根据动作学习者的人体框架与动作指导者转换后的人体框架之间的差异，显示针对不同人体部位的动作指导信息，从而可以对动作学习者的动作进行针对性的纠正，如此，能够提高动作学习的准确度，以及动作学习的效率。附图说明图1示出了本专利技术实施例一中的一种动作图像处理方法的流程图；图2示出了本专利技术实施例二中的一种动作图像处理方法的流程图；图3示出了本专利技术实施例二中的一种第二关键点框架的示意图；图4示出了本专利技术实施例二中的一种第一关键点框架的示意图；图5示出了本专利技术实施例二中的一种参考关键点框架的示意图；图6示出了本专利技术实施例三中的一种动作图像处理装置的结构框图；图7示出了本专利技术实施例三中的另一种动作图像处理装置的结构框图；图8示出了本专利技术实施例三中的一种第一确定模块的结构框图；图9示出了本专利技术各个实施例中的一种移动终端的硬件结构示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。实施例一参照图1，示出了本专利技术实施例一的动作图像处理方法的流程图，具体可以包括如下步骤：步骤101，确定第一视频图像中第一人体对象的第一关键点框架。在本专利技术实施例中，终端可以在确定第一关键点框架之前，获取或确定第二视频图像中第二人体对象的第二关键点框架。其中，第二视频图像可以为第二视频中的视频图像，第二视频可以为一动作教学视频，例如舞蹈教学视频、健身教学视频等等，第二人体对象即为第二视频中的动作指导者。动作指导者可以进行动作展示，并将对展示的动作进行视频录制，获得动作教学的第二视频，进而可以将第二视频上传至网络中。动作学习者可以将第二视频从网络中下载至终端，并观看第二视频以进行动作学习。在一种实现方式中，第二人体对象的第二关键点框架可以由动作指导者所使用的终端确定出，进而由动作指导者上传至网络中，以便动作学习者连同第二视频一起下载至自己所使用的终端中。在另一种实现方式中，第二人体对象的第二关键点框架也可以在动作学习者下载到第二视频之后，由动作学习者所使用的终端在首次播放第二视频的过程中确定出，并预置在动作学习者所使用的终端中，以便后续进行动作学习时直接调用，本专利技术实施例对此不作具体限定。终端播放第二视频时，首先可以对第二视频中的第二视频图像进行人体关键点检测，从而检测出第二人体对象能够自然弯曲、旋转的关节点部位，例如第二人体对象的头部关键点、手肘关键点、膝盖关键点等等。其中，第二视频图像可以为第二视频中任一帧视频图像，或者第二视频中能够代表关键动作的任一帧关键图像。然后终端可以将各个人体关键点按照人体部位进行连接，相互连接的每两个关键点可以组成一个表示人体部位的向量，各个向量可以构成第二人体对象的第二关键点框架。另外，在本专利技术实施例中，第一视频图像可以为第一视频中的视频图像，第一视频可以为动作学习者在观看第二视频进行学习的同时，或者在学习之后录制的动作学习视频，第一人体对象即为第一视频中的动作学习者。终端在录制第一视频的过程中，或者在录制完毕第一视频之后，首先可以确定第一视频中与第二视频图像属性对应的第一视频图像，然后可以对第一视频图像进行人体关键点检测，之后终端可以将各个人体关键点按照人体部位进行连接，相互连接的每两个关键点可以组成一个表示人体部位的向量，各个向量可以构成第一人体对象的第一关键点框架。步骤102，将第二视频图像中第二人体对象的第二关键点框架转换为与第一关键点框架比例相同的参考关键点框架；第二视频图像和第一视频图像分别属于不同视频，且第一视频图像与第二视频图像属性对应。在本专利技术实施例中，由于动作指导者和动作学习者的身高、四肢长度等身形参数存在差异，因此终端可以将第一关键点框架转换为与第二关键点框架比例相同的参考关键点框架，也即是将动作指导者的关键点框架转换为与当前的动作学习者身形相同的关键点框架，从而能够提高动作指导的准确性。当动作指导者身形较大，而动作学习者身形较小时，终端可以将第一关键点框架缩小为与第二关键点框架比例相同的参考关键点框架。当动作指导者身形较小，而动作学习者身形较大时，终端可以将第一关键点框架放大为与第二关键点框架比例相同的参考关键点框架。其中，第一视频图像与第二视频图像属性对应，也即是第一视频本文档来自技高网...

【技术保护点】
1.一种动作图像处理方法，应用于终端，其特征在于，所述方法包括：确定第一视频图像中第一人体对象的第一关键点框架；将第二视频图像中第二人体对象的第二关键点框架转换为与所述第一关键点框架比例相同的参考关键点框架；所述第二视频图像和所述第一视频图像分别属于不同视频，且所述第一视频图像与所述第二视频图像属性对应；根据所述第一关键点框架与所述参考关键点框架之间的差异，显示动作指导信息。

【技术特征摘要】
1.一种动作图像处理方法，应用于终端，其特征在于，所述方法包括：确定第一视频图像中第一人体对象的第一关键点框架；将第二视频图像中第二人体对象的第二关键点框架转换为与所述第一关键点框架比例相同的参考关键点框架；所述第二视频图像和所述第一视频图像分别属于不同视频，且所述第一视频图像与所述第二视频图像属性对应；根据所述第一关键点框架与所述参考关键点框架之间的差异，显示动作指导信息。2.根据权利要求1所述的方法，其特征在于，所述确定第一视频图像中第一人体对象的第一关键点框架的步骤之前，包括：确定第二视频图像中第二人体对象的第二关键点框架。3.根据权利要求2所述的方法，其特征在于，所述确定第二视频图像中第二人体对象的第二关键点框架的步骤，包括：从第二视频中的第一预设起始图像开始，每当检测到所述第二视频中第二人体对象的动作保持时长大于预设时长时，将动作保持期间的任一帧图像确定为第一关键图像，直至确定出所述第二视频中的各个第一关键图像；对所述各个第一关键图像中的第二视频图像进行人体关键点检测，获得所述第二视频图像中第二人体对象的第二关键点框架。4.根据权利要求3所述的方法，其特征在于，所述确定第一视频图像中第一人体对象的第一关键点框架的步骤，包括：确定所述第二视频图像在所述各个第一关键图像中的目标序号；从第一视频中的第二预设起始图像开始，当检测到所述第一视频中第一人体对象的动作保持时长大于所述预设时长时，将动作保持期间的任一帧图像确定为第二关键图像；确定所述第二关键图像的序号；当所述第二关键图像的序号与所述目标序号相同时，将所述第二关键图像确定为第一视频图像；对所述第一视频图像进行人体关键点检测，获得所述第一视频图像中第一人体对象的第一关键点框架。5.根据权利要求2所述的方法，其特征在于，所述确定第二视频图像中第二人体对象的第二关键点框架的步骤，包括：从第二视频中的第一预设起始图像开始，每隔预设时长选择一帧第一关键图像，直至确定出所述第二视频...

【专利技术属性】
技术研发人员：曹新英，
申请(专利权)人：维沃移动通信有限公司，
类型：发明
国别省市：广东,44