移动设备和相关视频编辑方法技术

本发明专利技术公开了一种移动设备及视频编辑方法。移动设备包括：处理硬件；存储器，耦合到处理硬件；以及显示器，其中处理硬件用于：响应于用户命令，从视频的帧中识别人物的关键点，用户命令进一步指示关键点的给定关键点的目标位置；生成包括目标人体姿势的目标帧，目标人体姿势的给定关键点在目标位置；以及在显示器上生成包括目标帧的编辑的帧序列，编辑的帧序列示出了人体姿势过渡为目标人体姿势的运动。本发明专利技术的移动设备及视频编辑方法可以方便的进行人体动作编辑。

Mobile devices and related video editing methods

【技术实现步骤摘要】
移动设备和相关视频编辑方法
本专利技术的实施例涉及在移动设备上识别和编辑视频中的人体姿势。
技术介绍
人体姿势检测是指检测图像中人物的关键点。关键点的位置描述了人体姿势。每个关键点与身体部位相关联，例如头部、肩部、髋关节、膝盖和脚。人体姿势检测使得能够确定在图像中检测到的人是否踢腿、抬起肘部、站立或坐下。传统上，通过在几个关键位置上具有嵌入式跟踪传感器的标记套装来装配人类对象来捕获人体姿势。这种方法累赘、耗时且昂贵。已经开发了用于姿势估计的无标记方法，但是需要大量的计算能力，这是受计算资源限制的设备(例如移动设备)的障碍。
技术实现思路
本专利技术的一个实施例公开了一种移动设备，可操作以在视频中生成目标人体姿势，其特征在于，包括：处理硬件；存储器，耦合到处理硬件；以及显示器，其中处理硬件用于：响应于用户命令，从视频的帧中识别人物的关键点，用户命令进一步指示关键点的给定关键点的目标位置；生成包括目标人体姿势的目标帧，目标人体姿势的给定关键点在目标位置；以及在显示器上生成包括目标帧的编辑的帧序列，编辑的帧序列本文档来自技高网...

【技术保护点】
1.一种移动设备，可操作以在视频中生成目标人体姿势，其特征在于，包括：/n处理硬件；/n存储器，耦合到该处理硬件；以及/n显示器，其中该处理硬件用于：/n响应于用户命令，从该视频的帧中识别人物的关键点，该用户命令进一步指示该关键点的给定关键点的目标位置；/n生成包括该目标人体姿势的目标帧，该目标人体姿势的该给定关键点在该目标位置；以及/n在该显示器上生成包括该目标帧的编辑的帧序列，该编辑的帧序列示出了该人体姿势过渡为该目标人体姿势的运动。/n

【技术特征摘要】
20181029 US 16/173,7341.一种移动设备，可操作以在视频中生成目标人体姿势，其特征在于，包括：
处理硬件；
存储器，耦合到该处理硬件；以及
显示器，其中该处理硬件用于：
响应于用户命令，从该视频的帧中识别人物的关键点，该用户命令进一步指示该关键点的给定关键点的目标位置；
生成包括该目标人体姿势的目标帧，该目标人体姿势的该给定关键点在该目标位置；以及
在该显示器上生成包括该目标帧的编辑的帧序列，该编辑的帧序列示出了该人体姿势过渡为该目标人体姿势的运动。


2.如权利要求1所述的移动设备，其特征在于，该处理硬件还包括：
卷积神经网络加速器，用于执行卷积神经网络计算以从背景图像中裁剪该人物。


3.根据权利要求2所述的移动装置，其特征在于，该卷积神经网络加速器可操作以执行卷积神经网络计算以将该关键点与裁剪的人物的身体部位相关联。


4.根据权利要求1所述的移动设备，其特征在于，还包括：电路，用于将该编辑的帧序列上载到服务器以由其他移动设备获取。


5.如权利要求1所述的移动设备，其特征在于，每个关键点可根据该用户命令在该显示器上移动。


6.如权利要求1所述的移动设备，还包括触摸屏，其特征在于，该用户命令包括在该触摸屏上的用户指导的动作，以将该关键点移动到该目标位置。


7.如权利要求1所述的移动设备，其特征在于，该用户命令选择要由该编辑的帧序列替换的该视频中的帧序列。


8.如权利要求1所述的移动设备，其特征在于，该用户命令选择该视频中的该帧以指示该关键点的该目标位置，并且该处理硬件用于：
生成中间帧以跟随该编辑的帧序列中的所选帧，每个中间帧示出该人类姿势的运动的增量进展，其在该目标帧中转变为该目标人类姿势。


9.如权利要求1所述的移动设备，其特征在于，该处理硬件还用于：
执行逆运动学变换以获得对应于该目标位置处的该目标人体姿势的关节角度。


10.如权利要求9所述的移动设备，其特征在于，该处理硬件还用于：
根据该关节角度计算该人像像素的全局扭曲变...

【专利技术属性】
技术研发人员：庄世荣，任正隆，蒋智中，柯心滢，
申请(专利权)人：联发科技股份有限公司，
类型：发明
国别省市：中国台湾;71