图像处理方法、装置、终端设备及计算机可读取存储介质制造方法及图纸

本申请公开了一种图像处理方法、装置、终端设备及计算机可读存储介质，涉及计算机视觉技术领域。该图像处理方法应用于终端设备，方法包括：获取待处理的视频图像序列，所述视频图像序列包括多帧视频图像；根据所述终端设备的性能状态，确定插帧策略；根据所述插帧策略，对所述视频图像序列进行插帧处理操作，得到插帧处理后的目标视频图像帧序列。本方法可以较为有效地实现视频插帧。

【技术实现步骤摘要】
图像处理方法、装置、终端设备及计算机可读取存储介质
本申请涉及计算机视觉
，更具体地，涉及一种图像处理方法、装置、终端设备及计算机可读取存储介质。
技术介绍
随着计算机视觉技术的迅速发展，人们对于视频帧率的追求越来越高，高帧率视频能极大的提升人们的观看体验。人们为了观看到流畅度更高的视频，现有相机拍摄的视频帧率也从25FPS提升到60FPS，再到240FPS甚至更高，但仅靠相机的硬件迭代来提升帧率，成本较大，因此视频插帧技术应运而生。视频插帧的目的是根据低帧率视频来生成高帧率视频，视频插帧的一般操作是给定当前帧图像和下一帧图像，生成中间帧。然而，插帧操作的过程需要消耗较多的运算资源，进而增加了系统负担，导致视频插帧的效率降低。因此，现有插帧技术存在不合理之处。
技术实现思路
本申请提出了一种图像处理方法、装置、终端设备及计算机可读取存储介质。第一方面，本申请实施例提供了一种图像处理方法，应用于终端设备，该方法包括：获取待处理的视频图像序列，所述视频图像序列包括多帧视频图像；根据所述终端设备的性能状态，确定插帧策略；根据所述插帧策略，对所述视频图像序列进行插帧处理操作，得到插帧处理后的目标视频图像帧序列。可选的，根据所述终端设备的性能状态，确定插帧策略，包括：当所述终端设备的性能状态满足第一预设状态时，确定与所述第一预设状态对应的第一插帧策略；所述根据所述插帧策略，对所述视频图像序列进行插帧处理操作，包括：根据所述第一插帧策略，在所述视频图像序列中的部分相邻两帧视频图像之间插入第一预设数量的过渡帧图像，其中，所述过渡帧图像根据所述视频图像预估生成；在所述视频图像序列中的其他部分相邻两帧视频图像之间插入所述第一预设数量的复制帧图像，其中，所述复制帧图像根据所述视频图像复制生成。可选的，根据所述第一插帧策略，在所述视频图像序列中的部分相邻两帧视频图像之间插入第一预设数量的过渡帧图像，包括：确定所述视频图像序列中的关键视频图像；获取所述关键视频图像的相邻视频图像；在所述关键视频图像与所述相邻视频图像之间插入第一预设数量的过渡帧图像。可选的，根据所述第一插帧策略，在所述视频图像序列中的部分相邻两帧视频图像之间插入第一预设数量的过渡帧图像，还包括：将所述视频图像序列分离成奇数帧视频图像和偶数帧视频图像；获取指定帧视频图像的相邻视频图像，所述指定帧视频图像为所述奇数帧视频图像或所述偶数帧视频图像；在所述指定帧视频图像与所述相邻视频图像之间插入第一预设数量的过渡帧图像。可选的，根据所述终端设备的性能状态，确定插帧策略，还包括：当所述终端设备的性能状态满足第二预设状态时，确定与所述第二预设状态对应的第二插帧策略，其中，所述第二预设状态优于所述第一预设状态；所述根据所述插帧策略，对所述视频图像序列进行插帧处理操作，包括：根据所述第二插帧策略，在所述视频图像序列中的所有相邻两帧视频图像之间插入第二预设数量的过渡帧图像。可选的，获取待处理的视频图像序列，包括：当检测到所述终端设备的性能状态满足目标状态时，从服务器获取待处理的视频图像序列，所述目标状态用于表征所述终端设备执行插帧处理操作时所需的最低性能状态。可选的，在所述当检测到所述终端设备的性能状态满足目标状态时，从服务器获取待处理的视频图像序列之前，所述方法还包括：从所述服务器端获取帧数据量，所述帧数据量为待处理的视频图像序列的数据量；根据所述帧数据量，确定与所述帧数据量对应的目标状态，所述目标状态为所述终端设备对所述视频图像序列执行插帧处理操作时所需的最低性能状态；检测所述终端设备的性能状态是否满足所述目标状态。可选的，当检测到所述终端设备的性能状态满足目标状态时，从服务器获取待处理的视频图像序列，包括：当检测到所述终端设备的性能状态满足目标状态时，发送指示指令至服务器，所述指示指令用于指示所述服务器发送待插帧处理的视频图像序列至终端设备；接收服务器根据所述指示指令发送的待插帧处理的视频图像序列。可选的，在所述当检测到所述终端设备的性能状态满足目标状态时，从服务器获取待处理的视频图像序列之前，所述方法还包括：发送所述终端设备的性能数据至所述服务器，所述服务器用于根据所述性能数据确定所述终端设备的性能状态是否满足目标状态；当接收到所述服务器返回的目标指令时，确定检测到所述终端设备的性能状态满足目标状态，所述目标指令为所述服务器确定所述终端设备的性能状态满足目标状态时生成。可选的，待处理的视频图像序列为所述服务器根据用户输入的交互信息生成的答复视频图像，所述答复视频图像中包含虚拟机器人，在所述根据所述插帧策略，对所述视频图像序列进行插帧处理操作，得到插帧处理后的目标视频图像帧序列之后，所述方法还包括：根据所述目标视频图像帧序列，生成并输出包含所述虚拟机器人的答复视频。可选的，所述方法还包括：当检测到所述终端设备的性能状态不满足所述目标状态时，从所述服务器端获取指定视频图像帧序列，所述指定视频图像帧序列为所述服务器对所述视频图像序列执行所述插帧处理操作后的图像序列；根据所述指定视频图像帧序列，生成并输出包含所述虚拟机器人的答复视频。可选的，所述方法还包括：当检测到所述终端设备的性能状态不满足所述目标状态时，从所述服务器获取默认视频图像，所述默认视频图像为所述服务器根据用户输入的交互信息确定的默认答复图像；根据所述默认视频图像，生成并输出默认答复视频。第二方面，本申请实施例提供了一种图像处理装置，该装置包括：获取模块，用于获取待处理的视频图像序列，所述视频图像序列包括多帧视频图像；确定模块，用于根据所述终端设备的性能状态，确定插帧策略；处理模块，用于根据所述插帧策略，对所述视频图像序列进行插帧处理操作，得到插帧处理后的目标视频图像帧序列。可选的，确定模块可以包括：第一确定单元，用于当所述终端设备的性能状态满足第一预设状态时，确定与所述第一预设状态对应的第一插帧策略。处理模块可以包括：部分插帧单元，用于根据所述第一插帧策略，在所述视频图像序列中的部分相邻两帧视频图像之间插入第一预设数量的过渡帧图像，其中，所述过渡帧图像根据所述视频图像预估生成；复制单元，用于在所述视频图像序列中的其他部分相邻两帧视频图像之间插入所述第一预设数量的复制帧图像，其中，所述复制帧图像根据所述视频图像复制生成。可选的，部分插帧单元可以具体用于：确定所述视频图像序列中的关键视频图像；获取所述关键视频图像的相邻视频图像；在所述关键视频图像与所述相邻视频图像之间插入第一预设数量的过渡帧图像。可选的，部分插帧单元也可以具体用于：将所述视频图像序列分离成奇数帧视频图像和偶数帧视频图像；获取指定帧视频图像的相邻视频图像，所述指定帧视频图像为所述奇数帧视频图像或所述偶数帧视频图像；在所述指定帧视频图像与所述相邻视频图像之间插入所述第一预设数量的过渡帧图像。可选的，确定模块可以包括：第二确定单元，用于当所述终端设备的性能状态满足第二预设状本文档来自技高网...

【技术保护点】
1.一种图像处理方法，其特征在于，应用于终端设备，所述方法包括：/n获取待处理的视频图像序列，所述视频图像序列包括多帧视频图像；/n根据所述终端设备的性能状态，确定插帧策略；/n根据所述插帧策略，对所述视频图像序列进行插帧处理操作，得到插帧处理后的目标视频图像帧序列。/n

【技术特征摘要】
1.一种图像处理方法，其特征在于，应用于终端设备，所述方法包括：
获取待处理的视频图像序列，所述视频图像序列包括多帧视频图像；
根据所述终端设备的性能状态，确定插帧策略；
根据所述插帧策略，对所述视频图像序列进行插帧处理操作，得到插帧处理后的目标视频图像帧序列。


2.根据权利要求1所述的方法，其特征在于，所述根据所述终端设备的性能状态，确定插帧策略，包括：
当所述终端设备的性能状态满足第一预设状态时，确定与所述第一预设状态对应的第一插帧策略；
所述根据所述插帧策略，对所述视频图像序列进行插帧处理操作，包括：
根据所述第一插帧策略，在所述视频图像序列中的部分相邻两帧视频图像之间插入第一预设数量的过渡帧图像，其中，所述过渡帧图像根据所述视频图像预估生成；
在所述视频图像序列中的其他部分相邻两帧视频图像之间插入所述第一预设数量的复制帧图像，其中，所述复制帧图像根据所述视频图像复制生成。


3.根据权利要求2所述的方法，其特征在于，所述根据所述第一插帧策略，在所述视频图像序列中的部分相邻两帧视频图像之间插入第一预设数量的过渡帧图像，包括：
确定所述视频图像序列中的关键视频图像；
获取所述关键视频图像的相邻视频图像；
在所述关键视频图像与所述相邻视频图像之间插入第一预设数量的过渡帧图像。


4.根据权利要求2所述的方法，其特征在于，所述根据所述第一插帧策略，在所述视频图像序列中的部分相邻两帧视频图像之间插入第一预设数量的过渡帧图像，包括：
将所述视频图像序列分离成奇数帧视频图像和偶数帧视频图像；
获取指定帧视频图像的相邻视频图像，所述指定帧视频图像为所述奇数帧视频图像或所述偶数帧视频图像；
在所述指定帧视频图像与所述相邻视频图像之间插入第一预设数量的过渡帧图像。


5.根据权利要求1所述的方法，其特征在于，所述根据所述终端设备的性能状态，确定插帧策略，包括：
当所述终端设备的性能状态满足第二预设状态时，确定与所述第二预设状态对应的第二插帧策略，其中，所述第二预设状态优于所述第一预设状态；
所述根据所述插帧策略，对所述视频图像序列进行插帧处理操作，包括：
根据所述第二插帧策略，在所述视频图像序列中的所有相邻两帧视频图像之间插入第二预设数量的过渡帧图像。


6.根据权利要求1-5任一项所述的方法，其特征在于，所述获取待处理的视频图像序列，包括：
当检测到所述终端设备的性能状态满足目标状态时，从服务器获取待处理的视频图像序列，所述目标状态用于表征所述终端设备执行插帧处理操作时所需的最低性能状态。


7.根据权利要求6所述的方法，其特征在于，在所述当检测到所述终端设备的性能状态满足目标状态时，从服务器获取待处理的视频图像序列之前，所述方法还包括：
从所述服务器端获取帧数据量，所述帧数据量为待处理的视频图像序列的数据量；
根据所述帧数据量，确定与所述帧数据量对应的目标状态，所述目标状态为所述终端设备对所述视频图像序列执行插帧处理操作时所需的最低性能状态；...

【专利技术属性】
技术研发人员：杨国基，陈泷翔，刘致远，刘炫鹏，刘云峰，
申请(专利权)人：深圳追一科技有限公司，
类型：发明
国别省市：广东;44