图像处理方法及装置、图像设备及存储介质制造方法及图纸

技术编号:24965184 阅读:18 留言:0更新日期:2020-07-21 15:09
本发明专利技术实施例提供一种图像处理方法及装置、图像设备及存储介质。所述方法包括:获取目标的第一图像;检测所述第一图像,确定出所述目标的关键点;基于所述关键点,确定出目标区域;在所述第一图像的目标区域叠加增强现实AR贴图,生成第二图像;显示第二图像。

【技术实现步骤摘要】
图像处理方法及装置、图像设备及存储介质
本专利技术涉及信息
,尤其涉及一种图像处理方法及装置、图像设备及存储介质。
技术介绍
增强现实(AugmentedReality,AR)是一种实时地计算摄影机影像的位置及角度并加上相应图像的技术。但是现有的AR技术仅能够实现简单的文字或者图标贴到采集的图像上;AR效果单一且效果不佳。
技术实现思路
本专利技术实施例期望提供一种图像处理方法及装置、图像设备及存储介质。本专利技术的技术方案是这样实现的:一种图像处理方法,包括:获取目标的第一图像;检测所述第一图像,确定出所述目标的关键点;基于所述关键点,确定出目标区域;在所述第一图像的目标区域叠加增强现实AR贴图,生成第二图像;显示第二图像。基于上述方案,所述检测所述第一图像,确定出所述目标的关键点,包括:根据所述第一图像的图像特征获得目标的轮廓关键点。基于上述方案,所述基于所述键点,确定所述目标区域,包括:基于所述轮廓关键点,确定所述目标的外轮廓;根据所述目标的形状属性,对所述外轮廓所包围区域进行分区得到多个分区;从所述多个分区选择部分作为所述目标区域。基于上述方案,所述检测所述第一图像,确定出所述目标的关键点,包括:检测所述第一图像,确定出所述目标的支架关键点。基于上述方案,所述基于所述关键点,确定出目标区域,包括:根据所述支架关键点,确定所述目标的支架;确定所述第一图像中第x像素到所述支架的第x距离;根据所述第x距离,确定所述第x像素是否为构成所述目标的像素;确定所述目标所在的至少部分区域为所述目标区域。基于上述方案,所述方法还包括:确定所述第x距离是否不小于距离阈值;若所述第x像素距离大于所述距离阈值,确定所述第x像素不是构成所述目标的像素。基于上述方案,所述方法还包括:根据所述第x像素距离最近的所述支架体与备选阈值的对应关系,确定所述距离阈值。基于上述方案,所述根据所述第x像素距离最近的所述支架体与备选阈值的对应关系,确定所述距离阈值,包括:根据所述第x像素距离最近的所述支架体与备选阈值的对应关系,得到基准阈值;根据与所述第一图像对应的深度图像,确定所述目标对应的采集对象与相机之间的相对距离;根据所述支架的尺寸及相对距离,得到调整参数;根据所述基准阈值及所述调整参数,确定所述距离阈值。基于上述方案,所述方法还包括:根据所述第一图像对应的深度图像,获取所述第x像素的第x深度值;所述根据所述第x距离,确定所述第x像素是否为构成所述目标的像素,包括:结合所述第x距离及所述第x深度值,确定所述第x像素是否为构成所述目标的像素。基于上述方案,所述基于所述关键点,确定出目标区域,包括:基于从所述第一图像中检测的2D关键点所述2D关键点对应的实际深度值,确定所述目标的3D特征;基于所述3D坐标,确定在3D空间内的3D目标区域。基于上述方案,所述基于从所述第一图像中检测的2D关键点及所述2D关键点对应的实际深度值,确定所述目标的3D坐标,包括:根据参考深度值及所述实际深度值的比值,将所述2D关键点的第一2D坐标转换为第二2D坐标;根据所述第二2D特征及所述参考深度值,获得所述3D特征。基于上述方案,所述方法还包括:根据所述关键点,确定所述目标的姿态;获取与所述姿态相适配的目标AR贴图;所述在所述第一图像的目标区域叠加增强现实AR贴图,生成第二图像,包括:在所述第一图像的目标区域叠加所述目标AR贴图,生成所述第二图像。基于上述方案,所述根据所述关键点,确定所述目标的姿态,还包括:根据2D关键点,确定所述目标的2D姿态;或根据2D关键点及所述2D关键点所对应的实际深度值,确定所述目标的3D姿态。基于上述方案,所述获取与所述姿态相适配的所述AR贴图,包括:从多个备选AR贴图中与所述姿态相适配的所述目标AR贴图;或者,根据所述姿态调整预设AR贴图,生成与所述姿态相适配的目标AR贴图。基于上述方案,所述方法还包括:获取所述第二图像生成的场景信息;根据所述场景信息,选择所述AR贴图。基于上述方案,所述获取所述第二图像生成的场景信息,包括以下至少之一:根据所述第二图像所在应用的应用类型,确定所述场景信息;根据所述第二图像所在组件的组件功能,确定所述场景信息。基于上述方案,所述根据所述场景信息,选择所述AR贴图,包括:若所述场景信息指示当前处于游戏场景,根据游戏场景的游戏元素确定所述AR贴图;和/或,根据所述场景信息,选择与当前场景的主题相适配的所述AR贴图。一种图像处理装置,包括:第一获取模块,用于获取目标的第一图像;检测模块,用于检测所述第一图像,确定出所述目标的关键点;第一确定模块,用于基于所述关键点,确定出目标区域;生成模块,用于在所述第一图像的目标区域叠加增强现实AR贴图,生成第二图像;显示模块,用于显示第二图像。基于上述方案,所述检测模块,具体用于根据所述第一图像的图像特征获得目标的轮廓关键点。基于上述方案,所述第一确定模块,具体用于基于所述轮廓关键点,确定所述目标的外轮廓;根据所述目标的形状属性,对所述外轮廓所包围区域进行分区得到多个分区;从所述多个分区选择部分作为所述目标区域。基于上述方案,所述检测模块,具体用于检测所述第一图像,确定出所述目标的支架关键点。基于上述方案,所述第一确定模块,具体用于根据所述支架关键点,确定所述目标的支架;确定所述第一图像中第x像素到所述支架的第x距离;根据所述第x距离,确定所述第x像素是否为构成所述目标的像素;确定所述目标所在的至少部分区域为所述目标区域。基于上述方案,所述装置还包括:第二确定模块,用于确定所述第x距离是否不小于距离阈值;第三确定模块,用于若所述第x像素距离大于所述距离阈值,确定所述第x像素不是构成所述目标的像素。基于上述方案,所述装置还包括:第四确定模块,用于根据所述第x像素距离最近的所述支架体与备选阈值的对应关系,确定所述距离阈值。基于上述方案,所述第四确定模块,具体用于根据所述第x像素距离最近的所述支架体与备选阈值的对应关系,得到基准阈值;根据与所述第一图像对应的深度图像,确定所述目标对应的采集对象与相机之间的相对距离;根据所述支架的尺寸及相对距离,得到调整参数;根据所述基准阈值及所述调整参数,确定所述距离阈值。基于上述方案,所述装置还包括:第二获取模块,用于根据所述第一图像对应的深度图像,获取所述第x像素的第x深度值;所述第三确定模块,具体用于结合所述第x距离及所述本文档来自技高网...

【技术保护点】
1.一种图像处理方法,其特征在于,包括:/n获取目标的第一图像;/n检测所述第一图像,确定出所述目标的关键点;/n基于所述关键点,确定出目标区域;/n在所述第一图像的目标区域叠加增强现实AR贴图,生成第二图像;/n显示第二图像。/n

【技术特征摘要】
1.一种图像处理方法,其特征在于,包括:
获取目标的第一图像;
检测所述第一图像,确定出所述目标的关键点;
基于所述关键点,确定出目标区域;
在所述第一图像的目标区域叠加增强现实AR贴图,生成第二图像;
显示第二图像。


2.根据权利要求1所述的图像处理方法,其特征在于,所述检测所述第一图像,确定出所述目标的关键点,包括:
根据所述第一图像的图像特征获得目标的轮廓关键点。


3.根据权利要求2所述的图像处理方法,其特征在于,
所述基于所述关键点,确定所述目标区域,包括:
基于所述轮廓关键点,确定所述目标的外轮廓;
根据所述目标的形状属性,对所述外轮廓所包围区域进行分区得到多个分区;
从所述多个分区选择部分作为所述目标区域。


4.根据权利要求1所述的图像处理方法,其特征在于,
所述检测所述第一图像,确定出所述目标的关键点,包括:
检测所述第一图像,确定出所述目标的支架关键点。


5.根据权利要求4所述的图像处理方法,其特征在于,
所述基于所述关键点,确定出目标区域,包括:
根据所述支架关键点,确定所述目标的支架;
确定所述第一图像中第x像素到所述支架的第x距离;
根据所述第x距离,确定所述第x像素是否为构成所述目标的像素;
确定所述目标所在的至少部分区域为所述目标区域。


6.根据权利要求...

【专利技术属性】
技术研发人员:袁玮陈楷佳彭彬绪于志兴张义保董亚魁陆雨柔黄頔
申请(专利权)人:北京市商汤科技开发有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1