三维重建方法及装置、系统、模型训练方法、存储介质制造方法及图纸

本发明专利技术公开了一种三维重建方法及装置、系统、模型训练方法、存储介质，属于图像处理技术领域。该方法包括：获取第一摄像机采集的图像中的目标图像；采用角度识别模型确定目标图像的拍摄角度；基于目标图像的拍摄角度，在角度范围[0，360°)包括的多个角度区间中确定目标图像对应的角度区间；基于各个角度区间对应的目标对象相同的目标图像，对目标对象进行三维重建处理，得到目标对象的三维图像。在获取目标图像时，还获取了该目标图像的拍摄角度，在后续对目标对象进行三维重建处理时，无需再采用额外的算法对多帧目标图像进行排序，有效的减少了三维重建处理时的运算量，提高了获取三维图像时的效率。

Three dimensional reconstruction method and device, system, model training method and storage medium

【技术实现步骤摘要】
三维重建方法及装置、系统、模型训练方法、存储介质
本专利技术涉及图像处理
，特别涉及一种三维重建方法及装置、系统、模型训练方法、存储介质。
技术介绍
智能试衣镜可以在用户的不真实试穿衣服的情况下提供试穿效果，提高了试衣的便利性，节省了试衣的时间。在使用智能试衣镜之前，需要获取目标对象(通常为使用智能试衣镜的用户)的三维图像，该三维图像通常是通过摄像头获取各个拍摄角度的包含目标对象的目标图像后，将各个拍摄角度的目标图像进行三维重建处理得到的。其中，每个拍摄角度位于一个角度区间内，多个角度区间用于对角度范围[0，360°)进行划分。为了得到质量较高的三维图像，需要摄像头获取的目标图像的个数较多，例如，按照顺时针顺序或逆时帧顺序每间隔15°采用摄像头对目标对象进行拍摄，然后再将获取的24帧目标图像进行三维重建处理。在实现本专利技术的过程中，专利技术人发现目前在三维重建过程中，需要通过算法对摄像头获取的目标图像进行排序，保证相邻的两帧目标图像对应的两个角度区间相邻，导致三维重建处理时的运算量较大，从而导致获取三维图像的效率较低。<本文档来自技高网...

【技术保护点】
1.一种三维重建方法，其特征在于，所述方法包括：/n获取第一摄像机采集的图像中的目标图像，所述目标图像为所述图像中目标对象所在位置处的图像；/n采用角度识别模型确定所述目标图像的拍摄角度，所述拍摄角度用于表征所述第一摄像机拍摄所述目标对象时的拍摄方向；/n基于所述目标图像的拍摄角度，在角度范围[0，360°)包括的多个角度区间中确定所述目标图像对应的角度区间；/n基于各个所述角度区间对应的目标对象相同的目标图像，对所述目标对象进行三维重建处理，得到所述目标对象的三维图像。/n

【技术特征摘要】
1.一种三维重建方法，其特征在于，所述方法包括：
获取第一摄像机采集的图像中的目标图像，所述目标图像为所述图像中目标对象所在位置处的图像；
采用角度识别模型确定所述目标图像的拍摄角度，所述拍摄角度用于表征所述第一摄像机拍摄所述目标对象时的拍摄方向；
基于所述目标图像的拍摄角度，在角度范围[0，360°)包括的多个角度区间中确定所述目标图像对应的角度区间；
基于各个所述角度区间对应的目标对象相同的目标图像，对所述目标对象进行三维重建处理，得到所述目标对象的三维图像。


2.根据权利要求1所述的方法，其特征在于，所述采用角度识别模型确定所述目标图像的拍摄角度，包括：
向所述角度识别模型输入所述目标图像；
接收所述角度识别模型输出的角度信息；
将所述角度信息确定为所述拍摄角度；
其中，所述角度识别模型为对样本图像与所述样本图像的拍摄角度进行学习训练得到的模型。


3.根据权利要求1所述的方法，其特征在于，在所述获取第一摄像机采集的图像中的目标图像之后，所述方法还包括：
采用目标识别算法对所述目标图像进行标记处理，得到所述目标图像的标签，所述标签用于对所述目标图像中的目标对象进行标记；
基于所述目标图像的标签，将目标对象相同的目标图像归类为一个图像集合；
在所述基于各个所述角度区间对应的目标对象相同的目标图像，对所述目标对象进行三维重建处理，得到所述目标对象的三维图像之前，所述方法还包括：
基于所述图像集合，获取各个所述角度区间对应的目标对象相同的目标图像。


4.根据权利要求3所述的方法，其特征在于，在基于所述目标图像的拍摄角度，在角度范围[0，360°)包括的多个角度区间中确定所述目标图像对应的角度区间之后，所述方法还包括：
基于所述图像集合，判断每个所述角度区间是否对应有多于两帧位于相同的图像集合内的目标图像；
若所述角度区间对应有所述多于两帧位于相同的图像集合内的目标图像，对所述多于两帧位于相同的图像集合内的目标图像进行图像质量评分处理，得到每帧目标图像的图像质量评分；
删除除图像质量评分最高的目标图像之外的目标图像。


5.根据权利要求1至4任一所述的方法，其特征在于，在所述获取第一摄像机采集的图像中的目标图像之后，所述方法还包括：
判断所述目标图像的分辨率是否小于分辨率阈值；
若所述目标图像的分辨率小于所述分辨率阈值，删除所述目标图像；
若所述目标图像的分辨率不小于所述分辨率阈值，将所述目标图像修改为指定分辨率的图像，所述指定分辨率大于或等于所述分辨率阈值。


6.根据权利要求1至4任一所述的方法，其特征在于，所述基于各个所述角度区间对应的目标对象相同的目标图像，对所述目标对象进行三维重建处理，得到所述目标对象的三维图像，包括：
若所述多个角度区间中的每个角度区间均对应有目标对象相同的目标图像，基于每个角度区间对应的目标图像，对所述目标对象进行三维重建处理，得到所述目标对象的三维图像。


7.根据权利要求1至4任一所述的方法，其特征在于，所述基于各个所述角度区间对应的目标对象相同的目标图像，对所述目标对象进行三维重建处理，得到所述目标对象的三维图像，包括：
当接收到三维重建指令时，基于所述三维重建指令携带的待重建的目标对象的信息，获取多帧包含所述待重建的目标对象的目标图像；
基于每帧包含所述待重建的目标对象的目标图像，对所述待重建的目标对象进行三维重建处理，得到所述待重建的目标对象的三维图像；
判断所述三维图像是否为非完整的三维图像；
若所述三维图像是否为非完整的三维图像，对所述非完整的三维图像进行修复处理，得到修复处理后的三维图...

【专利技术属性】
技术研发人员：赵骥伯，
申请(专利权)人：京东方科技集团股份有限公司，
类型：发明
国别省市：北京;11