基于增强现实的试鞋方法、装置和电子设备制造方法及图纸

本公开实施例公开了的基于增强现实的试鞋方法、装置和电子设备，在检测到试鞋指令之后，可以根据实时采集的现实图像中的任一小腿图像，确定与该小腿图像对应的初始渲染区域，并根据现实图像中的所有小腿图像，确定遮挡区域，然后根据遮挡区域和初始渲染区域，确定目标渲染区域；从而仅需对目标渲染区域进行鞋模渲染。也即，通过这种方式，使得展示的图像并非展示了整个鞋模，而是根据实际小腿与鞋模的遮挡关系，展示了鞋模的一部分；从而，可以更真实的贴近用户真实试鞋过程，让用户拥有更好的试鞋沉浸体验。鞋沉浸体验。鞋沉浸体验。

【技术实现步骤摘要】
基于增强现实的试鞋方法、装置和电子设备


[0001]本公开涉及图像处理
，尤其涉及一种基于增强现实的试鞋方法、装置和电子设备。

技术介绍

[0002]随着科学技术的发展，终端应用所具备的功能也越来越完善，例如，用户可以通过终端应用浏览物品，而对于某些物品，终端设备还可以进行VR(Virtual Reality，虚拟现实)展示，以使用户具备更好的浏览体验。但是，某些物品可能观看起来和实际穿戴起来可能存在一定的偏差，例如，鞋子。某些鞋子可能图片看起来比较好看，而真正穿在脚上则并不美观，因此，为了使用户更好的选择到自己心怡的鞋子，某些鞋子可以进行AR(Augmented Reality，增强现实)试鞋，也即，用户利用终端设备拍摄自己的脚部，则鞋子图像覆盖在脚部图像的周围，从而让用户更真实的体验到鞋子的外观。

技术实现思路

[0003]提供该公开内容部分以便以简要的形式介绍构思，这些构思将在后面的具体实施方式部分被详细描述。该公开内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征，也不旨在用于限制所要求的保护的技术方案的范本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于增强现实的试鞋方法，其特征在于，包括：响应于检测到试鞋指令，实时采集以及展示现实图像，其中，所述现实图像中包括至少一个小腿图像，所述试鞋指令指示鞋模；确定与第一小腿图像对应的初始渲染区域，其中，所述至少一个小腿图像包括所述第一小腿图像；基于所述至少一个小腿图像，确定遮挡区域；根据所述初始渲染区域和所述遮挡区域，确定所述初始渲染区域中的目标渲染区域；基于所述试鞋指令所指示的鞋模，对所述目标渲染区域进行渲染，获得鞋模增强图像，并在所述现实图像上展示所述鞋模增强图像。2.根据权利要求1所述的方法，其特征在于，所述确定与所述目标小腿图像对应的初始渲染区域，包括：基于所述第一小腿图像在所述现实图像中的位置，确定所述第一小腿图像所指示的第一小腿在三维空间中的位姿；根据所述第一小腿在三维空间中的位姿，确定所述试鞋指令所指示的鞋模在所述三维空间中的位姿；基于所述试鞋指令所指示的鞋模在所述三维空间中的位姿、所述试鞋指令所指示的鞋模的形状，确定所述初始渲染区域。3.根据权利要求1所述的方法，其特征在于，所述基于所述至少一个小腿图像，确定遮挡区域，包括：在三维空间中添加与各小腿图像对应的小腿模型；基于所述试鞋指令所指示的鞋模与添加的小腿模型之间的遮挡关系，确定所述遮挡区域。4.根据权利要求3所述的方法，其特征在于，所述在三维空间中添加与各小腿图像对应的小腿模型，包括：根据各小腿图像所指示的小腿在所述三维空间内的位姿，确定各小腿模型在所述三维空间内的位姿；根据确定出的各小腿模型在所述三维空间内的位姿，将各小腿模型添加至所述三维空间内。5.根据权利要求3所述的方法，其特征在于，通过如下方式在三维空间中添加与第一小腿图像对应的第一小腿模型：根据鞋模在所述三维空间内的位姿，确定与所述第一小腿图像对应的第一小腿模型在所述三维空间内的位姿；根据所述第一小腿模型在所述三维空间内的位姿，将所述第一小腿模型添加至所述三维空间内。6.根据权利要求4所述的方法，其特征在于，通过如下方式确定各小腿图像所指示的小腿在所述三维空间中的位姿：将所述现实图像输入至预先建立的标注模型，确定所述各小腿图像所指示的小腿在三维空间中的位姿；其中，所述标注模型通过以下方式建立：
获取训练样本集，其中，所述训练样本集中的训练用样本，包括训练用现实图像和与训练用现实图像对应的小腿位姿，其中，所述训练用现实图像中包括小腿图像；基于所述训练样本集，对预先建立的初始神经网络进行训...

【专利技术属性】
技术研发人员：林高杰，罗宇轩，朱泳明，
申请(专利权)人：北京字跳网络技术有限公司，
类型：发明
国别省市：