当前位置: 首页 > 专利查询>FITTINGBOX公司专利>正文

用于实时、物理准确且逼真的眼镜试戴的流程和方法技术

技术编号:16673200 阅读:33 留言:0更新日期:2017-11-30 17:25
本发明专利技术旨在提供一种用于创建位于一个真实用户脸部图像上的一副虚拟眼镜的实时逼真图像的方法,所述真实用户脸部图像来自单个图像、一组图片、视频剪辑或实时相机视频流,该方法特征在于包括以下步骤:‑100、一个人脸分析过程,该过程用于估计用户脸部的3D旋转矩阵、3D平移矢量和形态参数;‑200、一个眼镜定位过程,该过程与用于外观或真实尺寸模拟的试戴模式相关联,用于估计虚拟眼镜的3D旋转矩阵、3D平移矢量和全局与局部变形参数,以及眼镜腿与眼镜框的连接,适于步骤100中计算得到的形态参数;‑400、一个逼真渲染过程,该过程中将真实用户脸部图像与在步骤200中定位的虚拟眼镜进行结合。

【技术实现步骤摘要】
【国外来华专利技术】用于实时、物理准确且逼真的眼镜试戴的流程和方法本专利技术涉及图像处理和图像合成领域,具体涉及虚拟对象到相片或视频的实时集成。
技术介绍
本专利技术是对相同申请人的其他专利技术的改进。本专利技术的情境是尽可能逼真地对一个对象进行实时虚拟试戴,这些对象通常是但不限于集成到相片或视频中的眼镜,这些相片或视频呈现大体上位于相机前方的人脸。网络销售增长、库存有限或其他任何防止或妨碍对真实对象进行真实试穿的原因催生了对真实对象进行虚拟试穿的需要。就眼镜而言,目前基于虚拟现实或增强现实的解决方案是不充分的,因为这些方案缺乏逼真度或互动性。此外,这些方案的计算大多需要大量数据和时间。相同申请人于2010年1月18日申请的专利申请FR1050305已在本领域公开。
技术实现思路
本专利技术首先旨在提供一种用于创建一个真实用户脸部图像上的一副虚拟眼镜的最终实时逼真图像的方法,所述真实用户脸部图像来自单个图像、一组图片、视频剪辑或实时相机视频流,该方法特征在于包括以下步骤:-100、一个人脸分析过程,所述过程用于估计用户脸部的3D旋转矩阵、3D平移矢量和形态参数;-200、一个眼镜定位过程,所述过程与用于外观或真实本文档来自技高网...
用于实时、物理准确且逼真的眼镜试戴的流程和方法

【技术保护点】
用于创建位于一个真实用户脸部图像上的一副虚拟眼镜的实时逼真图像的方法,所述真实用户脸部图像来自单个图像、一组图片、视频剪辑或实时相机视频流,该方法特征在于包括以下步骤:‑100、一个人脸分析过程,所述人脸分析过程用于估计所述用户脸部的3D旋转矩阵、3D平移矢量和形态参数;‑200、一个眼镜定位过程,其与用于外观或真实尺寸模拟的试戴模式相关联,该眼镜定位过程用于估计所述虚拟眼镜的3D旋转矩阵、3D平移矢量、和全局与局部变形参数,以及眼镜腿与眼镜框的连接,以适于步骤100中计算得到的所述形态参数;‑400、一个逼真渲染过程,所述逼真渲染过程与将所述真实用户脸部图像与在步骤200中定位的所述虚拟眼镜...

【技术特征摘要】
【国外来华专利技术】2015.02.23 FR 15515311.用于创建位于一个真实用户脸部图像上的一副虚拟眼镜的实时逼真图像的方法,所述真实用户脸部图像来自单个图像、一组图片、视频剪辑或实时相机视频流,该方法特征在于包括以下步骤:-100、一个人脸分析过程,所述人脸分析过程用于估计所述用户脸部的3D旋转矩阵、3D平移矢量和形态参数;-200、一个眼镜定位过程,其与用于外观或真实尺寸模拟的试戴模式相关联,该眼镜定位过程用于估计所述虚拟眼镜的3D旋转矩阵、3D平移矢量、和全局与局部变形参数,以及眼镜腿与眼镜框的连接,以适于步骤100中计算得到的所述形态参数;-400、一个逼真渲染过程,所述逼真渲染过程与将所述真实用户脸部图像与在步骤200中定位的所述虚拟眼镜进行结合。2.根据权利要求1所述的方法,其中,步骤100还包括估计所述用户脸部的表情参数。3.根据权利要求1所述的方法,其中,步骤100还包括估计固有相机参数。4.根据权利要求1所述的方法,其中,步骤200还包括一个眼镜3D模型分析过程,该过程提供参数化、将眼镜分割成多个部分和网格校正。5.根据权利要求1所述的方法,其中,步骤200包括两次眼镜定位过程,其与用于外观或真实尺寸模拟的试戴模式相关联,所述两次眼镜定位过程用于估计所述虚拟眼镜的所述3D旋转矩阵、所述3D平移矢量、和所述全局与局部变形参数,以及眼镜腿与眼镜框的连接,以适于步骤100中计算得到的所述形态参数。6.根据权利要求1所述的方法,其中,所述方法还包括一个人脸跟踪算法的步骤300,所述人脸跟踪算法提供位置和旋转,并允许实时改进来自多个图像的人脸参数。7.根据权利要求1所述的方法,其中,步骤400包括估算不透明度校正和色调映射参数。8.根据权利要求1所述的方法,其中,所述方法包括:-使用一个平行处理流水线对图像采集、场景分析过程、和渲染进行去相关;-一个快速3D人脸姿态恢复过程;-使用一个头部运动模型和控制过滤器始终向所述渲染过程提供每一帧处的平滑的3D姿态。9.根据权利要求1所述的方法,其中,在步骤100的所述实时人脸分析过程中,使用脸部用户模型和与检测到的特征相对应的图像轮廓和3D语义点来对参数进行估计,所述参数包括...

【专利技术属性】
技术研发人员:阿里埃尔·库克鲁恩杰罗姆·盖纳尔希拉维·勒加洛克里斯托夫·德阿伊
申请(专利权)人:FITTINGBOX公司
类型:发明
国别省市:法国,FR

相关技术
    暂无相关专利
网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1