一种隐藏图像或视频中的对象的方法和相关的增强现实方法技术

本发明专利技术涉及一种从初始图像生成最终图像的图像生成方法，包括适合由个人佩戴的对象。所述方法包括以下步骤：a)检测初始图像中该对象的存在；b)在初始图像上叠加第一透明层，该第一透明层包括一个掩模，该掩模至少部分地覆盖初始图像上的该对象；c)修改该掩模的至少一部分的外观。特别地，本发明专利技术使得可以隐藏图像或视频中对象的全部或一部分。本发明专利技术还涉及旨在由在面部佩戴着一个视觉设备的个人使用的增强现实的方法，以及虚拟对象的试穿装置。

A Method of Hiding Objects in Image or Video and Related Augmented Reality Method

【技术实现步骤摘要】
【国外来华专利技术】一种隐藏图像或视频中的对象的方法和相关的增强现实方法
本专利技术属于图像处理和图像合成领域。更具体地，本专利技术涉及一种隐藏图像或视频中的对象的方法。本专利技术在增强现实领域中具有特定应用，用于在个人佩戴一副真实眼镜时试戴一副虚拟眼镜。
技术介绍
对于戴着一副矫正眼镜的人来说，在购买之前很难试戴一副新眼镜。实际上，新的框架在被试戴时，不包括任何光学校正，用户只能看到其视觉缺陷相应的精度。因此，例如对于一般的近视用户，该用户必须接近镜子的二十厘米内进行自我观察。因此其无法确定该新框架是否适合自己。在试戴一副太阳镜的情况下，这甚至更加复杂，其中着色镜片大大降低了亮度，进一步降低了用户的可视性。在现有技术中，特别是在人脸识别的背景下，已知用于从图像中除去一副眼镜的技术。这些技术基于人脸识别，特别是允许检测眼睛位置的特征点。这种检测结合了对戴着一副眼镜和不戴眼镜的面部之间的差异学习，允许根据佩戴着一副眼镜的个人图像重建一个未佩戴眼镜的个人图像。该技术的主要缺点在于，其通常根据相同视角，通常是从正面的个体图像系统地重建面部。此技术仅在两个维度中起作用，即仅考虑图像上面部的2D包络面的内部。换句本文档来自技高网...

【技术保护点】
1.一种从初始图像(220)生成最终图像(210)的图像生成方法(300)，包括适于由个人(120；520；820；920)佩戴的对象(111)，其特征在于，其包括以下步骤：a)检测(310)所述初始图像中所述对象的存在；a’)制作(360)至少部分覆盖所述初始图像上所述对象的一个掩模；b)在所述初始图像上叠加第一透明层，该第一透明层包括至少部分覆盖所述初始图像上所述对象的所述掩模；c)修改(370)所述掩模的至少一部分的外观。

【技术特征摘要】
【国外来华专利技术】2016.06.30 FR 1656154;2016.10.05 US 15/285,5541.一种从初始图像(220)生成最终图像(210)的图像生成方法(300)，包括适于由个人(120；520；820；920)佩戴的对象(111)，其特征在于，其包括以下步骤：a)检测(310)所述初始图像中所述对象的存在；a’)制作(360)至少部分覆盖所述初始图像上所述对象的一个掩模；b)在所述初始图像上叠加第一透明层，该第一透明层包括至少部分覆盖所述初始图像上所述对象的所述掩模；c)修改(370)所述掩模的至少一部分的外观。2.根据权利要求1所述的图像生成方法，其特征在于，所述修改所述掩模的外观的步骤包括一个替换步骤，该步骤替换所述最终图像上的所述对象的部分或全部。3.根据权利要求1或2所述的图像生成方法，其特征在于，所述修改所述掩模的外观的步骤包括一个确定该对象的部分或全部结构的步骤，所述结构再现所述对象背景中的元素，以覆盖所述最终图像上的全部或部分对象。4.根据权利要求1至3中任一项所述的图像生成方法，其特征在于，所述掩模还覆盖所述对象投射阴影的全部或部分。5.根据权利要求1至4中任一项所述的图像生成方法，其特征在于，其包括以下步骤：d)在所述初始图像上的所述第一透明层上叠加第二透明层，所述第二透明层至少包括一个部分覆盖所述掩模的元素。6.根据权利要求1至5中任一项所述的图像生成方法，其特征在于，在步骤b)之前还包括以下步骤：-确定所述对象相对于所述初始图像采集装置的方向；-确定所述初始图像上所述对象的特征尺寸。7.根据权利要求6所述的图像生成方法，其特征在于，在步骤b)之前，还包括以下步骤：-制作所述对象的三维模型；-通过在所述第一覆透明上所述三维模型的几何投影制作所述掩模，该模型在所述第一透明层上具有与所述对象相同的方向和相同的特征尺寸。8.根据权利要求7所述的图像生成方法，其特征在于，根据所述对象的至少一个图像实施所述对象的模型的制作。9.根据权利要求1至8中任一项所述的图像生成方法，其特征在于，所述对象被佩戴在个人面部。10.根据权利要求9所述的图像生成方法，其特征在于，根据佩戴在个人面部的所述对象的至少一个图像实施所述对象模型的制作。11.根据权利要求9或10所述的图像生成方法，其特征在于，所述对象包括在所述面部两侧延伸的一个框架，以及组装到所述框架的至少一个镜片。12.根据权利要求11所述的图像生成方法，其特征在于，其还包括在先前建模并被存储在数据库中对所述框架进行识别步骤，根据被识别的框架模型实施所述掩模的制作。13.根据权利要求12所述的图像生成方法，其特征在于，通过生成与所述框架轮廓相匹配的支撑曲线来执行对所述框架的识别。14.根据权利要求12或13所述的图像生成方法，其特征在于，所述框架的识别基于以下标准中的至少一个：-所述框架的形状；-所述框架的颜色；-所述框架的结构；-所述框架上的标志。15.根据权利要求1至14中任一项所述的图像生成方法，其特征在于，还包括一个制作所述对象的环境描述的步骤。16.根据权利要求15所述的图像生成方法，其特征在于，所述掩模外观的修改步骤包括以下子步骤：-在叠加在所述第一透明层上的中间透明层上对所述环境描述几何投影；-根据所述掩模像素附近的中间透明层的至少一个像素的颜色，确定所述掩模像素的新颜色。17.根据权利要求16所述的图像生成方法，其特征在于，所述新颜色的确定实施了“泊松图像编辑(Poissonimageediting)”类型的图像编辑方法。18.根据权利要求15或17所述的图像生成方法，其特征在于，还包括一个环境中面部存在的检测步骤，并且环境描述包括检测到的面部模型，在该面部模型上应用面部纹理。19.根据权利要求18所述的图像生成方法，其特征在于，还包括一个确定所述面部相对于所述采集装置的方向的步骤，其中基本上根据先前确定的方向设置所述面部模型。20.根据权利要求18或19所述的图像生成方法，其特征在于，根据在第一透明层上所述面部模型的几何投影制作所述掩模，所述掩模至少部分地覆盖面部佩戴的所述对象。21.根据权利要求18至20中任一项所述的图像生成方法，其特征在于，其还包括以下步骤：-至少分析照亮个人面部的一个光源；-全部或部分面部模型的比色变换。22.根据权利要求20或21所述的图像生成方法，其特征在于，所述面部纹理上像素的颜色通过像素附近补丁颜色的一种图像修补方法来确定。23.根据权利要求22所述的图像生成方法，其特征在于，所述补丁...

【专利技术属性】
技术研发人员：阿里埃尔·库克鲁恩，杰罗姆·盖纳尔，
申请(专利权)人：试戴盒子公司，
类型：发明
国别省市：法国,FR