生成用于训练非接触模型的生理逼真化身以恢复生理特性制造技术

提供了涉及生成包含生理逼真化身的视频序列的系统和方法。在示例中，针对化身的反照率被接收，与反照率相关联的次表面皮肤颜色基于与生理特性相关联的生理数据而被修改，以及化身基于反照率和经修改的次表面皮肤颜色而被渲染。然后，渲染的化身可以在视频的帧中被合成。在一些示例中，包含合成的化身的视频可被用于训练机器学习模型以检测生理特性。机器学习模型可以接收多个视频片段，其中视频片段中的一个或多个视频片段包含用生理特性生成的合成生理逼真化身。机器学习模型可以使用多个视频片段来训练。经训练的模型可以被提供给请求实体。请求实体。请求实体。

【技术实现步骤摘要】
【国外来华专利技术】生成用于训练非接触模型的生理逼真化身以恢复生理特性

技术介绍

[0001]收集高质量的生理数据面临诸多挑战。首先，招募和装备参与者通常是昂贵的，要求先进的技术专长，这严重限制了其潜在的数量。这对于基于成像的方法尤其正确，因为它们要求记录和存储视频内容。其次，已经被收集的训练数据集可能不包含在应用上下文中的运动、照明变化或外观的类型。因此，基于这些数据训练的模型可能是脆弱的，不能很好地概括。第三，数据可以揭示受试者的身份和/或敏感的健康信息。对于成像方法，由于大多数视频记录的数据集都包括一些或所有帧中的受试者面部，这一事实加剧了这种情况。正是关于这些和其他一般考虑，本文所公开的方面被做出。此外，尽管相对具体的问题可以被讨论，但应当理解，这些示例不应局限于解决
技术介绍
或本公开的其他地方所标识的具体问题。

技术实现思路

[0002]根据本公开的示例，合成数据可用于训练生理传感系统，从而避开与招募和装备参与者、包含各种类型的运动、照明变化或外观的有限训练数据以及身份保护相关联的挑战。一旦计算机图形管道就位，合成数据的生成比录制视频更具可扩展性，因为计算相对便宜，本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种用于生成包含生理逼真化身的视频序列的方法，所述方法包括：接收针对化身的反照率；基于与生理特性相关联的生理数据修改与所述反照率相关联的次表面皮肤颜色；基于所述反照率和经修改的所述次表面皮肤颜色渲染化身；以及合成视频的帧，所述视频的帧包含所述化身。2.根据权利要求1所述的方法，其中所述生理数据随时间变化，所述方法还包括：在第一时间基于所述生理数据修改与所述反照率相关联的所述次表面皮肤颜色；在所述第一时间基于所述反照率和与所述生理数据相关联的经修改的所述次表面皮肤颜色渲染所述化身；合成视频的第一帧，所述视频的第一帧包含在所述第一时间基于所述反照率和与所述生理数据相关联的经修改的所述次表面皮肤颜色而被渲染的所述化身；在第二时间基于所述生理数据修改与所述反照率相关联的所述次表面皮肤颜色；在所述第二时间基于所述反照率和与所述生理数据相关联的经修改的所述次表面皮肤颜色渲染所述化身；以及合成视频的第二帧，所述视频的第二帧包含在所述第二时间基于所述反照率和与所述生理数据相关联的经修改的所述次表面皮肤颜色而被渲染的所述化身。3.根据权利要求1所述的方法，还包括：用特定于所述生理数据的加权因子修改所述生理数据；以及用经修改的所述生理数据修改与所述反照率相关联的所述次表面皮肤。4.根据权利要求3所述的方法，还包括基于特定于所述生理数据的所述加权因子改变针对所述多个颜色通道中的一个或多个颜色通道的次表面半径。5.根据权利要求1所述的方法，还包括用包含所述化身的多个合成的帧训练机器学习模型。6.根据权利要求5所述的方法，还包括用包含人类受试者的多个视频训...

【专利技术属性】
技术研发人员：D，
申请(专利权)人：微软技术许可有限责任公司，
类型：发明
国别省市：