【技术实现步骤摘要】
本申请涉及医学成像领域，尤其是人体的建模。
技术介绍
1、真实地反映个体患者的体形和/或姿势的患者身体的二维(2d)或三维(3d)表征(例如，人体模型，诸如人体网格)可以用于各种医学应用中，包括患者定位、手术导航、统一的医疗记录分析等。例如，关于放疗和医学成像，成功常常取决于将患者放置和维持在期望位姿使得可以以精确且准确的方式执行治疗或扫描的能力。在这些情况下具有关于个体患者的身体特征(诸如患者的体形和/或姿势)的实时知识可带来许多益处，包括例如根据扫描或治疗方案更快且更准确地定位患者、更一致的结果等。在其他示例情况下，关于个体患者的身体特征和/或医疗环境中的移动的实时知识还可以提供用于生成自动调节医疗设备的执行参数(例如，病床的高度)以便适应患者的身体特征所需的控制信号的手段。
技术实现思路
1、用于生成患者身体的表征的常规方法和系统无法准确地表征关于患者的所有身体部分的患者体形和/或姿势。本文描述了用于基于人的视频序列生成和/或调节人的2d或3d表征的系统、方法和装置。系统、方法和/或装置可以利用一个或多个处理器，其被配置为获得描绘医疗环境中的人的位姿、姿势和/或移动的视频序列。处理器还可以被配置为至少基于来自视频序列的第一图像子集来确定人的第一二维(2d)或三维(3d)表征，其中，人的第一2d或3d表征可以表征医疗环境中的人的第一姿势或第一体形。处理器可以另外被配置为至少基于来自视频序列的第二图像子集来确定人的第二2d或3d表征，其中，人的第二2d或3d表征可以表征医疗环境中
2、在本公开的示例实施方式中，包括在人的第二2d或3d表征中的调节可以包括从人的第一2d或3d表征中缺失的人的身体部分的描绘。此外，人的第二2d或3d表征还可以基于人的第一2d或3d表征来确定。在本公开的示例实施方式中，本文所述的一个或多个处理器还可被配置为确定从人的第一2d或3d表征缺失的人的身体部分，并基于第二图像子集在人的第二2d或3d表征中重建该身体部分。一个或多个处理器还可以被配置为基于机器学习(ml)模型来确定人的第一2d或3d表征或人的第二2d或3d表征中的至少一个，ml模型可以使用卷积神经网络或循环神经网络来学习和/或实施。
3、在本公开的示例实施方式中，本文所述的一个或多个处理器还可以被配置为基于多个机器学习(ml)模型来确定人的第一2d或3d表征或人的第二2d或3d表征中的至少一个，其中，多个ml模型中的第一ml模型可以被训练用于基于视频序列来预测人的第一身体部分的表征，多个ml模型中的第二ml模型可以被训练用于基于视频序列来预测人的第二身体部分的表征，并且可以通过组合人的第一身体部分的表征和人的第二身体部分的表征来确定人的第一2d或3d表征或人的第二2d或3d表征中的至少一个。
4、在本公开的示例实施方式中，人的第一2d或3d表征或人的第二2d或3d表征中的至少一个包括人的3d网格模型。此外，人的3d网格模型可以包括与人的姿势相关联的多个第一参数以及与人的体形相关联的多个第二参数。在本公开的示例实施方式中，本文所述的一个或多个处理器可以从图像捕捉装置获得视频序列，该图像捕捉装置可以包括红绿蓝(rgb)图像传感器、深度传感器、红外传感器、雷达传感器或压力传感器中的至少一个。本文所述的一个或多个处理器还可以被配置为向接收装置提供人的第二2d或3d表征，以便调节医疗环境中的医疗装置。
本文档来自技高网...【技术保护点】
1.一种人体建模方法，包括：
2.根据权利要求1所述的方法，其中，包括在所述人的所述第二2D或3D表征中的所述调节包括从所述人的所述第一2D或3D表征中缺失的所述人的身体部分的描绘。
3.根据权利要求1所述的方法，其中，所述人的所述第二2D或3D表征还基于所述人的所述第一2D或3D表征来确定。
4.根据权利要求3所述的方法，其中，还基于所述人的所述第一2D或3D表征确定所述人的所述第二2D或3D表征包括确定从所述人的所述第一2D或3D表征缺失的所述人的身体部分，并且基于所述第二图像子集在所述人的所述第二2D或3D表征中重建所述身体部分。
5.根据权利要求1所述的方法，其中，所述人的所述第一2D或3D表征或者所述人的所述第二2D或3D表征中的至少一个是基于机器学习(ML)模型来确定的。
6.根据权利要求5所述的方法，其中，所述ML模型经由卷积神经网络或循环神经网络来实施。
7.根据权利要求1所述的方法，其中，所述人的所述第一2D或3D表征或者所述人的所述第二2D或3D表征中的至少一个基于多个机器学习(ML)模型
8.根据权利要求1所述的方法，其中，所述人的所述第一2D或3D表征或者所述人的所述第二2D或3D表征中的至少一个包括所述人的3D网格模型，所述网格模型包括与所述人的姿势相关联的多个第一参数，所述3D网格模型还包括与所述人的体形相关联的多个第二参数。
9.根据权利要求1所述的方法，其中，包括向接收装置提供所述人的所述第二2D或3D表征，以便调节所述医疗环境中的医疗装置。
10.一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行如权利要求1-9任意一项所述的方法。
...【技术特征摘要】
1.一种人体建模方法，包括：
2.根据权利要求1所述的方法，其中，包括在所述人的所述第二2d或3d表征中的所述调节包括从所述人的所述第一2d或3d表征中缺失的所述人的身体部分的描绘。
3.根据权利要求1所述的方法，其中，所述人的所述第二2d或3d表征还基于所述人的所述第一2d或3d表征来确定。
4.根据权利要求3所述的方法，其中，还基于所述人的所述第一2d或3d表征确定所述人的所述第二2d或3d表征包括确定从所述人的所述第一2d或3d表征缺失的所述人的身体部分，并且基于所述第二图像子集在所述人的所述第二2d或3d表征中重建所述身体部分。
5.根据权利要求1所述的方法，其中，所述人的所述第一2d或3d表征或者所述人的所述第二2d或3d表征中的至少一个是基于机器学习(ml)模型来确定的。
6.根据权利要求5所述的方法，其中，所述ml模型经由卷积神经网络或循环神经网络来实施。
7.根据权利要求1所述的方法，其中，所述人的所述第一2d或3d表征或者所述人的所述第二2...
【专利技术属性】
技术研发人员：斯里克里希纳·卡拉南，李润泽，郑梦，吴子彦，
申请(专利权)人：上海联影智能医疗科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。