跟踪手部/身体姿势制造技术

描述了跟踪来自图像数据的手部或身体姿势，以例如控制游戏系统、自然用户接口或用于增强现实。在各种示例中，预测引擎取得图像数据的单个帧，并且预测图像数据中所描绘的手部或身体的姿势上的分布。在示例中，随机优化器具有其迭代地提炼的手部或身体的候选姿势池，并且来自所预测的分布的样本用于替换池中的一些候选姿势。在一些示例中，来自池的最佳候选姿势被选择作为当前跟踪的姿势并且选择过程使用手部或身体的3D模型。

【技术实现步骤摘要】
【国外来华专利技术】跟踪手部/身体姿势
技术介绍
来自图像数据的实时铰接式手动跟踪具有打开新人机交互场景的潜能。然而，人手的灵活性和自由度使得完全地铰接式手动的视觉跟踪更具挑战性。这还适于实时铰接式身体跟踪。在此所描述的实施例不限于解决已知手部/身体姿势跟踪器的缺点中的任何或全部的实现。
技术实现思路
以下呈现本公开的简化概要以便向读者提供基本理解。该概要不是本公开的广泛概述并且不标识关键/重要元素或描绘说明书的范围。其唯一目的是以简化形式将在此所公开的概念的选择呈现为稍后呈现的更详细描述的前序。描述了跟踪来自图像数据的手部或身体姿势，以例如控制游戏系统、自然用户接口或用于增强现实。在各种示例中，预测引擎取得图像数据的单个帧，并且预测图像数据中所描绘的手部或身体的姿势上的分布。在示例中，随机优化器具有其迭代地提炼的手部或身体的候选姿势池，并且来自所预测的分布的样本用于替换池中的一些候选姿势。在一些示例中，来自池的最佳候选姿势被选择作为当前跟踪的姿势并且选择过程使用手部或身体的3D模型。通过参考结合附图考虑的以下详细描述，由于许多伴随特征将变得更好理解，因此其将被更容易地理解。附图说明从根据附图阅读的以下详细描述，本文档来自技高网...

【技术保护点】
一种跟踪手部或身体的姿势的方法，包括：接收描绘所述手部或所述身体的图像的流；将所述图像中的一副图像的至少一部分输入到预测引擎以获得所述手部或所述身体的姿势上的分布；访问所述手部或所述身体的候选姿势池并且使用随机优化器迭代地提炼所述候选姿势；以及利用来自所述手部或所述身体的姿势上的所述分布的样本来周期性地替换所述池中的所述候选姿势的子集。

【技术特征摘要】
【国外来华专利技术】2014.09.23 US 14/494,4311.一种跟踪手部或身体的姿势的方法，包括：接收描绘所述手部或所述身体的图像的流；将所述图像中的一副图像的至少一部分输入到预测引擎以获得所述手部或所述身体的姿势上的分布；访问所述手部或所述身体的候选姿势池并且使用随机优化器迭代地提炼所述候选姿势；以及利用来自所述手部或所述身体的姿势上的所述分布的样本来周期性地替换所述池中的所述候选姿势的子集。2.根据权利要求1所述的方法，包括利用来自所述手部或所述身体的姿势上的所述分布的样本来初始化所述候选姿势池。3.根据权利要求1所述的方法，其中将所述图像中的一副图像的至少一部分输入到所述预测引擎包括：将所述图像中的一副图像的所述至少一部分输入到所述预测引擎的多个层。4.根据权利要求3所述的方法，包括将所述图像中的一副图像的所述至少一部分输入到所述预测引擎的、包括分类器的第一层，所述第一层被布置为计算所述姿势的全局旋转分类上的分布。5.根据权利要求1所述的方法，其中将所述图像中的一副图像的至少一部分输入到所述预测引擎包括：将所述图像中的一副图像的所述至少一部分输入到所述预测引擎的第一层，并且接收来自所述第一层的结果，并且将所述图像中的一副图像的所述至少一部分输入到所述预测引擎的第二层的一部分，所述第二层的所述一部分使用所述结果被选择。6.根据权利要求3所述的方法，包括将所述图像中的一副图像的所述至少一部分输入到所述预测引擎的、包括有区别的蕨类集成的第一层。7.根据权利要求1所述的方法，其中将所述图像中的一副图像的至少一部分输入到所述预测引擎包括：将所述图像中的一副图像的所述至...

【专利技术属性】
技术研发人员：J·D·J·朔顿，C·科斯金，J·J·泰勒，T·夏普，S·伊扎迪，A·W·菲兹吉邦，P·科利，D·P·罗伯特森，
申请(专利权)人：微软技术许可有限责任公司，
类型：发明
国别省市：美国,US