一种基于纤维丛理论的物体运动的视觉感知方法技术

本发明专利技术是一种基于纤维丛理论的物体运动的视觉感知方法，旨在说明如何通过视觉的方法感知物体做了何种运动，更进一步的描述清楚物体运动的模型是什么，以及每一种运动的特征是什么，如果把物体看成一个流形，那么直观上来看，这个流形物体，嵌入在了欧氏空间内，这个流形可以看成是物体的位形空间元素，流形上承载了物体的形状纹理、色彩、材质等信息，可以执行物体的视觉识别，另外，物体上每点的运动信息则是由流形上相应点的纤维空间承载，由此，代表整个流形与纤维的纤维丛则携带了物体整体的运动信息，在纤维丛上可以建立物体的运动模型并且计算其运动特征，这很自然地成为一种物体运动的视觉感知方法。

A visual perception method for object motion based on the theory of fiber bundles

The present invention relates to a method of visual perception of moving objects based on the theory of fiber bundles, in order to explain how to do what movement through the visual perception of object method, further describe clearly what is the motion of the object model, and what characteristics of each kind of sport is, if the object as a manifold, then on this view, manifold objects, embedded in Euclidean space, this manifold can be regarded as the configuration space element object, manifold bearing object shape texture, color and material information, visual recognition, objects can be performed in addition, object motion information of each point is carried by the corresponding point the fiber space manifold which, on behalf of the manifold and the fiber fiber bundle carries the movement information of objects in the whole, fiber bundles can be established on the movement of objects Model and calculate its motion characteristics, which naturally become a visual perception method of object motion.

【技术实现步骤摘要】
一种基于纤维丛理论的物体运动的视觉感知方法
本专利技术涉及人工智能、机器视觉等技术概念，特别是手势识别方面，如果通过机器视觉能对手的运动精确建模，那么势必会对手势识别应用带来颠覆性的发展，进而推动一般性的物体运动的视觉感知技术的发展。根据分析力学、Lagrange拉格朗日函数、Hamilton哈密顿函数、流形、纤维丛理论的结合，给“物体运动的视觉感知”这一方向带来新的思考。
技术介绍
随着近些年工业机器人的发展，带动了服务机器人行业的逐渐掘起，同时从2014年开始的智能硬件领域也开始突起，根据国际机器人联盟的统计，2015年服务机器人销售额将达85亿美元，并且保持较高的20％～30％增长率，在智能硬件领域，据艾瑞研究，2014年全球智能硬件装机量达到60亿台，预计2017年将超过140亿台。在市场高速发展的背后，问题同样明显，一方面市场的潜力还远未挖掘出来，另一方面，机器人及智能硬件进入服务行业也存在着一些技术难点。物体的视觉识别方面，虽是一大难点，但也有些技术性尝试往这方面攻关，例如专利《一种基于三维栅格地图的物体整体识别方法》与《一种基于三维栅格地图的环境特征的相似性度量方法》中，提到一类方法如何从“形状”、“颜色”、“材质”等方面来对物体进行识别。这里我们要解决的是：物体识别之后，如何所获取物体的运动信息，以及这些运动信息是如何表示与计算的。专利技术目的本专利技术的主要目的就是解决视觉是如何感知物体的运动信息的，物体的运动信息如何表示、存储与计算。技术方案本专利技术的目的是这样实现的：通过相关设备及算法，例如激光雷达、CCD、CMOS、点云配准算法、点云降噪算法等，持续获取实际环境中物体的点云信息，根据序列化的点云信息，来分析物体的运动信息，后续处理步骤如下：(1)通过环境或物体的点云数据，计算出环境或物体相应的全局性或局部性特征张量及特征谱值。(2)根据相邻两帧观测的点云数据及其特征，通过匹配与配准，找到所有特征位置的前后移动向量场；(3)特征位置可以看成物体的位形在流形上的表示，移动向量看成是流形上相应位置的纤维，整体上纤维丛承载了物体的整个运动空间；(4)逐维计算移动向量在流形上的分布特征，最后得出一个与移动向量同维的特征谱向量，其唯一代表了这个运动信息。本专利技术所使用的系统组成如下：采集系统、视觉特征系统、运动感知系统。这三个系统是按照功能设置的软件系统，各子系统具体功能如下：*采集系统：持续地以一定的帧率采集视野内的环境及物体信息，*视觉特征系统：接收采集系统的数据并计算每帧信息的视觉特征，*运动感知系统：匹配帧间的视觉特征并提取运动信息、计算运动特征。附图说明：图1是本专利技术方法所用系统组成图图2是挥手的序列帧图3是帧间物体的配准图4是帧间物体运动信息的提取具体实施方式下面结合附图，说明本专利技术的实施方式。本专利技术方法所用的系统整体结构可参考附图1，它有五个子系统组成，具体包含如下步骤：第一步在采集系统中，通过相关设备传感器采集周围环境或物体的点云信息，通过降噪、滤波等方法优化采集到的信息数据，并对外输出环境或物体的点云数据。第二步在视觉特征系统中，接收采集系统传递过来的点云数据，做视觉感知计算，获取环境或物体的全局性或局部性特征张量及特征谱值，这里不局限于某一个视觉感知算法，这里我们可以使用专利《一种基于三维栅格地图的环境特征表示与识别的方法》中所述的算法来加以计算处理点云数据，如图2所示，实际手臂挥手的序列帖频。第三步在运动感知系统中，根据视觉特征系统中输出的特征张量与特征谱，对帧间的特征数据进行匹配与配准，从而提取出运动物体的移动向量场，如图3所示，通过相关的匹配与配准算法，提取出整条手臂上的移动向量场，其中图上只显示了手臂上5个点的移动向量，需要说明的是，这里只是代表，在实际运算中，会匹配出很多的点。第四步在运动感知系统中，逐维分析移动向量在物体流形上的分布特征，这里可以共享视觉特征系统中的一些中间计算结果，在视觉特征系统中，计算物体的形状特征时，用的是物体的形状曲率或与曲率相关的数据，在这里我们可以用移动向量的数据代替之，这样逐维分析后，就可以得出与移动向量同维的一个特征谱向量。在图4中，给出了物体运动部分的移动向量场，我们分别分析所有运动点在x维度、y维度、z维度的分布特征，最后得出此帧间运动的特征向量谱T.P＝[0.6720,-0.6751,-0.6535]，不同的运动状态之间的比较就转化为不同特征向量谱之间的比较，也就是说，可以通过识别特征向量谱来达到运动感知的目的。第五步在运动感知系统中，特征谱向量代表了帧间物体的运动信息，不同的特征谱向量表示了不同的运动形式；运动感知系统输出特征谱向量，供外部接口使用。综上，我们可以看到，通过本专利技术方法，成功地解决了物体运动信息的建模、表示与计算，本专利技术的方法可以感知所有刚体或非刚体物体的运动，在视觉方面，除去物体形状识别外，对物体的运动识别打下坚实的理论基础。本文档来自技高网...

【技术保护点】
一种基于纤维丛理论的物体运动的视觉感知方法，该方法是把物体看成一个流形，并持续分析空间环境中的物体，以得到物体的运动信息，基于时间序列的物体运动，可以等价为一个流形间的单参微分同胚映射φt:M→M′，物体的运动特征可以视为此单参微分同胚映射的特征，其实现按如下步骤给出：(1)通过相关的设备及算法，如激光雷达、CCD、CMOS、视觉传感器或点云配准算法、点云降噪算法等，获取实际物体及背景环境的点云数据；(2)在点云数据中，通过计算全局性或局部性特征，找出感兴趣的物体；(3)在相邻帧中，通过物体的特征匹配，计算物体的运动信息，得出物体上各部的运动广义速度或广义动量；(4)根据广义速度或广义动量，在物体流形的切丛或余切丛内，计算物体的运动特征；(5)同一个物体，不同的运动特征代表不同的运动状态。

【技术特征摘要】
1.一种基于纤维丛理论的物体运动的视觉感知方法，该方法是把物体看成一个流形，并持续分析空间环境中的物体，以得到物体的运动信息，基于时间序列的物体运动，可以等价为一个流形间的单参微分同胚映射φt:M→M′，物体的运动特征可以视为此单参微分同胚映射的特征，其实现按如下步骤给出：(1)通过相关的设备及算法，如激光雷达、CCD、CMOS、视觉传感器或点云配准算法、点云降噪算法等，获取实际物体及背景环境的点云数据；(2)在点云数据中，通过计算全局性或局部性特征，找出感兴趣的物体；(3)在相邻帧中，通过物体的特征匹配，计算物体的运动信息，得出物体上各部的运动广义速度或广义动量；(4)根据广义速度或广义动量，在物体流形的切丛或余切丛内，计算物体的运动特征；(5)同一个物体，不同的运动特征代表不同的运动状态。2.如权利要求1所述的一种基于纤维丛理论的物体运动的视觉感知方法，其特征在于，物体...

【专利技术属性】
技术研发人员：王红军，
申请(专利权)人：王红军，
类型：发明
国别省市：广东,44