一种基于临近异构分布式结构的移动增强现实交互方法技术

本发明专利技术公开了一种基于临近异构分布式结构的移动增强现实交互方法，属于图像处理和增强现实领域。本发明专利技术对移动端采集的视频流进行分级处理，一部分通过近距离无线传输给指令识别服务器，由指令识别服务器依次确定每帧的指令类型并回传给移动端，其中确定每帧的指令类型具体为：对每帧的肤色区域进行轮廓检测，将轮廓检测结果作为指令特征值，通过预先构建的指令分类器查询匹配的指令类型值；另一部分通过移动端本地的计算资源进行图像的三维注册和标定指令显示区域，将对应每帧指令类型值的虚拟物体叠加融合到每帧图像的指令显示区域，从而能够在移动端实时准确的完成AR虚拟场景与真实物体之间的交互。

Mobile augmented reality interaction method based on near heterogeneous distributed structure

The invention discloses a mobile augmented reality interaction method based on a near heterogeneous distributed structure, which belongs to the field of image processing and augmented reality. The invention of the mobile terminal video stream classification processing part, through the short distance wireless transmission to the server by the instruction instruction recognition, recognition server in order to determine each frame type of command and return to the mobile terminal, which identifies each frame type specific instruction: contour detection color regions in each frame, the contour the detection results as instruction characteristic value, through the instruction of classifier pre built query matching instruction type value; another part of computing resources through the mobile terminal local image registration and calibration instructions display area, the corresponding overlaying virtual objects in each frame type instruction value into each frame image instruction display area, thereby in the mobile terminal to complete real-time interaction between AR virtual scene and real objects.

【技术实现步骤摘要】
一种基于临近异构分布式结构的移动增强现实交互方法
本专利技术属于图像处理和增强现实
，具体涉及一种基于临近异构分布式结构的移动增强现实交互方法。
技术介绍
增强现实技术的应用场景非常广泛，针对增强现实的技术引擎技术也在突飞猛进，比如AR(AugmentedRealit)。同时鉴于复杂的应用场景，良好的人机交互也是必不可少的一部分，AR的应用场景本身已经极为复杂，在复杂场景中对模型的标定已经有很繁重的计算量，同时要在复杂场景中提取指令像素并进行指令匹配已经是捉襟见肘。在视觉方面，基于开源计算机视觉库OpenCV(OpenSourceComputerVisionLibrary)的手势识别技术也在突飞猛进，然而性能和效率往往不能兼得，每一种识别算法都存在比较强的环境依赖性，可靠性不能够得到保证，如何协调好各种算法的优点，也是当今的一大难题。现在的增强现实技术都是在一个终端同时实现特征提取、模板匹配以及图像融合。即各种运算通过单个CPU和GPU进行，运算量极大，移动设备资源根本无法完全兼顾特征提取和模板匹配。这就给移动端的增强现实显示提供了阻力。
技术实现思路
本专利技术所要解决的技术问题本文档来自技高网...

【技术保护点】
一种基于临近异构分布式结构的移动增强现实交互方法，其特征在于，包括下列步骤：移动终端将采集的视频流以切片的方式存储到本地，并将采集的视频流发送给一个临近异构识别处理装置；移动终端执行步骤A1～A3：步骤A1：根据公式

【技术特征摘要】
1.一种基于临近异构分布式结构的移动增强现实交互方法，其特征在于，包括下列步骤：移动终端将采集的视频流以切片的方式存储到本地，并将采集的视频流发送给一个临近异构识别处理装置；移动终端执行步骤A1～A3：步骤A1：根据公式得到屏幕坐标其中C、R分别表示移动终端的摄像装置的内参矩阵、外参旋转矩阵，t表示平移向量，X表示世界坐标；步骤A2：对视频流的帧图像进行二值化处理，再对各二值图像进行连通域分析，将连通域中的四边行区域作为候选区域，将每一个候选区域与本地预置的目标对象进行图像匹配，将与目标对象匹配的候选区域作为每帧的标识区域；若标识区域不是矩形，则基于屏幕坐标对其进行坐标变换，得到矩形的标识区域。临近异构...

【专利技术属性】
技术研发人员：刘家隆，于鸿洋，
申请(专利权)人：电子科技大学，
类型：发明
国别省市：四川,51