基于条形码的增强现实方法、系统及移动终端技术方案

本发明专利技术公开了一种基于条形码的增强现实方法，将条形码技术与增强现实技术相结合，用条形码做索引进行样本图像及虚拟信息资源搜索，将复杂的图像搜索通过条形码、二维码及其衍生的编解码方式，简化为整形数据搜索或者字符串匹配，降低了系统是实现的难度，相应的，本发明专利技术还公开了一种基于条形码的增强现实系统及移动终端，极大提高了增强现实在海量样本图像数据下的应用的可行性。

【技术实现步骤摘要】
本专利技术涉及移动增强现实领域，尤其涉及一种基于条形码的增强现实方法、系统及移动终端。
技术介绍
近年来，条形码技术(包括一维条形码、二维条形码等)得到了广泛应用，同时增强现实(AR, Augumented Reality)技术也在一些应用中开始出现,增强现实是在真实环境呈现的场景中，借助与计算机图形技术和可视化技术，将虚拟信息实时“无缝”与之融合，利用虚拟信息对真实场景进行补充、增强，能可给予用户完全区别于传统PC平台的全新的感知体验和交互模式。现有条形码技术和增效现实技术一般都是单独使用的，单独使用条形码只能得到 条形码对应的网址，使用起来不够炫；而单独使用现有增强现实技术，系统的响应时间长，海量数据应用可行性低。当然也有少数公开方案将条形码与增强现实技术结合，如中国专利技术专利CN200910224378. 9(公布号CN102087743A)中公开了一种条形码扩充实境系统与方法，其技术方案中，条形码扩充实境方法主要是根据取得的条形码标志的空间信息，将虚拟信息堆栈到实境影像或另一背景图像中(参见权利要求16及说明书、段)，该方法虚拟信息的堆栈位置，主要取决于条形码标志的影像信息，如果本文档来自技高网...

【技术保护点】
一种基于条形码的增强现实方法，其特征在于，包括：用摄像机捕获当前场景图像，所述当前场景图像包括目标图像和条形码，所述条形码标志的内容为目标图像的索引值；解析所述条形码，并根据解析出的条形码内容在图像数据库中搜索与当前场景图像中的目标图像匹配的样本图像及虚拟信息资源URI；实时连续地对摄像机捕获的当前场景图像和样本图像进行跟踪配准，计算摄像机的姿态，得到单应性矩阵；根据所述单应性矩阵及虚拟信息资源URI，在摄像机捕获的当前场景图像中的目标图像位置上，渲染并输出显示所述与目标图像匹配的虚拟信息。

【技术特征摘要】
1.一种基于条形码的增强现实方法，其特征在于，包括 用摄像机捕获当前场景图像，所述当前场景图像包括目标图像和条形码，所述条形码标志的内容为目标图像的索引值； 解析所述条形码，并根据解析出的条形码内容在图像数据库中搜索与当前场景图像中的目标图像匹配的样本图像及虚拟信息资源URI ； 实时连续地对摄像机捕获的当前场景图像和样本图像进行跟踪配准，计算摄像机的姿态，得到单应性矩阵； 根据所述单应性矩阵及虚拟信息资源URI，在摄像机捕获的当前场景图像中的目标图像位置上，渲染并输出显示所述与目标图像匹配的虚拟信息。2.如权利要求I所述的方法，其特征在于，所述条形码包括一维条形码或二维条形码或彩色条形码。3.如权利要求2所述的方法，其特征在于，所述对摄像机捕获的当前场景图像和样本图像进行跟踪配准，计算摄像机的姿态，得到单应性矩阵，包括 对摄像机捕获的当前场景图像进行特征检测，提取出图像特征点，并对图像特征点进行特征描述，得到当前场景图像整幅图像的特征描述数据； 根据当前场景图像的特征描述数据及样本图像的特征描述数据，对摄像机捕获的当前场景图像和样本图像进行跟踪配准，计算摄像机的姿态，得到单应性矩阵。4.如权利要求I至3中任一项所述的方法，其特征在于，当所述与目标图像匹配的虚拟信息资源为视频资源时，还包括对所述视频资源进行音视频分离和解码，得到视频各帧图像序列和音频数据； 而所述根据所述单应性矩阵及虚拟信息资源URI，在摄像机捕获的当前场景图像中的目标图像位置上，渲染并输出显示所述与目标图像匹配的虚拟信息步骤，进一步包括 根据所述单应性矩阵，绘制出能将当前场景图像中的目标图像完全覆盖的矩形平面3D模型； 将所述视频各帧图像序列中的视频帧图像作为纹理逐帧映射到所述3D模型上，进行图形渲染； 将摄像机捕获的当前场景图像与渲染的3D模型融合输出显示，并同步输出所述音频数据。5.一种基于条形码的增强现实系统，其特征在于，包括摄像模块、图像特征提取模块、条形码解码模块、搜索模块、图像跟踪配准模块、图像渲染模块、虚实融合显示模块，其中 摄像模块，用于捕获当前场景图像，所述当前场景图像包括目标图像和条形码，所述...

【专利技术属性】
技术研发人员：柳寅秋，李薪宇，宋海涛，
申请(专利权)人：成都理想境界科技有限公司，
类型：发明
国别省市：