全景图像检索及展示方法技术

一种全景图像检索及展示方法，其特征在于，主要包括索引建立步骤（A）和图像查询步骤（B），索引建立步骤（A）提取图库中的图像文件的特征，生成索引文件；用户（C）向图像查询步骤（B）上传要检索的图像，由图像查询步骤（B）提取要检索图像的特征，将用户（C）上传的图像与索引建立步骤（A）的索引文件的特征进行相似度匹配，并向用户（C）提供匹配结果列表。本发明专利技术的优点是：系统设计并实现了全景图像检索功能，旨在让用户上传普通图片，系统会返回与之对应以及相似的全景图信息并全景展示，让用户快速的定位到对应的场景，提高用户体验，使用非常方便。

Panoramic image retrieval and display method

A panoramic image retrieval and display method, which is characterized in that includes the steps of establishing the index (A) and image query steps (B), indexing steps (A) features of image file extraction in the atlas of the generated index file; the user (C) to image query steps (B) to upload image retrieval and by the image query steps (B) to extract features of the image retrieval, the user (C) procedure to establish the image and upload index (A) by matching feature index file, and to the user (C) provides a list of matching results. The invention has the advantages that the system design and Realization of the retrieval function of the panoramic image, designed to allow users to upload the common picture, the system will return the corresponding and similar panorama information and panoramic display, allowing users to quickly locate the corresponding scene, improve the user experience, is very convenient to use.

【技术实现步骤摘要】
全景图像检索及展示方法
本专利技术涉及一种全景图像检索及展示方法，主要用于数字文化多维展现，以及用于各行业环境、产品等的多维全景展示。本专利技术面对公众对公共文化服务内容形式多样、互动参与的需求，通过WebGIS，Web3D及虚拟现实等技术的综合运用，可用于研发革命老区特色数字文化多维互动体验应用服务系统，提供展馆3D展示、遗址旧居全景漫游等多种文化传播方式，借助手机、电脑等多种网络终端实现文化互动体验，从而达到线上宣传，线下体验文化内容的目的。
技术介绍
当前处于互联网盛兴的时代，普通的文字、二维照片信息已经远远不能满足用户视觉体验多样化以及信息传播丰富化的需求，3D、全景漫游技术凭借着超强的真实感和丰富的信息量，现已广泛应用于各行各业，为他们提供更全面、更丰富、更完美的数字化展示方案。很多行业比如房产、酒店、市政建筑、高校校园、汽车内景等都在做一些产品全方位展示的工作，包括淘宝、京东等知名的电子商务企业，也都在通过3D等相关技术，直观的向用户展示产品信息。同样的，像红色展馆、革命遗址旧居这种具有教育意义的场所，如何能让用户以更饱满的视觉效果真实感受到场所信息，从而达到线上宣传，线下体验文化内容的目的，显得尤为重要。对于文化场所管理者，一个全景展示功能饱满、内容丰富且交互性良好的方法，可以很好地帮助做好宣传工作，吸引用户。有时，用户对于一些特定文化图片感兴趣，但是不知道属于展馆或遗址中具体哪个观赏点，只能按照系统中特定的路线寻找，交互性很差，效率很低。在技术上，传统的图像检索以文字为主，首先使用文字标题对图像进行描述，然后将图片和描述按照对应关系存入数据库，最后检索的是指是对文字的检索，通过检索到的文字描述再对应到图片。这种检索方式需要人工对每一张图片添加描述，面对当前海量的全景图像资源，工作量将会非常庞大，显然已经不适合当前系统。
技术实现思路
本专利技术的目的是提供一种全景图像检索及展示方法，以解决现有技术存在的交互性很差、效率很低和使用不方便问题。本专利技术的技术方案是：一种全景图像检索及展示方法，其特征在于，主要包括索引建立步骤A和图像查询步骤B，索引建立步骤A提取图库中的图像文件的特征，生成索引文件；用户C向图像查询步骤B上传要检索的图像，由图像查询步骤B提取要检索图像的特征，将用户C上传的图像与索引建立步骤A的索引文件的特征进行相似度匹配，并向用户C提供匹配结果列表，对结果做全景展示。所述的索引建立步骤A和图像查询步骤B中的特征提取的具体方法包括：Step1：获取全景图像信息；Step2：遍历图像资源，将每张图片切割为40*40=1600个小图片块；Step3：对每一个图像块，通过CEDD工具，做RGB模型转HSV模型处理；Step4：通过10-bins模糊过滤，将得到的HSV信息输出到10维直方图；Step5：将Step4中的10维直方图以及S(饱和度)、V(亮度)分量输入到24-bins模糊过滤器中，获得小图块的24维直方图；Step6：将每一个小图像块做RGB模型转YIQ模型处理；Step7：再将每一个小方块四等分，对应到纹理信息提取中用到的数字过滤器结构，分别计算每一块的灰度值并归一化；Step8：将得到的每一块的纹理信息规划到6维边缘直方图中；Step9：将Step5和Step8中获得的两部分直方图结合，得到一个144维直方图，完成图像特征的提取工作。所述的索引建立步骤A的详细步骤如下：Step1:创建文档构建器DocumentBuilder(CEDD.class)对象，并将获得的图像特征信息融入到构建器中；Step2：利用文档构建器，将图像特征信息添加到构建的文档Document中；Step3：定义索引文档写入对象IndexWrite；Step4：最后，通过写入对象将索引文档Document按配置地址写到服务器中。所述的图像查询步骤B的详细步骤如下：Step1:获取用户通过拍照上传或网络获取的图像；Step2：使用extract()提取输入图片的特征值；Step3：根据提取的特征值，使用findSimilar()查找相似的图片；Step4:新建一个ImageSearchHits用于存储查找的结果；Step5：遍历ImageSearchHits，分别获取到对应或相似全景图的有关信息，包括得分、路径和名称信息。还包括下面给出Krpano框架实现全景漫游的具体步骤：Step1：浏览器加载html文件，该html文件做全景漫游的入口配置，包括设置全景漫游xml文件；Step2：html页面加载Krpanohtml5全景引擎；Step3：全景引擎加载对应全景图的主xml文件，该xml文件配置了由图像检索方法获取到的结果列表，读取全景图资源；Step4：将读取到的全景资源，添加到容器中以在浏览器展示。本专利技术的优点是：实现了全景图像检索功能，旨在让用户上传普通图片，并会返回与之对应以及相似的全景图信息并全景展示，让用户快速定位到对应的场景，提高用户体验，使用非常方便。附图说明图1是本专利技术的基本流程图；图2是本专利技术的索引创建流程图；图3是本专利技术的倒排索引对应关系图；图4是本专利技术的索引文件目录；图5是本专利技术的图像查询流程；图6是本专利技术的修改xml路径配置信息；图7是本专利技术的Krpano加载全景图过程示意图。具体实施方式参见图1，本专利技术一种全景图像检索及展示方法，其特征在于，主要包括索引建立步骤A和图像查询步骤B，索引建立步骤A提取图库中的图像文件的特征，生成索引文件；用户C向图像查询步骤B上传要检索的图像，由图像查询步骤B提取要检索图像的特征，将用户C上传的图像与索引建立步骤A的索引文件的特征进行相似度匹配，并向用户C提供匹配结果列表。本专利技术的运行系统（以下提到的系统即本专利技术及运行系统）主要是服务器和用户终端，图库设在服务器内，用户终端包括智能手机和各种PC。本专利技术主要包括3大功能：输入功能、检索功能、查询功能。输入功能主要是对全景图像资源库进行特征提取，索引建立，然后将索引文件保存。检索功能主要是对索引文件进行检索和过滤。最后查询功能主要是根据用户的反馈，检索出与用户上传的图片相似的全景图像。本专利技术流程为：首先系统依次提取图库中全景图像的特征，生成索引文件，并将索引文件保存到服务器中供检索使用。然后用户通过用户终端登录到服务器上传图像，提取用户提交图像的特征与索引文件进行相似性匹配，按照相似度值高低的顺序将图像返回给用户（如图1所示）。下面将详细介绍图本专利技术的核心流程，主要有图像特征提取、索引创建和图像查询。1、图像检索流程：（1）图像特征提取：本专利技术的核心包括两大功能，创建索引和查询。创建索引是为了对大量的图像资源提取图像特征，建立索引库保存，省去检索时每次都要遍历图库提取特征的繁琐操作，大大提升检索效率。查询操作同样需要提取图像特征分析并跟索引库中的图像资源信息比对，最后获取结果列表。由此看来，在整个图像检索过程中，图像特征提取起到了十分重要的作用，下面将讲述本专利技术的第一步——图像特征提取。说到图像，反映给我们最直观的就是颜色，也就是说颜色是最直观的视觉特征，技术上通过颜色直方图来表示一幅图像的颜色信息也是最直接最简单的常规方法。但是一幅图像仅仅通过颜色信息来检索，准确率是非常低的，必须将图像本文档来自技高网...

【技术保护点】
一种全景图像检索及展示方法，其特征在于，主要包括索引建立步骤A和图像查询步骤B，索引建立步骤A提取图库中的图像文件的特征，生成索引文件；用户C向图像查询步骤B上传要检索的图像，由图像查询步骤B提取要检索图像的特征，将用户C上传的图像与索引建立步骤A的索引文件的特征进行相似度匹配，并向用户C提供匹配结果列表，对结果做全景展示。

【技术特征摘要】
1.一种全景图像检索及展示方法，其特征在于，主要包括索引建立步骤A和图像查询步骤B，索引建立步骤A提取图库中的图像文件的特征，生成索引文件；用户C向图像查询步骤B上传要检索的图像，由图像查询步骤B提取要检索图像的特征，将用户C上传的图像与索引建立步骤A的索引文件的特征进行相似度匹配，并向用户C提供匹配结果列表，对结果做全景展示。2.根据权利要求1所述的全景图像检索及展示方法，其特征在于，所述的索引建立步骤A和图像查询步骤B中的特征提取的具体方法包括：Step1：获取全景图像信息；Step2：遍历图像资源，将每张图片切割为40*40=1600个小图片块；Step3：对每一个图像块，通过CEDD工具，做RGB模型转HSV模型处理；Step4：通过10-bins模糊过滤，将得到的HSV信息输出到10维直方图；Step5：将Step4中的10维直方图以及S(饱和度)、V(亮度)分量输入到24-bins模糊过滤器中，获得小图块的24维直方图；Step6：将每一个小图像块做RGB模型转YIQ模型处理；Step7：再将每一个小方块四等分，对应到纹理信息提取中用到的数字过滤器结构，分别计算每一块的灰度值并归一化；Step8：将得到的每一块的纹理信息规划到6维边缘直方图中；Step9：将Step5和Step8中获得的两部分直方图结合，得到一个144维直方图，完成图像特征的提取工作。3.根据权利要求2所述的全景图像检索及展示方法，其特征在于，所述的索引建立步骤A...

【专利技术属性】
技术研发人员：王金龙，赵振峰，于忠清，崔九梅，张丽，
申请(专利权)人：青岛鹏海软件有限公司，
类型：发明
国别省市：山东,37