信息提取方法、装置及系统制造方法及图纸

本发明专利技术实施例公开了一种信息提取方法、装置及系统，涉及文档数据处理技术，用以改善用户查阅文档时的用户体验。一种信息提取方法，包括：通过摄像装置获取至少连续两帧图像，所述至少连续两帧图像中的每帧图像包含：当前阅读文档的图像和用户对所述当前阅读文档的图像中选定的感兴趣区域对应的图像进行的手势动作图像；对所述手势动作图像进行解析得到手势指令；根据解析出的手势指令对所述选定的感兴趣区域对应的图像进行显示。本发明专利技术实施例中的方案适用于文档等非电子文件的查阅过程中。

【技术实现步骤摘要】

本专利技术涉及文档数据处理技术，尤其涉及一种信息提取的方法、装置及系统。
技术介绍
用户在查阅文档的时候，并非文档中所有的内容对该用户来说都是有用信息；一 般情况下，某一用户只对其浏览过的文档中的部分内容感兴趣，因此也就需要从大量的文 档中提取出其感兴趣的部分数据和信息，并对提取出的内容进行处理进而重新编辑成一篇 新的文档。从纸质文档中提取感兴趣的部分内容并对其进行整理的过程一般有如下两种实 现方式其一，用户在阅读纸质文档时，首先将感兴趣的内容用笔圈点出来，然后手动将圈 中的内容录入到电脑中，以完成有用信息的提取并将新提取出的内容整理成一篇文档。其二，利用扫描仪等设备对包含有感兴趣内容的多篇纸质文档进行扫描，并保存 到电脑中；然后，再利用OCR (Optical Character Recognition，光学字符识别)识别等工 具对扫描进电脑的多篇文档中的信息进行识别，使其成为可编辑的内容；最后，从识别出的 内容中筛选出所需要的部分信息，并编辑出一篇新的文档。然而，在实现上述信息提取的过程中，专利技术人发现现有技术中至少存在如下问 题上述两种进行文档信息提取的实现方式都需要用户在完成了大量文档的阅读之 后，才能进行有用信息的提取；而一般用户在查阅文档获取有用信息的过程中，都是习惯于 按照文档的顺序一篇一篇地进行阅读、分析、信息提取等操作。也就是说，上述两种文档信 息提取的方法更接近于计算机模式，而非人类思维模式，因此很难为用户提供较好的用户 体验。
技术实现思路
本专利技术的实施例提供一种信息提取方法、装置及系统，能够改善用户查阅文档时 的用户体验。为达到上述目的，本专利技术的实施例采用如下技术方案一种信息提取方法，包括通过摄像装置获取至少连续两帧图像，所述至少连续两帧图像中的每帧图像包 含当前阅读文档的图像和用户对所述当前阅读文档的图像中选定的感兴趣区域对应的图 像进行的手势动作图像；对所述手势动作图像进行解析得到手势指令；根据解析出的手势指令对所述选定的感兴趣区域对应的图像进行显示。一种信息提取装置，包括获取单元，用于通过摄像装置获取至少连续两帧图像，所述至少连续两帧图像中的每帧图像包含当前阅读文档的图像和用户对所述当前阅读文档的图像中选定的感兴趣 区域对应的图像进行的手势动作图像；解析单元，用于所述手势动作图像进行解析得到手势指令；显示单元，用于根据解析出的手势指令对所述选定的感兴趣区域对应的图像进行显不。一种信息提取系统，包括信息提取装置、摄像装置和显示装置；其中，所述信息提取装置，用于通过所述摄像装置获取至少连续两帧图像，所述至少连 续两帧图像中的每帧图像包含当前阅读文档的图像和用户对所述当前阅读文档的图像中 选定的感兴趣区域对应的图像进行的手势动作图像；并对所述手势动作图像进行解析得到 手势指令；根据解析出的手势指令并利用所述显示装置对所述选定的感兴趣区域对应的图 像进行显示。本专利技术实施例提供的信息提取方法、装置及系统，能够在用户查阅文档的同时，利 用摄像装置来获取当前阅读的文档的多帧图像以及用户在阅读时进行的手势动作图像，并 将所述手势动作图像转换成对应的手势指令，并根据所述手势指令来完成对所述文档中感 兴趣区域的提取；在本专利技术的实施例中，对用户有用的信息提取的过程是在用户进行阅读 的同时完成的，无需等到用户将所有文档都通览过一遍之后再进行有用信息提取，因此本 专利技术实施例中提供的方案更贴近于人类的阅读习惯。与现有技术相比，本专利技术实施例提供 的信息提取方法、装置及系统，能够改善用户查阅文档时的用户体验。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例描述 中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些 实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附 图获得其他的附图。图1为本专利技术实施例提供的信息提取方法的流程框图2为本专利技术实施例一-中的信息提取方法的流程框图3为本专利技术实施例一-中对图像帧进行标定的实现过程流程图4为本专利技术实施例一-中对手势动作图像进行解析的实现过程流程图图5为本专利技术实施例一-中在显示区域进行的手势动作的实例图6为本专利技术实施例一-中通过手势动作实现图像保存和显示的流程图图7为本专利技术实施例一-中的显示区域的示意图8为本专利技术实施例一-中在非显示区域进行的手势动作的实例图9为本专利技术实施例一-中调用工具栏中的工具的实现过程流程图10为本专利技术实施例提供的信息提取装置的结构示意图11为本专利技术实施例:二中的信息提取装置的结构示意图12为本专利技术实施例提供的信息提取系统的结构示意图。具体实施例方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于 本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他 实施例，都属于本专利技术保护的范围。为了达到改善用户查阅文档时的用户体验的目的，本专利技术实施例中提供了一种信 息提取的方法；如图1所示，该信息提取方法，主要包括101、通过摄像装置获取至少连续两帧图像，所述至少连续两帧图像中的每帧图像 包含当前阅读文档的图像和用户对所述当前阅读文档的图像中选定的感兴趣区域对应的 图像进行的手势动作图像。102、对获取到的至少连续两帧图像中的所述手势动作图像进行解析得到手势指 令。所述手势指令可以是对所述图像中的某一区域进行选定、拖动或者缩放等；用户 所执行的不同手势动作对应着不同的手势指令，并通过所述手势指令来对所述图像中的某 一区域进行相应操作。103、根据解析出的手势指令对所述选定的感兴趣区域对应的图像进行显示。其中，对所述选定的感兴趣区域对应的图像(在以下实施例中，简称为已选定图 像)进行显示可以是但不限于是通过投影装置来进行显示；一般情况下，对已选定图像进行显示可具体为首先，将所述已选定图像保存到缓 存中，进而调用缓存中的需要显示的图像，即所述已选定图像进行显示。通过上述信息提取方法，能够在用户查阅文档的同时，利用摄像装置来获取当前 阅读的文档的多帧图像以及用户在阅读时进行的手势动作图像，并将所述手势动作图像转 换成对应的手势指令，并根据所述手势指令来完成对所述文档中感兴趣区域的提取；由于 对有用信息的提取过程是在用户进行阅读的同时完成的，无需等到用户将所有文档都通览 过一遍之后再进行有用信息提取，因此本专利技术实施例中提供的方案更贴近于人类的阅读习 惯。下面将通过具体的实例来对本专利技术实施例提供的信息提取方法进行详细描述。实施例一在本实施例中，以通过摄像装置，例如相机、摄像机等来获取用户当前所阅读的文 档内容，并以投影装置作为显示所提取内容的显示装置为例。如图2所示，本实施例中的信息提取方法，具体包括以下步骤201、在用户查阅文档时，通过摄像装置每间隔一定的时间(例如，ls、2s等)对用 户所查阅的文档进行拍照，获取连续N帧图像，其中N为不小于2的常量；在这N帧图像中 包含当前阅读的文档的图像以及当前用户针对所述文档进行的手势动作图像。为了使用户所执行的手势动作图像更易被所述摄像装置捕捉到，可以在用户手指 的指端设置特定的影像标记；其中一种简单易行的方本文档来自技高网...

【技术保护点】
一种信息提取方法，其特征在于，包括：通过摄像装置获取至少连续两帧图像，所述至少连续两帧图像中的每帧图像包含：当前阅读文档的图像和用户对所述当前阅读文档的图像中选定的感兴趣区域对应的图像进行的手势动作图像；对所述手势动作图像进行解析得到手势指令；根据解析出的手势指令对所述选定的感兴趣区域对应的图像进行显示。

【技术特征摘要】

【专利技术属性】
技术研发人员：马雪明，
申请(专利权)人：汉王科技股份有限公司，
类型：发明
国别省市：11[中国|北京]