基于图像框选识别与自动录入的方法、系统、终端及介质技术方案

本发明专利技术公开了一种基于图像框选识别与自动录入的方法，包括：获取用户对键盘的操作指令；判断操作指令与预设的截图识别快捷键是否相同；若是，则保存当前桌面顶层活动窗口信息，进行屏幕拷贝得到屏幕拷贝图片，将屏幕拷贝图片显示在桌面顶层，获取用户对屏幕拷贝图片进行区域截图操作；对截图图片进行文字识别，将当前桌面顶层活动窗口和进程均切换至用户按下快捷键之前的桌面进程窗口；将文字识别结果复制到操作系统剪切板，模拟键盘发起粘贴操作将文字识别结果自动录入到截屏前的活动窗口中的输入框。通过快捷键框选图像及对图像中的文字进行识别，将文字识别结果自动录入到目标输入框中，用户使用更加方便，操作步骤简化，提高用户的工作效率。高用户的工作效率。高用户的工作效率。

【技术实现步骤摘要】
基于图像框选识别与自动录入的方法、系统、终端及介质


[0001]本专利技术涉及图像识别
，具体涉及一种基于图像框选识别与自动录入的方法、系统、终端及介质。

技术介绍

[0002]图像识别技术日趋完善，但是在实际应用过程中却面临很多不便。常规应用模式通常采用定制开发或者采用通用识别后将识别结果手工粘贴两种方式。采用通用识别通常是选择文件或框选需要识别的区域通过图像文字识别后将识别结果展示到识别程序识别结果区域，或将识别结果复制到操作系统剪切板；实际应用场景中再将识别结果拷贝到需要录入的地方，这样操作繁琐，导致工作效率低。

技术实现思路

[0003]针对现有技术中的缺陷，本专利技术提供的一种基于图像框选识别与自动录入的方法、系统、终端及介质，通过快捷键框选图像，并对图像中的文字进行识别，将文字识别结果自动录入到目标输入框中，操作步骤简化，提高了在实际应用过程中的工作效率。
[0004]第一方面，本专利技术实施例提供的一种基于图像框选识别与自动录入的方法，包括：
[0005]获取用户对键盘的操作指令；
[0006]判断所述操作指令与预设的截图识别快捷键是否相同；
[0007]若否，则不执行操作；
[0008]若是，则保存当前桌面顶层活动窗口信息，并进行屏幕拷贝得到屏幕拷贝图片，将所述屏幕拷贝图片显示在桌面顶层供用户框选识别区域，获取用户对屏幕拷贝图片进行区域截图操作，得到截图图片；
[0009]对所述截图图片进行文字识别，得到文字识别结果，并隐藏屏幕拷贝图片展示窗口，将当前桌面顶层活动窗口和进程均切换至用户按下快捷键之前的桌面进程窗口；
[0010]获取文字识别结果，并将文字识别结果复制到操作系统剪切板，模拟键盘发起粘贴操作将文字识别结果自动录入到截屏前的活动窗口中的输入框。
[0011]第二方面，本专利技术实施例提供的一种基于图像框选识别与自动录入的系统，包括：指令获取模块、判断模块、截图模块、文字识别模块和录入模块，
[0012]所述指令获取模块用于获取用户对键盘的操作指令；
[0013]所述判断模块用于判断操作指令与预设的截图识别快捷键是否相同；
[0014]所述截图模块用于操作指令与预设的截图识别快捷键相同时，保存当前桌面顶层活动窗口信息，并进行屏幕拷贝得到屏幕拷贝图片，将所述屏幕拷贝图片显示在桌面顶层供用户框选识别区域，获取用户对屏幕拷贝图片进行区域截图操作，得到截图图片；
[0015]所述文字识别模块对所述截图图片进行文字识别，得到文字识别结果，并隐藏屏幕拷贝图片展示窗口，将当前桌面顶层活动窗口和进程均切换至用户按下快捷键之前的桌面进程窗口；
[0016]所述自动录入模块用于获取文字识别结果，并将文字识别结果复制到操作系统剪切板，模拟键盘发起粘贴操作将文字识别结果自动录入到截屏前的活动窗口中的输入框。
[0017]第三方面，本专利技术实施例提供的一种智能终端，包括处理器、输入设备、输出设备和存储器，所述处理器分别与输入设备、输出设备和存储器连接，所述存储器用于存储计算机程序，所述计算机程序包括程序指令，所述处理器被配置用于调用所述程序指令，执行上述实施例描述的方法。
[0018]第四方面，本专利技术实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时使所述处理器执行上述实施例描述的方法。
[0019]本专利技术的有益效果：
[0020]本专利技术实施例提供的一种基于图像框选识别与自动录入的方法、系统、终端及介质，通过快捷键框选图像，并对图像中的文字进行识别，将文字识别结果自动录入到目标输入框中，无需用户手动复制粘贴，用户使用更加方便，操作步骤简化，提高了用户在实际应用过程中的工作效率。
附图说明
[0021]为了更清楚地说明本专利技术具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍。在所有附图中，类似的元件或部分一般由类似的附图标记标识。附图中，各元件或部分并不一定按照实际的比例绘制。
[0022]图1示出了本专利技术第一实施例所提供的一种基于图像框选识别与自动录入的方法的流程示意图；
[0023]图2示出了本专利技术第一实施例的示例应用场景图；
[0024]图3示出了本专利技术另一实施例提供的一种基于图像框选识别与自动录入的系统的结构示意图；
[0025]图4示出了本专利技术另一实施例提供的一种智能终端的结构示意图。
具体实施方式
[0026]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0027]应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
[0028]还应当理解，在此本专利技术说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本专利技术。如在本专利技术说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。
[0029]还应当进一步理解，本专利技术说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
[0030]如在本说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。
[0031]需要注意的是，除非另有说明，本申请使用的技术术语或者科学术语应当为本专利技术所属领域技术人员所理解的通常意义。
[0032]如图1所示，示出了本专利技术第一实施例所提供的一种基于图像框选识别与自动录入的方法的流程示意图，该方法包括以下步骤：
[0033]获取用户对键盘的操作指令；
[0034]判断所述操作指令与预设的截图识别快捷键是否相同；
[0035]若否，则不执行操作；
[0036]若是，则保存当前桌面顶层活动窗口信息，并进行屏幕拷贝得到屏幕拷贝图片，将所述屏幕拷贝图片显示在桌面顶层供用户框选识别区域，获取用户对屏幕拷贝图片进行区域截图操作，得到截图图片；
[0037]对所述截图图片进行文字识别，得到文字识别结果，并隐藏屏幕拷贝图片展示窗口，将当前桌面顶层活动窗口和进程均切换至用户按下快捷键之前的桌面进程窗口本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于图像框选识别与自动录入的方法，其特征在于，包括：获取用户对键盘的操作指令；判断所述操作指令与预设的截图识别快捷键是否相同；若否，则不执行操作；若是，则保存当前桌面顶层活动窗口信息，并进行屏幕拷贝得到屏幕拷贝图片，将所述屏幕拷贝图片显示在桌面顶层供用户框选识别区域，获取用户对屏幕拷贝图片中进行区域截图操作，得到截图图片；对所述截图图片进行文字识别，得到文字识别结果，并隐藏屏幕拷贝图片展示窗口，将当前桌面顶层活动窗口和进程均切换至用户按下快捷键之前的桌面进程窗口；获取文字识别结果，并将文字识别结果复制到操作系统剪切板，模拟键盘发起粘贴操作将文字识别结果自动录入到截屏前的活动窗口中的输入框。2.如权利要求1所述的方法，其特征在于，在所述模拟键盘发起粘贴操作将文字识别结果自动录入到截屏前的活动窗口中的输入框步骤之后还包括：根据预先配置信息将光标自动跳转到下一个输入框中。3.如权利要求1所述的方法，其特征在于，在所述模拟键盘发起粘贴操作将文字识别结果自动录入到截屏前的活动窗口中的输入框步骤之后还包括：根据预先配置信息模拟光标向下键。4.如权利要求1所述的方法，其特征在于，所述获取用户在识别区域进行区域截图操作具体包括：获取用户在识别区域按下鼠标左键时的坐标作为起始点，追踪鼠标的移动位置，获取用户在识别区域释放鼠标左键时的坐标作为截止点，根据所述起始点与截止点确定截取区域。5.一种基于图像框选识别与自动录入的系统，其特征在于，包括：指令获取模块、判断模块、截图模块、文字识别模块和自动录入模块，所述指令获取模块用于获取用户对键盘的操作指令；所述判断模块用于判断操作指令与预设的截图识别快捷键是否相同；所述截图模块用于操作指令与预设的截图识别快捷键相同时，保...

【专利技术属性】
技术研发人员：喻洪乾，韩雨，袁泳佳，孟祥锐，胡强，
申请(专利权)人：深圳市银雁科技有限公司，
类型：发明
国别省市：