图像处理方法、图像识别装置、电子设备及介质制造方法及图纸

本发明专利技术实施例公开了一种图像处理方法，在通过图像识别装置实时采集图像过程中，通过第一线程将采集到的实时图像存储到图像拼接模块中；通过第二线程对所述图像拼接模块中的图像进行实时拼接，获取到中间拼接图像；通过轻量级光学字符识别模型对所述中间拼接图像进行文字识别，得到中间识别结果并进行显示；以及在检测到所述图像识别装置的状态改变时，获取所述图像拼接模块中的所有图像组成的图像集，通过通用光学字符识别模型对所述图像集进行文字识别，得到最终识别结果并进行显示。本发明专利技术实施例提供的图像处理方法、图像识别装置、电子设备及介质，能够提高针对中间拼接图像进行文字识别的识别实时性，并使得首个字符上屏的响应时间缩短。上屏的响应时间缩短。上屏的响应时间缩短。

【技术实现步骤摘要】
图像处理方法、图像识别装置、电子设备及介质


[0001]本专利技术实施例涉及图像处理
，尤其涉及一种图像处理方法、图像识别装置、电子设备及介质。

技术介绍

[0002]随着互联网技术的飞速发展，越来越多的应用迁移到互联网上，为了方便用户使用，用户可以使用图像识别装置例如词典笔或点读笔来获取非源语言文本，在通过互联网中数据对获取的文本进行翻译或者注释，提高用户的学习效率。
[0003]现有技术中在使用图像识别装置获取文本时，通常是采集文本对应的图像，然后对图像进行文字识别，识别出文字或语句；在图像识别装置的算力有限，此时，为了提高识别的准确性，图像识别装置中通常会设置光学字符识别模型来进行文字识别，而识别的准确性越高，其光学字符识别模型对中间拼接图像进行识别的实时性越差，但最终结果会较准确的问题。

技术实现思路

[0004]本专利技术实施例提供了一种图像处理方法、图像识别装置、电子设备及介质，能够提高针对中间拼接图像进行文字识别的识别实时性且能够确保最终识别结果的准确性，并使得首个字符上屏的响应时间缩短。
[0005]本专利技术实施例第一方面提供了一种图像处理方法，包括：
[0006]在通过图像识别装置实时采集图像过程中，通过第一线程将采集到的实时图像存储到图像拼接模块中；
[0007]在通过所述第一线程将采集到的实时图像进行存储的过程中，通过第二线程对所述图像拼接模块中的图像进行实时拼接，获取到中间拼接图像；
[0008]通过轻量级光学字符识别模型对所述中间拼接图像进行文字识别，得到中间识别结果并进行显示；
[0009]以及在检测到所述图像识别装置的状态改变时，获取所述图像拼接模块中的所有图像组成的图像集，通过通用光学字符识别模型对所述图像集进行文字识别，得到最终识别结果并进行显示。
[0010]可选的，所述通过第二线程对所述图像拼接模块中的图像进行实时拼接，获取到中间拼接图像，包括：
[0011]通过所述图像拼接模块启动所述第二线程，通过所述第二线程对所述图像拼接模块中的图像进行实时拼接，获取到所述中间拼接图像。
[0012]可选的，所述通过轻量级光学字符识别模型对所述中间拼接图像进行文字识别，得到中间识别结果并进行显示，包括：
[0013]若所述中间拼接图像的帧数不小于预设帧数，则通过所述轻量级光学字符识别模型对所述中间拼接图像进行文字识别，得到所述中间识别结果并进行显示。
[0014]可选的，所述通过所述轻量级光学字符识别模型对所述中间拼接图像进行文字识别，包括：
[0015]通过所述轻量级光学字符识别模型对所述中间拼接图像进行文字识别，其中，所述轻量级光学字符识别模型使用所述图像识别装置中的单核处理器。
[0016]本专利技术实施例第二方面提供了一种图像识别装置，包括：
[0017]图像存储单元，用于在通过所述图像识别装置实时采集图像过程中，通过第一线程将采集到的实时图像存储到图像拼接模块中；
[0018]图像拼接单元，用于在通过所述第一线程将采集到的实时图像进行存储的过程中，通过第二线程对所述图像拼接模块中的图像进行实时拼接，获取到中间拼接图像；
[0019]中间文字识别单元，用于通过轻量级光学字符识别模型对所述中间拼接图像进行文字识别，得到中间识别结果并进行显示；
[0020]最终文字识别单元，用于在检测到所述图像识别装置的状态改变时，获取所述图像拼接模块中的所有图像组成的图像集，通过通用光学字符识别模型对所述图像集进行文字识别，得到最终识别结果并进行显示。
[0021]可选的，所述图像拼接单元，用于通过所述图像拼接模块启动所述第二线程，通过所述第二线程对所述图像拼接模块中的图像进行实时拼接，获取到所述中间拼接图像。
[0022]可选的，所述中间文字识别单元，若所述中间拼接图像的帧数不小于预设帧数，用于通过所述轻量级光学字符识别模型对所述中间拼接图像进行文字识别，得到所述中间识别结果并进行显示。
[0023]可选的，所述中间文字识别单元，用于通过所述轻量级光学字符识别模型对所述中间拼接图像进行文字识别，其中，所述轻量级光学字符识别模型使用所述图像识别装置中的单核处理器。
[0024]本专利技术实施例第三方面提供了一种用于数据处理的装置，包括有存储器，以及一个或者一个以上的程序，其中一个或者一个以上程序存储于存储器中，且经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于如上述图像处理方法的步骤。
[0025]本专利技术实施例第四方面提供了一种机器可读介质，其上存储有指令，当由一个或多个处理器执行时，使得装置执行如上述图像处理方法的步骤。
[0026]本专利技术实施例的有益效果如下：
[0027]基于上述技术方案，通过第一线程将实时采集的图像存储到图像拼接模块中，在通过所述第一线程将采集到的实时图像进行存储的过程中，通过第二线程对图像拼接模块中的图像进行实时拼接，如此，通过并发的方式能够有效降低实时采集的图像的丢失率，在图像丢失率降低的情况下能够有效拼接出的图像的清晰度，确保了识别出的最终识别结果的准确度，且采用并发的方式能够有效降低拼接延时；而且由于使用轻量级OCR对中间拼接图像进行文字识别，能够降低图像识别装置的处理器负载，并能提高针对中间拼接图像进行文字识别的识别实时性，在识别实时性提高的情况下，能够使得首个字符上屏的响应时间蒜段，从而使得用户的体验更好。
附图说明
[0028]图1为本专利技术实施例中图像处理方法的方法流程图；
[0029]图2为本专利技术实施例中图像识别装置的结构示意图；
[0030]图3为本专利技术实施例中用于图像识别装置作为设备时的结构框图；
[0031]图4为本专利技术实施例中一些实施例中服务端的结构框图。
具体实施方式
[0032]为了更好的理解上述技术方案，下面通过附图以及具体实施例对本专利技术实施例的技术方案做详细的说明，应当理解本专利技术实施例以及实施例中的具体特征是对本专利技术实施例技术方案的详细的说明，而不是对本专利技术技术方案的限定，在不冲突的情况下，本专利技术实施例以及实施例中的技术特征可以相互组合。
[0033]针对在通过图像识别装置进行文字识别过程中的中间识别结果延时高的技术问题，本专利技术实施例提供了一种图像处理方案，该方案用于在通过图像识别装置实时采集图像过程中，通过第一线程将采集到的实时图像存储到图像拼接模块中；在通过所述第一线程将采集到的实时图像进行存储的过程中，通过第二线程对所述图像拼接模块中的图像进行实时拼接，获取到中间拼接图像；通过轻量级光学字符识别模型对所述中间拼接图像进行文字识别，得到中间识别结果并进行显示；以及在检测到所述图像识别装置的状态改变时，获取所述图像拼接模块中的所有图像组成的图像集，通过通用光学字符识别模型对所述图像集进行文字识别，得到最终识别结果并进行显示。
[0034]如此，在通过所述第一线程将采集到的实时图像进行存储的过程本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：在通过图像识别装置实时采集图像过程中，通过第一线程将采集到的实时图像存储到图像拼接模块中；在通过所述第一线程将采集到的实时图像进行存储的过程中，通过第二线程对所述图像拼接模块中的图像进行实时拼接，获取到中间拼接图像；通过轻量级光学字符识别模型对所述中间拼接图像进行文字识别，得到中间识别结果并进行显示；以及在检测到所述图像识别装置的状态改变时，获取所述图像拼接模块中的所有图像组成的图像集，通过通用光学字符识别模型对所述图像集进行文字识别，得到最终识别结果并进行显示。2.如权利要求1所述的方法，其特征在于，所述通过第二线程对所述图像拼接模块中的图像进行实时拼接，获取到中间拼接图像，包括：通过所述图像拼接模块启动所述第二线程，通过所述第二线程对所述图像拼接模块中的图像进行实时拼接，获取到所述中间拼接图像。3.如权利要求2所述的方法，其特征在于，所述通过轻量级光学字符识别模型对所述中间拼接图像进行文字识别，得到中间识别结果并进行显示，包括：若所述中间拼接图像的帧数不小于预设帧数，则通过所述轻量级光学字符识别模型对所述中间拼接图像进行文字识别，得到所述中间识别结果并进行显示。4.如权利要求3所述的方法，其特征在于，所述通过所述轻量级光学字符识别模型对所述中间拼接图像进行文字识别，包括：通过所述轻量级光学字符识别模型对所述中间拼接图像进行文字识别，其中，所述轻量级光学字符识别模型使用所述图像识别装置中的单核处理器。5.一种图像识别装置，其特征在于，包括：图像存储单元，用于在通过所述图像识别装置实时采集图像过程中，通过第一线程将采集到的实时图像存储到图像拼接模块中；图像拼接单元，...

【专利技术属性】
技术研发人员：王从涛，阳家俊，魏远明，陈伟，韦涛，吴军，龚力，朱伟基，
申请(专利权)人：北京搜狗科技发展有限公司，
类型：发明
国别省市：