文本识别方法、装置、移动终端以及存储介质制造方法及图纸

本申请实施例公开了一种文本识别方法、装置、移动终端以及存储介质，涉及移动终端技术领域。所述方法包括：检测作用于用户界面的触控操作，当该触控操作满足预设条件时，对与该触控操作的位置对应的用户界面上的界面元素进行识别，当未识别成功时，截取与该触控操作的位置对应的控件图像并对该控件图像进行识别，在用户界面的部分区域上叠加显示至少一个卡片，该至少一个卡片用于显示由该控件图像识别出的信息。本申请实施例提供的文本识别方法、装置、移动终端以及存储介质，通过图像识别技术，提升取词识别的快捷性和准确性，以提升用户体验。

【技术实现步骤摘要】
文本识别方法、装置、移动终端以及存储介质
本申请涉及移动终端
，更具体地，涉及一种文本识别方法、装置、移动终端以及存储介质。
技术介绍
随着科学技术的发展，移动终端已经成为人们日常生活中最常用的电子产品之一。并且，用户经常会通过移动终端进行大量的阅读，但是，当用户想要对阅读的信息有更多详细的了解时，需要自行进行搜索获取详情信息，操作过程繁琐、不便捷。
技术实现思路
鉴于上述问题，本申请提出了一种文本识别方法、装置、移动终端以及存储介质，通过图像识别技术，提升取词识别的快捷性和准确性，以提升用户体验。第一方面，本申请实施例提供了一种文本识别方法，所述方法包括：检测作用于用户界面的触控操作，当所述触控操作满足预设条件时，对与所述触控操作的位置对应的所述用户界面上的界面元素进行识别；当未识别成功时，截取与所述触控操作的位置对应的控件图像并对所述控件图像进行识别；在所述用户界面的部分区域上叠加显示至少一个卡片，所述至少一个卡片用于显示由所述控件图像识别出的信息。第二方面，本申请实施例提供了一种文本识别装置，所述装置包括：界面元素识别模块，用于检测作用于用户界面的触控操作，当所述触控操作满足预设条件时，对所述触控操作的位置对应的所述用户界面上的界面元素进行识别；图像截取模块，用于当未识别成功时，截取与所述触控操作的位置对应的控件图像并对所述控件图像进行识别；卡片显示模块，用于在所述用户界面的部分区域上叠加显示至少一个卡片，所述至少一个卡片用于显示由所述控件图像识别出的信息。第三方面，本申请实施例提供了一种移动终端，包括触摸屏、存储器以及处理器，所述触摸屏与所述存储器耦接到所述处理器，所述存储器存储指令，当所述指令由所述处理器执行时所述处理器执行上述方法。第四方面，本申请实施例提供了一种具有处理器可执行的程序代码的计算机可读取存储介质，所述程序代码使所述处理器执行上述方法。本申请实施例提供的一种文本识别方法、装置、移动终端以及存储介质，检测作用于用户界面的触控操作，当该触控操作满足预设条件时，对与该触控操作的位置对应的用户界面上的界面元素进行识别，当未识别成功时，截取与该触控操作的位置对应的控件图像并对该控件图像进行识别，在用户界面的部分区域上叠加显示至少一个卡片，该至少一个卡片用于显示由该控件图像识别出的信息，通过图像识别技术，提升取词识别的快捷性和准确性，以提升用户体验。附图说明为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。图1示出了本申请实施例提供的第一种文本识别方法的流程示意图；图2示出了本申请实施例提供的移动终端的用户界面的一种示意图；图3示出了本申请实施例提供的第二种文本识别方法的流程示意图；图4示出了本申请实施例提供的第二种文本识别方法的步骤S240流程示意图；图5示出了本申请实施例提供的移动终端的用户界面的另一种示意图；图6示出了本申请实施例提供的第二种文本识别方法的步骤S270流程示意图；图7示出了本申请实施例提供的第三种文本识别方法的流程示意图；图8示出了本申请实施例提供的文本识别装置的一种模块框图；图9示出了本申请实施例提供的文本识别装置的另一种模块框图；图10示出了本申请实施例提供的一种移动终端的结构示意图；图11示出了用于执行根据本申请实施例的文本识别方法的移动终端的框图。具体实施方式下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本申请保护的范围。目前，用户在通过移动终端上网聊天、阅读文字、查看图片或者观看视频时，经常会对其中的一些内容产生兴趣并进行搜索获取更加详细的信息，此时，用户首先需要复制感兴趣的内容或牢记感兴趣的内容，然后打开浏览器，并将复制的内容粘贴到浏览器的搜索框中或将牢记的内容输入到浏览器的搜索框中进行搜索以获得详细信息，导致操作过程十分的繁琐，耗时较长且容易产生错误。专利技术人经过长期的研究发现，可以利用系统自带的辅助模式，根据用户的触控操作进行文本内容的获取并识别，但是这种方式往往会因为用户的触控操作的影响而造成文本内容的获取失败或错误。针对上述技术问题，专利技术人提出了本申请实施例提供的文本识别方法、装置、移动终端以及存储介质，通过图像识别技术，提升取词识别的快捷性和准确性，以提升用户体验。其中，具体的文本识别方法在后续的实施例中进行详细的说明。实施例请参阅图1，图1示出了本申请实施例提供的第一种文本识别方法的流程示意图。所述文本识别方法用于通过图像识别技术，提升取词识别的快捷性和准确性，以提升用户体验。在具体的实施例中，所述文本识别方法应用于如图8所示的文本识别装置200以及配置有所述文本识别装置200的移动终端(图10)。下面将以移动终端为例，说明本实施例的具体流程，当然，可以理解的，本实施例所应用的移动终端可以为智能手机、平板电脑、穿戴式电子设备等，在此不做具体的限定。下面将针对图1所示的流程进行详细的阐述，所述文本识别方法具体可以包括以下步骤：步骤S110：检测作用于用户界面的触控操作，当所述触控操作满足预设条件时，对与所述触控操作的位置对应的所述用户界面上的界面元素进行识别。在本实施例中，对作用于用户界面的触控操作进行检测，作为一种方式，该触控操作可以包括单指点击、多指点击、单指长按、多指长按、重压、多次点击、滑动操作、复制操作、按压面积等，其中，所述单指点击是指单指在用户界面上进行点击的操作；多指点击是指多指在用户界面上同时进行点击的操作；单指长按是指单指在用户界面上按压超过预设时长；多指长按是指多指同时在用户界面上按压超过预设时长；重压是指在用户界面上按压力度超过预设力度；多次点击是指在预设时间内点击次数超过预设次数；滑动操作是指单指在用户界面上进行滑动的操作；复制操作是指在用户界面将文本信息复制到粘贴板的操作；按压面积是指在用户界面上的单指按压面积超过预设面积。进一步地，移动终端预先设置并存储有预设条件，其中，该预设条件用于作为触控操作的判断依据，即在检测获取所述触控操作后，将该触控操作与预设条件进行比较，以判断该触控操作是否满足预设条件，作为一种方式，当该触控操作满足预设条件时，获取该触控操作的位置，例如，获取该触控操作的位置对应的坐标信息，然后对位于该触控操作的位置对应的用户界面上的界面元素进行识别。具体地，所述界面元素包括但不仅限于文本、图片、音频以及视频，同时，所述移动终端可以基于该触控操作的位置确定至少一个界面元素并识别，例如，可以对该触控操作的位置处的界面元素进行识别、可以对与该触控操作的位置处的界面元素位于同一段落的其他界面元素均进行识别等，在此不做具体的限定。步骤S120：当未识别成功时，截取与所述触控操作的位置对应的控件图像并对所述控件图像进行识别。其中，当触控操作的位置对应的界面元素未识别成功，即对该触控操作的位置对应的界面元素进行识别的结果为空时，本文档来自技高网...

【技术保护点】
1.一种文本识别方法，其特征在于，所述方法包括：检测作用于用户界面的触控操作，当所述触控操作满足预设条件时，对与所述触控操作的位置对应的所述用户界面上的界面元素进行识别；当未识别成功时，截取与所述触控操作的位置对应的控件图像并对所述控件图像进行识别；在所述用户界面的部分区域上叠加显示至少一个卡片，所述至少一个卡片用于显示由所述控件图像识别出的信息。

【技术特征摘要】
1.一种文本识别方法，其特征在于，所述方法包括：检测作用于用户界面的触控操作，当所述触控操作满足预设条件时，对与所述触控操作的位置对应的所述用户界面上的界面元素进行识别；当未识别成功时，截取与所述触控操作的位置对应的控件图像并对所述控件图像进行识别；在所述用户界面的部分区域上叠加显示至少一个卡片，所述至少一个卡片用于显示由所述控件图像识别出的信息。2.根据权利要求1所述的方法，其特征在于，所述当未识别成功时，截取与所述触控操作的位置对应的控件图像并对所述控件图像进行识别，还包括：当未识别成功时，获取所述用户界面对应的应用程序；判断所述应用程序是否为重点应用程序；当所述应用程序是所述重点应用程序时，截取与所述触控操作的位置对应的控件图像并对所述控件图像进行识别；当所述应用程序不是所述重点应用程序时，在所述用户界面显示选择控件，其中，所述选择控件用于触发手动框选或取消识别。3.根据权利要求2所述的方法，其特征在于，所述当所述应用程序是所述重点应用程序时，截取与所述触控操作的位置对应的控件图像并对所述控件图像进行识别，包括：当所述应用程序是所述重点应用程序时，获取与所述触控操作的位置对应的控件类型；判断所述控件类型是否满足预设类型；当所述控件类型满足预设类型时，截取与所述触控操作的位置对应的控件图像并对所述控件图像进行识别。4.根据权利要求3所述的方法，其特征在于，所述在所述用户界面的部分区域上叠加显示至少一个卡片，包括：判断所述控件图像是否能够识别出有效信息，其中，所述有效信息的置信概率高于预设值；当所述控件图像能够识别出所述有效信息时，在所述用户界面的部分区域上叠加显示至少一个卡片；当所述控件图像不能识别出所述有效信息时，在所述用户界面显示所述选择控件。5.根据权利要求4所述的方法，其特征在于，所述当所述控件图像不能识别出所述有效信息时，在所述...

【专利技术属性】
技术研发人员：揭骏仁，林建华，
申请(专利权)人：OPPO广东移动通信有限公司，
类型：发明
国别省市：广东,44