一种识屏方法、终端及计算机可读存储介质技术

本发明专利技术公开了一种识屏方法、终端及计算机可读存储介质，本发明专利技术提供一种识屏方法、终端及计算机可读存储介质，考虑到触控屏上显示的内容都是显示给用户，因此无论识屏指令检测位置处的显示内容是否是通过TextView控件进行呈现的，但因为会显示给用户，所以终端一定可以获取到检测位置处的图像。终端通过获取到用户下发识屏指令处显示内容的的图像，然后对图像内容进行识别得到目标文本信息，并基于目标文本信息进行查询搜索得到第一搜索结果。因此，该识屏方法可以应用于对以何种方式呈现的显示内容，扩大了识屏的应用范围，完善了识屏应用的服务机制，提升了用户体验。

【技术实现步骤摘要】
一种识屏方法、终端及计算机可读存储介质
本专利技术涉及终端
，更具体地说，涉及一种识屏方法、终端及计算机可读存储介质。
技术介绍
识屏是一种通过识别用户所选择区域内的文字信息，然后对文字信息进行搜索查询，进而给用户提供与该文字信息相关详细信息的应用。比如，用户在“钟楼”两字上触发了识屏操作，通过识屏可以向用户提供钟楼的介绍资料等。现有识屏方案只能针对以TextView(文本框)控件所呈现的文字信息，但存在部分显示界面上的显示内容不是通过TextView控件呈现的，比如微信聊天界面、浏览器界面，这些显示界面是通过自定义控件或者WebView实现，因此现有识屏方案无法针对这些以非TextView控件呈现的显示内容进行识屏，从而导致用户在这些显示界面中遇到疑惑时，识屏应用无法向用户提供服务，导致用户体验不佳的问题。
技术实现思路
本专利技术要解决的技术问题在于：现有识屏方案无法对以非TextView控件呈现的显示内容进行识屏，导致用户体验不佳，针对该技术问题，提供一种识屏方法、终端及计算机可读存储介质。为解决上述技术问题，本专利技术提供一种识屏方法，识屏方法包括：通过触控屏监测识屏指令；在检测到识屏指令时记录识屏指令的检测位置；对检测位置处的图像内容进行识别得到目标文本信息，目标文本信息为待识别的文本信息；搜索目标文本信息得到第一搜索结果；输出第一搜索结果。可选的，通过触控屏监测识屏指令包括：通过触控屏监测按压操作，若通过触控屏检测到针对某一位置的按压操作持续预设时长，确定检测到识屏指令；或，通过触控屏监测触击操作，若通过触控屏检测到针对某一位置的连续触击次数达预设次数，确定检测到识屏指令。可选的，对检测位置处的图像内容进行识别得到目标文本信息之前，还包括：对触控屏在检测到识屏指令时刻的显示内容进行图像记录得到截图；对检测位置处的图像内容进行识别得到目标文本信息包括：采用光学字符识别OCR技术对截图中检测位置处的图像内容进行识别得到目标文本信息。可选的，采用OCR技术对截图中检测位置处的图像内容进行识别得到目标文本信息包括：对截图中以检测位置为中心预设范围内的图像内容进行OCR识别得到文本信息；对文本信息进行语义识别确定检测位置处的目标文本信息。可选的，搜索目标文本信息得到第一搜索结果包括：在本地信息库中搜索目标文本信息得到第一搜索结果；和/或，在网络信息库中搜索目标文本信息得到第一搜索结果。可选的，输出第一搜索结果包括：控制触控屏以弹窗的方式显示第一搜索结果；和/或，以语音播报的方式输出第一搜索结果。可选的，对检测位置处的图像内容进行识别得到目标文本信息之前，还包括：确定检测到识屏指令的时刻触控屏上检测位置处的显示内容并非是通过文本框TextView控件呈现。可选的，若确定检测到识屏指令的时刻触控屏上检测位置处的显示内容是通过TextView控件呈现，则识屏方法还包括：读取检测位置处TextView控件中保存的字符串信息；对字符串信息进行搜索得到第二搜索结果；输出第二搜索结果。进一步地，本专利技术还提供了一种终端，终端包括处理器、存储器及通信总线；通信总线用于实现处理器和存储器之间的连接通信；处理器用于执行存储器中存储的一个或者多个程序，以实现如上任一项的识屏方法的步骤。进一步地，本专利技术还提供了一种计算机可读存储介质，计算机可读存储介质存储有一个或者多个程序，一个或者多个程序可被一个或者多个处理器执行，以实现如上任一项的识屏方法的步骤。有益效果本专利技术提供一种识屏方法、终端及计算机可读存储介质，针对现有识屏方案无法对除以TextView控件以外的方式呈现的显示内容进行识屏，导致在用户遇到需要查询的内容时，无法向用户提供查询结果，影响用户体验的问题，本专利技术实施例提供的识屏方案，通过触控屏监测识屏指令，并在检测到识屏指令时记录识屏指令的检测位置，然后对检测位置处的图像内容进行识别得到目标文本信息。随后对目标文本信息进行搜索得到第一搜索结果，并输出第一搜索结果。由于触控屏上显示的内容都是显示给用户，供用户从视觉上获取信息的内容，因此无论识屏指令检测位置处的显示内容是否是通过TextView控件进行呈现的，但因为会显示给用户，所以终端一定可以获取到检测位置处的图像。在本实施例中，终端通过获取到用户下发识屏指令处显示内容的的图像，然后对图像内容进行识别得到目标文本信息，并基于目标文本信息进行查询搜索得到第一搜索结果。因此，本专利技术实施例提供的识屏方法，可以应用于对以何种方式呈现的显示内容，扩大了识屏的应用范围，完善了识屏应用的服务机制，提升了用户体验。附图说明下面将结合附图及实施例对本专利技术作进一步说明，附图中：图1为实现本专利技术各个实施例一个可选的移动终端的硬件结构示意图。图2为如图1所示的移动终端的无线通信系统示意图；图3为本专利技术第一实施例中提供的识屏方法的一种流程图；图4为本专利技术第一实施例中提供的监测识屏指令的一种流程图；图5为本专利技术第一实施例中提供的监测识屏指令的另一种流程图；图6为本专利技术第一实施例中提供的终端的一种显示界面示意图；图7为本专利技术第一实施例中提供的获取检测位置处图像内容并获取目标文本信息的一种流程图；图8为本专利技术第一实施例中提供的终端的一种人机交互示意图；图9为本专利技术第一实施例中提供的终端的另一种显示界面示意图；图10为本专利技术第二实施例中提供的识屏方法的一种流程图；图11为本专利技术第二实施例中提供的终端的一种人机交互示意图；图12为本专利技术第三实施例中提供的终端的一种硬件结构示意图。具体实施方式应当理解，此处所描述的具体实施例仅仅用以解释本专利技术，并不用于限定本专利技术。在后续的描述中，使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本专利技术的说明，其本身没有特定的意义。因此，“模块”、“部件”或“单元”可以混合地使用。终端可以以各种形式来实施。例如，本专利技术中描述的终端可以包括诸如手机、平板电脑、笔记本电脑、掌上电脑、个人数字助理(PersonalDigitalAssistant，PDA)、便捷式媒体播放器(PortableMediaPlayer，PMP)、导航装置、可穿戴设备、智能手环、计步器等移动终端，以及诸如数字TV、台式计算机等固定终端。后续描述中将以移动终端为例进行说明，本领域技术人员将理解的是，除了特别用于移动目的的元件之外，根据本专利技术的实施方式的构造也能够应用于固定类型的终端。请参阅图1，其为实现本专利技术各个实施例的一种移动终端的硬件结构示意图，该移动终端100可以包括：RF(RadioFrequency，射频)单元101、WiFi模块102、音频输出单元103、A/V(音频/视频)输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、处理器110、以及电源111等部件。本领域技术人员可以理解，图1中示出的移动终端结构并不构成对移动终端的限定，移动终端可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。下面结合图1对移动终端的各个部件进行具体的介绍：射频单元101可用于收发信息或通话过程中，信号的接收和发送，具体的，将基站的下行信息接收后，给处理器110处理；另外，将上行的数据发送给基站。通常，射频单元101包括但不限于天本文档来自技高网...

【技术保护点】
1.一种识屏方法，其特征在于，所述识屏方法包括：通过触控屏监测识屏指令；在检测到识屏指令时记录所述识屏指令的检测位置；对所述检测位置处的图像内容进行识别得到目标文本信息，所述目标文本信息为待识别的文本信息；搜索所述目标文本信息得到第一搜索结果；输出所述第一搜索结果。

【技术特征摘要】
1.一种识屏方法，其特征在于，所述识屏方法包括：通过触控屏监测识屏指令；在检测到识屏指令时记录所述识屏指令的检测位置；对所述检测位置处的图像内容进行识别得到目标文本信息，所述目标文本信息为待识别的文本信息；搜索所述目标文本信息得到第一搜索结果；输出所述第一搜索结果。2.如权利要求1所述的识屏方法，其特征在于，所述通过触控屏监测识屏指令包括：通过所述触控屏监测按压操作，若通过所述触控屏检测到针对某一位置的按压操作持续预设时长，确定检测到识屏指令；或，通过所述触控屏监测触击操作，若通过所述触控屏检测到针对某一位置的连续触击次数达预设次数，确定检测到识屏指令。3.如权利要求1所述的识屏方法，其特征在于，所述对所述检测位置处的图像内容进行识别得到目标文本信息之前，还包括：对所述触控屏在检测到所述识屏指令时刻的显示内容进行图像记录得到截图；所述对所述检测位置处的图像内容进行识别得到目标文本信息包括：采用光学字符识别OCR技术对所述截图中所述检测位置处的图像内容进行识别得到目标文本信息。4.如权利要求3所述的识屏方法，其特征在于，所述采用OCR技术对所述截图中所述检测位置处的图像内容进行识别得到目标文本信息包括：对所述截图中以所述检测位置为中心预设范围内的图像内容进行OCR识别得到文本信息；对所述文本信息进行语义识别确定所述检测位置处的目标文本信息。5.如权利要求1所述的识屏方法，其特征在于，所述搜索所述目标文本信...

【专利技术属性】
技术研发人员：郑文辉，
申请(专利权)人：努比亚技术有限公司，
类型：发明
国别省市：广东,44