本公开实施例公开了一种信息展示方法、装置、设备和存储介质,该方法包括:响应于信息展示请求,通过摄像组件获取图像信息,并在所述图像信息中确定手指位置;根据所述手指位置,确定手指的指向区域,并在所述指向区域中提取文字信息;根据所述文字信息获取匹配的扩展信息,并通过显示屏展示所述扩展信息。本公开实施例的技术方案,在确定了摄像组件拍摄的图像信息中的手指位置及指向区域,并在指向区域中提取文字信息后,通过显示屏展示了相关的扩展信息,丰富了阅读内容,弥补了纸质书籍中无法实时获取扩展知识的不足,提高了信息获取效率,同时,摄像组件对手指位置的拍摄,改变了传统的单一阅读方式,提高了阅读的趣味性。
【技术实现步骤摘要】
一种信息展示方法、装置、电子设备和存储介质
本公开实施例涉及图像识别技术,尤其涉及一种信息展示方法、装置、电子设备和存储介质。
技术介绍
纸质书籍具有易于记笔记、翻页便捷以及散发书香气息等特点,且相比于电子书籍更加护眼,因此,时至今日,纸质书籍在学习和生活中依然占有着重要地位。对于学生,尤其是中小学生来说,使用的课本以及阅读的课外书籍大多仍然是纸质的,但是纸质书籍中的图片和文字均为静态的,阅读方式过于单一,趣味性不足,同时,纸质书籍只包括纸张中记载的内容,内容不够丰富,对于知识的讲解和扩展也不足,信息获取效率较低。
技术实现思路
本公开提供了一种信息展示方法、装置、设备和存储介质,以实现通过显示屏展示与用户在纸质书籍中的阅读信息相匹配的扩展信息。第一方面,本公开实施例提供了一种信息展示方法,包括:响应于信息展示请求,通过摄像组件获取图像信息,并在所述图像信息中确定手指位置;根据所述手指位置,确定手指的指向区域,并在所述指向区域中提取文字信息;根据所述文字信息获取匹配的扩展信息,并通过显示屏展示所述扩展信息。第二方面,本公开实施例提供了一种信息展示装置,包括:手指位置确定模块,用于响应于信息展示请求,通过摄像组件获取图像信息,并在所述图像信息中确定手指位置;文字信息获取模块,用于根据所述手指位置,确定手指的指向区域,并在所述指向区域中提取文字信息;扩展信息展示模块,用于根据所述文字信息获取匹配的扩展信息,并通过显示屏展示所述扩展信息。第三方面,本公开实施例提供了一种电子设备,包括存储器、处理装置及存储在存储器上并可在处理装置上运行的计算机程序,处理装置执行程序时实现本公开任意实施例的信息展示方法。第四方面,本公开实施例提供了一种包含计算机可执行指令的存储介质,计算机可执行指令在由计算机处理器执行时用于执行本公开任意实施例的信息展示方法。本公开实施例的技术方案,响应于信息展示请求,确定了摄像组件拍摄的图像信息中的手指位置及指向区域,并在指向区域中提取文字信息后,通过显示屏展示了相关的扩展信息,丰富了阅读内容,弥补了纸质书籍中无法实时获取扩展知识的不足,提高了信息获取效率,同时,摄像组件对手指位置的拍摄,改变了传统的单一阅读方式,提高了阅读的趣味性。附图说明结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,原件和元素不一定按照比例绘制。图1是本公开实施例一中的一种信息展示方法的流程图;图2是本公开实施例二中的一种信息展示装置的结构框图;图3是本公开实施例三中的一种电子设备的结构框图。具体实施方式下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例,相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。应当理解,本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行,和/或并行执行。此外,方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。本文使用的术语“包括”及其变形是开放性包括,即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”;术语“另一实施例”表示“至少一个另外的实施例”;术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。实施例一图1是本公开实施例一提供的一种信息展示方法的流程图,本实施例可适用于在显示屏上展示与用户在纸质书籍中的阅读信息相匹配的扩展信息,该方法可以由本公开实施例中的信息展示装置来执行,该装置可以通过软件和/或硬件实现,并集成在具有摄像组件和显示屏的终端设备中,该方法具体包括如下步骤:S110、响应于信息展示请求,通过摄像组件获取图像信息,并在所述图像信息中确定手指位置。信息展示请求可以通过设定的物理按键或者显示屏上的虚拟按键触发,也可以通过识别到的特定的语音指令触发,在本公开实施例中,对信息展示请求的触发方式不作具体限定。摄像组件位于用户正上方或斜上方,并向下拍摄,以使拍摄获取的图像信息中可以准确检测到手指位置,避免手指被遮挡;在获取到的图像信息中,通过计算机视觉技术,确定手指的所在位置。S120、根据所述手指位置,确定手指的指向区域,并在所述指向区域中提取文字信息。用户通过手指指向书籍、报纸等纸质资料中的图片和/或文本信息,因此,手指的指向区域,也即待识别的目标区域;目标区域中提取的文字信息,反应了用户想要了解的具体内容。可选的,在本公开实施例中,所述在所述指向区域中提取文字信息,包括:通过光学字符识别技术,对所述指向区域中的图片和/或文本进行识别,以提取文字信息。光学字符识别(OpticalCharacterRecognition,OCR)技术,是通过检测暗、亮模式确定字符的形状,然后通过字符识别方法将形状翻译成计算机文的过程;具体的,针对印刷体字符,采用光学的方式将纸质文档中的文字(包括图片中的文字和文本中的文字)转换成为黑白点阵的图像文件,再将图像中的黑白点阵转换成文本格式的文字信息。S130、根据所述文字信息获取匹配的扩展信息,并通过显示屏展示所述扩展信息。扩展信息可以是存储于本地的资料信息,例如,用户预先下载的电子字典,在获取到用户指向的文字信息时,在电子字典中查找相关的文字解释;扩展信息还可以是用户预先下载的视频和书籍,在获取到用户指向的文字信息时,查找匹配的视频或书籍,在本公开实施例中,对扩展信息的类型均不作具体限定。可选的,在本公开实施例中,所述根据所述文字信息获取匹配的扩展信息,包括:根据所述文字信息进行云端搜索,并将搜索结果作为扩展信息。搜索结果通常是一个包含多个搜索结果项的网页,但用户想要获取的信息通常是与文字信息相关的确切信息,例如,文本信息为词汇“明亮”,对于用户,特别是学生来说,想要获取的是“明亮”的词语读音、解释和出处等具体信息,因此,为了便于用户及时获取相关信息,避免进行二次选择的繁琐过程,可以将搜索结果中的最优搜索结果项(即过滤广告内容后的第一条搜索结果本文档来自技高网...
【技术保护点】
1.一种信息展示方法,其特征在于,包括:/n响应于信息展示请求,通过摄像组件获取图像信息,并在所述图像信息中确定手指位置;/n根据所述手指位置,确定手指的指向区域,并在所述指向区域中提取文字信息;/n根据所述文字信息获取匹配的扩展信息,并通过显示屏展示所述扩展信息。/n
【技术特征摘要】
1.一种信息展示方法,其特征在于,包括:
响应于信息展示请求,通过摄像组件获取图像信息,并在所述图像信息中确定手指位置;
根据所述手指位置,确定手指的指向区域,并在所述指向区域中提取文字信息;
根据所述文字信息获取匹配的扩展信息,并通过显示屏展示所述扩展信息。
2.根据权利要求1所述的方法,其特征在于,所述在所述指向区域中提取文字信息,包括:
通过光学字符识别技术,对所述指向区域中的图片和/或文本进行识别,以提取文字信息。
3.根据权利要求1所述的方法,其特征在于,所述根据所述文字信息获取匹配的扩展信息,包括:
根据所述文字信息进行云端搜索,并将搜索结果作为扩展信息。
4.根据权利要求3所述的方法,其特征在于,所述根据所述文字信息进行云端搜索,并将搜索结果作为扩展信息,包括:
根据所述文字信息以及语音信息,进行云端搜索,并将搜索结果作为扩展信息。
5.根据权利要求4所述的方法,其特征在于,所述语音信息为所述手指指向所述文本信息时,获取到的同步语音信息。
6.根据权利要求3-5中任一所述的方法,其特征在...
【专利技术属性】
技术研发人员:秦一锋,
申请(专利权)人:北京字节跳动网络技术有限公司,
类型:发明
国别省市:北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。