信息生成方法、装置和系统制造方法及图纸

技术编号:20680756 阅读:21 留言:0更新日期:2019-03-27 18:49
本申请实施例公开了信息生成方法、装置和系统。该方法的一具体实施方式包括:周期性的从慢查询数据队列中获取慢查询数据;对获取到的慢查询数据进行数据处理;将处理后的数据按照预设类别进行聚类,基于聚类结果,生成与预设类别对应的慢查询信息。该实施方式可以快速的定位出慢查询数据量过高的服务器、产生的时间等信息,有利于有效的对慢查询数据量过高的设备进行维护。

【技术实现步骤摘要】
信息生成方法、装置和系统
本申请实施例涉及计算机
,具体涉及信息生成方法和装置。
技术介绍
随着科学技术的发展,计算机领域的各种技术得到了广泛的应用。因此,对计算机处理数据能力的要求也越来越高。例如,在机器学习领域,需要对大量数据样本进行学习处理,以得到训练后的模型;再例如,在人脸识别领域,需要通过对人脸数据进行采集,然后利用模型重建技术实现人脸识别。相关数据处理领域中,当数据量过大时,通常会产生慢查询数据。当慢查询数据量过大时,通常会使得从数据库中查询数据的时间延迟,进而导致数据丢失或降低数据处理速度。
技术实现思路
本申请实施例提出了信息生成方法、装置和系统。第一方面,本申请实施例提供了一种信息生成方法,包括:周期性的从慢查询数据队列中获取慢查询数据;对获取到的慢查询数据进行数据处理;将处理后的数据按照预设类别进行聚类,基于聚类结果,生成与预设类别对应的慢查询信息。在一些实施例中,慢查询数据队列中的慢查询数据是由产生慢查询数据的服务器周期性的将预设时间间隔内生成的慢查询数据发送至慢查询数据队列中的。在一些实施例中,对获取到的慢查询数据进行数据处理,包括:对获取到的慢查询数据进行变量替换,得到与慢查询数据对应的定长字符;利用消息摘要算法对所得到的定长字符进行计算,得到计算后的数据。在一些实施例中,方法还包括:将处理后的数据和所生成的与预设类别对应的慢查询信息存储至数据库。在一些实施例中,方法还包括:接收查看慢查询信息的请求,请求包括与慢查询信息对应的类别;基于接收到的请求,从数据库中获取与所请求查看的类别对应的慢查询信息,以及呈现所获取的慢查询信息。第二方面,本申请实施例提供了一种信息生成装置,该装置包括:获取单元,被配置成周期性的从慢查询数据队列中获取慢查询数据;处理单元,被配置成对接收到的慢查询数据进行数据处理;生成单元,被配置成将处理后的数据按照预设类别进行聚类,基于聚类结果,生成与预设类别对应的慢查询信息。在一些实施例中,慢查询数据队列中的慢查询数据是由产生慢查询数据的服务器周期性的将预设时间间隔内生成的慢查询数据发送至慢查询数据队列中的。在一些实施例中,处理单元进一步被配置成:对获取到的慢查询数据进行变量替换,得到与慢查询数据对应的定长字符;利用消息摘要算法对所得到的定长字符进行计算,得到计算后的数据。在一些实施例中,信息处理装置还包括存储单元,存储单元被配置成将处理后的数据和所生成的与预设类别对应的慢查询信息存储至数据库。在一些实施例中,信息生成装置还包括呈现单元,呈现单元被配置成:接收查看慢查询信息的请求,请求包括与慢查询信息对应的类别;基于接收到的请求,从数据库中获取与所请求查看的类别对应的慢查询信息,以及呈现所获取的慢查询信息。第三方面,本申请实施例提供了一种信息生成系统,信息生成系统包括数据处理器和存储器,数据处理器与存储器通信连接;其中,存储器被配置成存储慢查询数据队列;数据处理器被配置成从慢查询数据队列中获取慢查询数据;对获取到的慢查询数据进行数据处理;将处理后的数据按照预设类别进行聚合,基于聚合结果,生成与预设类别对应的慢查询信息。在一些实施例中,信息生成系统还包括慢查询数据生成服务器,存储器与慢查询数据生成服务器通信连接;以及慢查询数据生成服务器被配置成:周期性的将预设时间间隔内生成的慢查询数据发送至慢查询数据队列中。在一些实施例中,存储器进一步被配置成:对获取到的慢查询数据进行变量替换,得到与慢查询数据对应的定长字符;对所得到的定长字符利用消息摘要算法进行计算,得到计算后的数据。在一些实施例中,信息生成系统还包括数据库服务器,所述处理器与所述数据库服务器通信连接;以及存储器进一步被配置成:将处理后的数据和所生成的与预设类别对应的慢查询信息存储至数据库服务器。在一些实施例中,存储器进一步被配置成:接收查看慢查询信息的请求,请求包括与慢查询信息对应的类别;基于接收到的请求,从数据库服务器中获取与所请求查看的类别对应的慢查询信息,以及呈现所获取的慢查询信息。第四方面,本申请实施例提供了一种电子设备,包括:一个或多个处理器;存储装置,其上存储有一个或多个程序,当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现如上述第一方面中任意实施例的方法。第五方面,本申请实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如上述第一方面中任意实施例的方法。本申请实施例提供的信息生成方法、装置和系统,可以首先获取慢查询数据,然后对接收到的慢查询数据进行处理,最后对处理后的数据按照预设类别进行聚类,生成与各类别对应的慢查询信息,从而使得用户可以快速的定位出慢查询数据量过高的服务器、产生的时间等信息,有利于有效的对慢查询数据量过高的设备进行维护。附图说明通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:图1是本申请的一个实施例可以应用于其中的示例性系统架构图;图2是根据本申请的信息生成方法的一个实施例的流程图;图3-图5是根据本申请的信息生成方法的一个应用场景所示的慢查询信息的示意图;图6是根据本申请的信息生成装置的一个实施例的结构示意图;图7是根据本申请的信息生成系统的一个实施例的时序图;图8是适于用来实现本申请实施例的服务器的计算机系统的结构示意图。具体实施方式下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关专利技术,而非对该专利技术的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关专利技术相关的部分。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。图1示出了可以应用本申请的信息生成方法或信息生成装置的实施例的示例性系统架构100。如图1所示,系统架构100可以包括第一服务器101、102、103、网络104和第二服务器105。网络104用以在第一服务器101、102、103和第二服务器105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。第一服务器101、102、103可以为用于对终端中安装的应用提供支持的第一服务器。例如,对地图类应用、搜索类应用、购物类应用等应用提供支持的服务端。该第一服务器101、102、103可以根据其自身的承载量会产生慢查询数据。该慢查询数据为查询超过指定时间的数据。第一服务器101、102、103可以是硬件,也可以是软件。当第一服务器为硬件时,可以实现成多个服务器组成的分布式服务器集群,也可以实现成单个服务器。当第一服务器为软件时,可以实现成多个软件或软件模块(例如用来提供分布式服务),也可以实现成单个软件或软件模块。在此不做具体限定。第二服务器105可以是用于进行数据处理的数据处理服务器。第二服务器105可以对获取到的第一服务器101、102、103产生的慢查询数据进行处理,然后将处理后的数据按照预设类别进行聚合,最终生成慢查询信息。需要说明的是,第二服务器可以是硬件,也可以是软件。当第二服务器为硬件时,可以实现成多个服务器组成的分布式服务器集群,也可以实现成单个服务器。当第二服务本文档来自技高网...

【技术保护点】
1.一种信息生成方法,包括:周期性的从慢查询数据队列中获取慢查询数据;对获取到的慢查询数据进行数据处理;将处理后的数据按照预设类别进行聚类,基于聚类结果,生成与所述预设类别对应的慢查询信息。

【技术特征摘要】
1.一种信息生成方法,包括:周期性的从慢查询数据队列中获取慢查询数据;对获取到的慢查询数据进行数据处理;将处理后的数据按照预设类别进行聚类,基于聚类结果,生成与所述预设类别对应的慢查询信息。2.根据权利要求1所述的方法,其中,所述慢查询数据队列中的慢查询数据是由产生慢查询数据的服务器周期性的将预设时间间隔内生成的慢查询数据发送至所述慢查询数据队列中的。3.根据权利要求1所述的方法,其中,所述对获取到的慢查询数据进行数据处理,包括:对获取到的慢查询数据进行变量替换,得到与慢查询数据对应的定长字符;利用消息摘要算法对所得到的定长字符进行计算,得到计算后的数据。4.根据权利要求1所述的方法,其中,所述方法还包括:将处理后的数据和所生成的与所述预设类别对应的慢查询信息存储至数据库。5.根据权利要求4所述的方法,其中,所述方法还包括:接收查看慢查询信息的请求,所述请求包括与慢查询信息对应的类别;基于接收到的请求,从所述数据库中获取与所请求查看的类别对应的慢查询信息,以及呈现所获取的慢查询信息。6.一种信息生成装置,包括:获取单元,被配置成周期性的从慢查询数据队列中获取慢查询数据;处理单元,被配置成对接收到的慢查询数据进行数据处理;生成单元,被配置成将处理后的数据按照预设类别进行聚类,基于聚类结果,生成与所述预设类别对应的慢查询信息。7.一种信息生成系统,所述信息生成系统包括数据处理器和存储器,所述数据处理器与所述存储器通信连接;所述存储器被配置成存储慢查询数据队列;所述数据处理器被配置成从所述慢查询数据队...

【专利技术属性】
技术研发人员:刘子凡高新刚孙文晖赵越刘启荣
申请(专利权)人:北京京东金融科技控股有限公司
类型:发明
国别省市:北京,11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1