数据处理方法、边缘超融合端、云端及可读存储介质技术

技术编号:33374393 阅读:18 留言:0更新日期:2022-05-11 22:41
本公开公开了数据处理方法、边缘超融合端、云端及可读存储介质,可以采集边缘超融合端中各主机对应的数据信息,并根据这些数据信息,可以直接提取出对应各主机的日志内容的日志标签。在将这些数据信息和日志标签发送给云端后,可以直接使云端中存储的数据信号具有对应的日志标签,从而不用额外的采用人工方式添加日志标签。并且,云端可以利用提取出的日志标签,进行告警。进行告警。进行告警。

【技术实现步骤摘要】
数据处理方法、边缘超融合端、云端及可读存储介质


[0001]本公开涉及边缘超融合
,特别涉及数据处理方法、边缘超融合端、云端及可读存储介质。

技术介绍

[0002]随着全球信息化快速发展,以及系统用户全球化,很多互联网产品架构都会涵盖边缘端服务,以在地理位置上将服务与用户靠近。若每个边缘端都从零建设,需涉及组网、存储、算力等各方面内容,无疑会花费巨大的成本且内容重复。因此,一体化超融合机柜应运而生。通常,超融合机柜中会设置有多个主机,每个主机会产生日志,主机的日志会发送到云端。虽然云端能把日志统一展示处理,但需要人工在云端创建日志标签。而且无法识别日志中潜藏风险,并及时告警。

技术实现思路

[0003]本公开提供的数据处理方法、边缘超融合端、云端及可读存储介质,用于降低标签设置的难度。
[0004]本公开实施例提供一种数据处理方法,应用于边缘超融合端;其中,所述边缘超融合端包括多个超融合机柜,所述超融合机柜包括多个主机;
[0005]所述数据处理方法包括:
[0006]采集所述边缘超融合端中各主机对应的数据信息;其中,所述数据信息包括各所述主机的日志内容以及各所述主机对应的环境变量;
[0007]根据所述数据信息,提取对应各所述主机的日志内容的日志标签;
[0008]将各所述主机的日志内容和所述日志标签,发送给云端,以使所述云端存储各所述主机的日志内容和所述日志标签,并使所述云端根据所述日志标签,进行告警。
[0009]本公开实施例的有益效果如下:
[0010]本公开实施例提供的应用于边缘超融合端的数据处理方法,可以采集边缘超融合端中各主机对应的数据信息,并根据这些数据信息,可以直接提取出对应各主机的日志内容的日志标签。在将这些数据信息和日志标签发送给云端后,可以直接使云端中存储的数据信号具有对应的日志标签,从而不用额外的采用人工方式添加日志标签。并且,云端可以利用提取出的日志标签,进行告警。
[0011]在一些示例中,所述日志标签包括:环境变量中的主机IP、Logback日志中的日志等级、主机所属机柜的ID以及prometheus调用uri参数workspaceId中的至少一种。
[0012]在一些示例中,所述日志内容包括:业务系统日志数据、开源组件日志数据以及操作系统日志数据中的至少一种。
[0013]本公开实施例提供的一种数据处理方法,应用于云端;
[0014]所述数据处理方法包括:
[0015]接收来自边缘超融合端发送的各主机的日志内容和所述日志标签并存储;
[0016]对各所述日志标签配置对应的告警信息;
[0017]在所述日志标签对应的告警信息满足告警条件时,进行告警。
[0018]本公开实施例的有益效果如下:
[0019]本公开实施例提供的应用于云端的数据处理方法,可以自动识别边缘端故障或对潜藏故障进行预判,在需要进行告警时通知运维人员,以使运维人员可根据实际需要,配置关键故障,过滤次要故障。
[0020]在一些示例中,在所述日志标签对应的告警信息满足告警条件时,采用预设的告警发送频道,进行告警。
[0021]在一些示例中,所述告警发送频道包括:短信、电话、邮件、站内信、企业微信中的至少一种。
[0022]在一些示例中,所述数据处理方法还包括:
[0023]在进行告警的同时,调取满足所述告警条件的日志标签对应的日志内容。
[0024]本公开实施例提供的一种边缘超融合端,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述数据处理方法。
[0025]本公开实施例提供的一种云端,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述数据处理方法。
[0026]本公开实施例提供的一种可读存储介质,所述可读存储介质存储有计算机可执行指令,所述计算机可执行指令用于使计算机执行上述数据处理方法。
附图说明
[0027]图1为本公开实施例中的数据处理方法的一些流程图;
[0028]图2为本公开实施例中的数据处理方法的另一些流程图;
[0029]图3为本公开实施例中的具体实施例的交互图;
[0030]图4为本公开实施例中的具体实施例的框架图;
[0031]图5为本公开实施例中的告警规则信息的一些示意图;
[0032]图6为本公开实施例中的变量集的一些示意图;
[0033]图7为本公开实施例中的动作集的一些示意图;
[0034]图8为本公开实施例中发送站内信的一些示意图。
具体实施方式
[0035]为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例的附图,对本公开实施例的技术方案进行清楚、完整地描述。显然,所描述的实施例是本公开的一部分实施例,而不是全部的实施例。并且在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合。基于所描述的本公开的实施例,本领域普通技术人员在无需创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
[0036]除非另外定义,本公开使用的技术术语或者科学术语应当为本公开所属领域内具有一般技能的人士所理解的通常意义。本公开中使用的“第一”、“第二”以及类似的词语并
不表示任何顺序、数量或者重要性,而只是用来区分不同的组成部分。“包括”或者“包含”等类似的词语意指出现该词前面的元件或者物件涵盖出现在该词后面列举的元件或者物件及其等同,而不排除其他元件或者物件。“连接”或者“相连”等类似的词语并非限定于物理的或者机械的连接,而是可以包括电性的连接,不管是直接的还是间接的。
[0037]需要注意的是,附图中各图形的尺寸和形状不反映真实比例,目的只是示意说明本公开内容。并且自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。
[0038]通常,边缘超融合端可以包括多个超融合机柜,超融合机柜位于全国各地边缘端,并且所述超融合机柜包括多个主机。主机可以实现业务系统的功能、开源组件的功能,操作系统的功能。在本公开实施例中,如图1所示,一种应用于边缘超融合端的数据处理方法,可以包括如下步骤:
[0039]S110、采集边缘超融合端中各主机对应的数据信息。其中,数据信息包括各主机的日志内容以及各主机对应的环境变量。示例性地,日志内容可以包括:业务系统日志数据、开源组件日志数据以及操作系统日志数据中的至少一种。
[0040]S120、根据数据信息,提取对应各主机的日志内容的日志标签。示例性地,日志标签可以包括:环境变量中的主机IP、Logback日志中的日志等级、主机所属机柜的ID以及prometheus调用uri参数workspaceId中的至少一种。示例性地,prometheus调用uri参数可以包括:workspaceId(工本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法,其特征在于,应用于边缘超融合端;其中,所述边缘超融合端包括多个超融合机柜,所述超融合机柜包括多个主机;所述数据处理方法包括:采集所述边缘超融合端中各主机对应的数据信息;其中,所述数据信息包括各所述主机的日志内容以及各所述主机对应的环境变量;根据所述数据信息,提取对应各所述主机的日志内容的日志标签;将各所述主机的日志内容和所述日志标签,发送给云端,以使所述云端存储各所述主机的日志内容和所述日志标签,并使所述云端根据所述日志标签,进行告警。2.如权利要求1所述的数据处理方法,其特征在于,所述日志标签包括:环境变量中的主机IP、Logback日志中的日志等级、主机所属机柜的ID以及prometheus调用uri参数workspaceId中的至少一种。3.如权利要求2所述的数据处理方法,其特征在于,所述日志内容包括:业务系统日志数据、开源组件日志数据以及操作系统日志数据中的至少一种。4.一种数据处理方法,其特征在于,应用于云端;所述数据处理方法包括:接收来自边缘超融合端发送的各主机的日志内容和所述日志标签并存储;对各所述日志标签配置对应的告警信息;在所述日志标签对应的告警信息满足告警条件时,进行告警。5...

【专利技术属性】
技术研发人员:邓锦烨段云涌熊武谢绍航莫华森
申请(专利权)人:天翼云科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1