数据处理方法、设备、系统及存储介质技术方案

技术编号:28564806 阅读:32 留言:0更新日期:2021-05-25 18:01
本申请实施例提供一种数据处理方法、设备、系统及存储介质。在数据处理系统中,基于边缘节点和数据处理节点的交互,可在数据处理系统中存在服务间访问操作时,根据服务间访问操作对应的报文获取数据处理系统中不同服务的关联关系。该关联关系根据数据处理系统的实际运行过程动态地获取,可较为精确地反应数据处理系统实际运行时不同服务的依赖关系,有利于对数据处理系统的运维操作进行有效的指导和预警。

【技术实现步骤摘要】
数据处理方法、设备、系统及存储介质
本申请涉及数据处理
,尤其涉及一种数据处理方法、设备、系统及存储介质。
技术介绍
云计算环境通过分布式部署,把网络、计算、存储等资源集成为一个统一可运营的系统。对具有高集成度的云数据处理系统进行运维的过程中,需获取云数据处理系统中各个云产品、组件或者云服务之间的依赖关系。现有技术中,获取到的不同云服务之间的依赖关系,通常是设计时的云服务静态依赖关系。这种静态依赖关系无法准确地反应云服务运行时的依赖关系,不利于云数据处理系统的运维。因此,一种解决方案亟待提出。
技术实现思路
本申请的多个方面提供一种数据处理方法、设备、系统及存储介质,用以获取较为精确的服务依赖关系。本申请实施例提供一种数据处理系统,包括:边缘节点以及数据处理节点;其中,所述边缘节点,用于:获取数据处理系统中的至少一个服务间访问操作各自对应的访问数据,并将其提供给所述数据处理节点;所述数据处理节点,用于:根据所述至少一个服务间访问操作各自对应的访问数据,获取至少一组存在访问依赖关系的服务,并根据所述至少一本文档来自技高网...

【技术保护点】
1.一种数据处理系统,其特征在于,包括:边缘节点以及数据处理节点;/n所述边缘节点,用于:获取数据处理系统中的至少一个服务间访问操作各自对应的访问数据,并将其提供给所述数据处理节点;/n所述数据处理节点,用于:根据所述至少一个服务间访问操作各自对应的访问数据,获取至少一组存在访问依赖关系的服务,并根据所述至少一组存在访问依赖关系的服务,获取所述数据处理系统中的服务关联关系。/n

【技术特征摘要】
1.一种数据处理系统,其特征在于,包括:边缘节点以及数据处理节点;
所述边缘节点,用于:获取数据处理系统中的至少一个服务间访问操作各自对应的访问数据,并将其提供给所述数据处理节点;
所述数据处理节点,用于:根据所述至少一个服务间访问操作各自对应的访问数据,获取至少一组存在访问依赖关系的服务,并根据所述至少一组存在访问依赖关系的服务,获取所述数据处理系统中的服务关联关系。


2.根据权利要求1所述的系统,其特征在于,所述数据处理节点包括:监控子节点以及数据分析子节点;
所述边缘节点,具体用于:获取所述至少一个服务间访问操作各自对应的报文,并将其镜像同步至所述监控子节点;
所述监控子节点,用于:从所述至少一个服务间访问操作各自对应的报文中,提取所述至少一个服务间访问操作各自对应的服务标识信息,并将其发送至所述数据分析子节点;
所述数据分析子节点,用于:根据所述至少一个服务间访问操作各自对应的服务标识信息,识别至少一组存在访问依赖关系的服务,并根据所述至少一组存在访问依赖关系的服务,计算所述数据处理系统中的服务关联关系。


3.根据权利要求2所述的系统,其特征在于,所述监控子节点,具体用于:
从所述数据处理系统中的任一服务间访问操作对应的报文中,提取出与所述服务间访问操作关联的网元组信息,作为所述服务间访问操作对应的服务标识信息。


4.根据权利要求3所述的系统,其特征在于,所述数据分析子节点,具体用于:
根据所述网元组信息,确定发起所述服务间访问操作的源服务以及所述服务间访问操作请求访问的目的服务,作为一组存在访问依赖关系的服务。


5.根据权利要求3或4所述的系统,其特征在于,所述网元组信息,包括:源IP地址、源端口、目的IP地址以及目的端口。


6.根据权利要求2-4任一项所述的系统,其特征在于,还包括:显示节点;
所述数据分析子节点,还用于:根据所述服务关联关系,绘制服务关系网络拓扑图,并将所述服务关系网络拓扑图发送至所述显示节点;
所述显示节点,用于展示所述服务关系网络拓扑图。


7.根据权利要求5所述的系统,其特征在于,所述数据处理节点还包括:决策子节点;
所述决策子节点,用于:根据所述数据处理系统中的服务关联关系,预测所述数据处理系统中的任一服务的运维影响数据;所述运维影响数据包括所述服务的运维操作对其他服务的影响程度;
所述显示节点,还用于:在所述服务关系网络拓扑图上突出展示所述数据处理系统包含的任一服务的运维影响数据。


8.一种数据处理方法,其特征在于,包括:
获取数据处理系统中的至少一个服务间访问操作各自对应的访问数据;
根据所述至少一个服务...

【专利技术属性】
技术研发人员:杨正广柴壮刘希
申请(专利权)人:阿里巴巴集团控股有限公司
类型:发明
国别省市:开曼群岛;KY

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1